국어) 수특 독서 지문 정정 재신청
게시글 주소: https://orbi.kr/00073468774
처음에 너무 두서없이 썼는지 반려되어서, 다시 쓴 김에 오르비에도 올립니다.
==========
사진은 순서대로 MRP, MDP, 그리고 수능특강의 <그림>입니다.
<그림>이 MRP와 MDP 중 무엇과 더 유사한지 살펴봐 주시기 바랍니다.
MRP와 MDP 사진 출처는 구글 딥마인드 유튜브 채널의 RL Course 강의자료입니다:
https://m.youtube.com/watch?v=lfHX2hHRMVQ&pp=0gcJCf0Ao7VqN5tD
수능특강 지문에서는 <그림>을 MDP로 설명하고 있습니다.
MDP에서는 에이전트가 '상태 → 행동 → 상태'로 전이되고,
MRP에서는 에이전트가 '상태 → 상태'로 전이됩니다. MRP에는 행동이 없습니다.
그리고 <그림>을 보면 행동이 없습니다.
위 MDP에서 원은 상태를 뜻하고, 점은 행동을 뜻합니다.
가장 오른쪽 원(상태)에서, 왼쪽의 원(상태)들로 넘어가려면 행동을 거쳐야 합니다.
맨 아래 점이 하나 있죠? 'Pub'이라는 행동을 나타낸 것입니다.
그 행동의 결과로, 3개의 원(상태)로 전이될 확률이 각각 0.2, 0.4, 0.4로 주어져 있습니다.
지문의 서술을 보겠습니다.
'영어 공부' 상태에서는 2가지 행동 중 하나를 취할 수 있는데, 선택한 행동에 따라 다음 상태인 '카페', '운동'으로 이동할 확률, 즉 상태 변이 확률은 각각 0.4와 0.6으로 주어져 있다. 그리고 이때의 보상(R)은 각각 +1, +10이다.
아마 '카페 가기' 행동을 취해 '카페' 상태로 전이될 확률이 0.4이고,
'운동 가기' 행동을 취해 '운동' 상태로 전이될 확률이 0.6인 것으로 읽어야 할 듯합니다.
하지만, 행동은 상태 전이 확률에 따라 정해지는 것이 아닙니다. 지문에도 나와 있습니다.
정책은 각 상태에서 취할 행동의 묶음이다.
어떤 행동을 선택할 지는 에이전트가 정책으로 정합니다.
만약 '영어 공부' 상태에서 할 2가지 행동, 즉 행동1과 행동2가 있다면,
에이전트는 정책에 따라 행동1과 행동2 중 하나를 선택할 것이고,
그 결과 '카페'와 '운동' 상태로 전이될 '상태 전이 확률'이 행동1과 행동2 각각 따로 정해져 있어야 합니다.
예를 들어, 만약 두 행동이 '카페 가기'와 '운동 가기'일 때 에이전트가 '카페 가기' 행동을 선택했다면,
'카페' 상태로 전이될 확률과 '운동'으로 전이될 확률이 각각 주어져야 하는 것입니다.
그리고 만약 이 확률이 각각 0.4와 0.6이라면,
'카페 가기' 행동을 선택했을 때 '운동' 상태로 전이될 확률이 0.6이라는 의미가 됩니다.
만일 그렇지 않고 '카페' 행동을 선택했을 때 '카페' 상태로만 전이된다면,
상태 전이 확률은 0.4나 0.6이 아닌 1이어야 합니다.
또, MDP에서 보상은 행동에 주어지는 것이지, 상태에 주어지는 것이 아닙니다.
MDP를 보면, 'Pub'이라는 행동에 대해 보상 '+1'이 주어집니다.
그런데 지문의 <그림>을 보면, '카페'와 '운동' 상태에 각각 보상 '+1, +10'이 주어지는 것처럼 보입니다.
'카페 가기' 행동을 했는데 '운동' 상태로 전이되었을 경우를 생각해 보면,
<그림>과 지문 서술로 비추어서는 보상이 +1인지 +10인지 알 수가 없습니다.
보상은 '카페 가기' 행동에 주어져야 합니다.
==========
(이전 신청 건 EBS 답변)
안녕하세요. 회원님의 의견에 대한 답변을 드립니다.
제시문에서 행동과 그에 따른 보상을 설명하고 있으므로, <그림>에서의 상태 간 전이는 에이전트의 행동 선택에 따른 결과로 해석해야 합니다. 즉, 제시문의 설명에 따라 <그림>을 MDP로 이해하는 데 문제가 없다고 판단됩니다.
감사합니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
#04년생#05년생#07년생 인증O) 탈탈털린 짱르비 33 23
-
#공지#국어#독학생 9모 '두 출발' 떠 먹여드림 100 30
-
하 시발 한화 7 1
이제 언제 우승하냐
-
수능 전 마지막 2 2
친구랑 약속 끝 이제 공부만 하고 살아야지..... 우울 모드 on
-
[전인덕T] 2026수능 대비 '차수논리 및 S축' 무료배포 1 6
안녕하세요. 이투스 온라인 수능 수학 강사 전인덕 입니다. 고등학교 때 오르비에서...
-
범모 파이널 질문 0 0
사람들이 엄청나게 추천 많이해서 풀어봤는데… 감탄이 나오고 그런건 하나도 없고...
-
우승못하는게 정배긴했다 0 1
엘지 잘하는 팀이니까 뭐... 그렇지만 우승과 별개로 4차전같은건 다신 보기 싫다 진짜
-
그냥 내일 수능날이면 좋겠다 2 0
날이 가면갈수록 공부의지가 0에 수렴함
-
ㅋㅋㅋㅋㅋㅋㅋㅋㅋ 0 0
ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ
-
올해 한화는 그래도 잘한듯 0 0
한화 팬(2년 정도 이긴 한데) 입장에서 문동주 정우주 문현빈 같은 신인(이었던)...
-
고2 체력관리 질문 0 1
학교쌤이 순공 10시간(평일)은 찍어야 한다고 해서 지금 최대로 노력하고잇는데.....
-
지금까지 평가원 생윤기출중에 2 0
젤 어려웟던거 뭔가요??
-
짠과자 대 단과자 0 0
아 둘다 좋은데 난 단 거 으흐흐
-
보통 새로운 학년도 커리는 언제부터 나오나요?? 0 0
수능 끝나고 12월달쯤 나오나요??
-
사문황분들 도와주세요 3 0
제시문에 OO대학교 총동창회 이렇게 나오면 나타난 공식조직 쓰라고 할 때 OO대학교...
-
엘지트윈스 우승. 13 5
축하드립니다.
-
긴급)생활꿀팁 0 0
배스킨라빈스 패밀리->하프갤런 업그레이드 행사중 해피 할로윈
-
수강생아니면 못보나여 해설강의들 보고싶은데 방법없나요
-
원래같으면 웃고 너가 맞아 하고 넘어갈텐데 왤케 하나하나가 ㅈ같지
-
https://orbi.kr/00075281558/개인적으로%20자주%20사용하는%2...
-
기 받아가세요~~~
-
생윤 좀 알려주세요 3 0
1번 선지 뭐가 틀린 거임
-
아 롤마렵네 1 0
아
-
타당타당
-
ㄹㅇ 개버러지 모의고사 배포 6 1
성의없이 만들었으니까 풀던지 말던지
-
현우진 T의 수능 응원 17 4
편지? 같은 거 쓰실 때도 사각형 그리시네
-
[가장 현실적인 국어 칼럼] 2편: 대응과 추론 (Apocalypse II) 0 2
안녕하세요. 좋은 칼럼을 작성하기 위해 항상 노력하는 Apocalypse II...
-
결핍되어 있는 속성<<이거 ㄹㅇ잘만든 선지인듯 16 3
'결핍되어 있는 속성을 끊을 수 있는 수단' 에서 '결핍되어'<부정이니까 '결핍되어...
-
수잘알 분들 질문있습니당 3 1
2019 실시 고2 11월 나형 30번 문제인데 m<=0에서 g(m)이 연속이라는...
-
악어오름님 아시나요? 4 0
최저때문에 수학이 필요한데 이러면 국영이 무너질까요?.. 국어가 애매해서 국어도...
-
챔피언도 시스템도 하나도 모르는데 Lck랑 롤드컵은 봄 ㅈㄴ 재미있음
-
근데 이 자식들 1 1
28 30맞바꾸기 하는 건 아니겠지
-
실모가 너무 쉬우면 집중 안되던데 설맞이는 난이도 어떤가요?
-
같이 공부해야지
-
오즈 파이널 듣지 말걸 1 1
ㅈㄴ 재미없어서 효율 개떨어지고 거의다 아는 내용이라 시간만 버리고있네 차라리 기출이나 할껄
-
우울해 9 1
안아달라
-
월즈 승률 100% 7세트 전승 젠지한테찬물끼얹기장인 kt가 있는데?
-
빠답보지말고 일일이 답지 넘기면서 채점하셔야될듯 점수보고 런투마미할뻔..엉엉
-
평가원에서 0 1
함수방정식을 직접적으로 출제한 적이 있나여? 논술이나 사설에는 간혹 출제된 적이 있는 거 같던뎅
-
사문 기갈상 구분 어케함 12 0
개인의 능동적인 행위 ~~~~ 상상론 얘기하다가 끝에 그러한 과정은 사회질서가...
-
정법황분들 조언좀요.. 0 0
개념을 인강까지 들을 시간없어서 걍 완자개념서 사서 봤는데 개념빵꾸 많이 날까요.....
-
이제 메가에 쳐도 등급이 안뜨네유ㅠㅠㅠ 96점 백분위도 알고싶어요
-
롤 잘 몰라서 그러는데 3 0
롤 프로 선수들은 알바같은거 병행 아무도 안함?
-
지바 17회 0 0
20찍맞 45점인데 시간 너무부족하다
-
수리 논술 8 1
선택 과목이 확통이면 상위권 대학은 수리논술 응시 할 수 없나요? 대부분 미적이나...
-
지구2의 남다른 격이다른 품 0 0
이래서 지2하라는 거노
-
근데 lck팀한테는 질수 있거든요 ㅋㅋ,,ㅜㅜ
-
결승 티젠전 진짜 보고싶네 7 1
오랜 소원이다…
-
설모 2회 남았는데 12 2
다음에 풀 수학실모 추천좀
-
설맞이s1,2에 대해 0 0
요즘 기조를 잘 반영했으나 왤케 아쉽지ㅡㅡ 설맞이한테 기대하던 뭔가(?)가 안...
-
트레 9회 ㅈㄴ 어렵네 0 0
하 ㅅㅂ 추론형 다 못 푼 건 처음인 것 같은데
-
회 먹고 싶다 4 1
옛날에 한창 기생충 공부할 때는 그런 게 자꾸 생각났는데 요즘 기억나는 기생충이 거의 없어서 좋음
첫번째 댓글의 주인공이 되어보세요.