국어) 수특 독서 지문 정정 재신청
게시글 주소: https://orbi.kr/00073468774
처음에 너무 두서없이 썼는지 반려되어서, 다시 쓴 김에 오르비에도 올립니다.
==========
사진은 순서대로 MRP, MDP, 그리고 수능특강의 <그림>입니다.
<그림>이 MRP와 MDP 중 무엇과 더 유사한지 살펴봐 주시기 바랍니다.
MRP와 MDP 사진 출처는 구글 딥마인드 유튜브 채널의 RL Course 강의자료입니다:
https://m.youtube.com/watch?v=lfHX2hHRMVQ&pp=0gcJCf0Ao7VqN5tD
수능특강 지문에서는 <그림>을 MDP로 설명하고 있습니다.
MDP에서는 에이전트가 '상태 → 행동 → 상태'로 전이되고,
MRP에서는 에이전트가 '상태 → 상태'로 전이됩니다. MRP에는 행동이 없습니다.
그리고 <그림>을 보면 행동이 없습니다.
위 MDP에서 원은 상태를 뜻하고, 점은 행동을 뜻합니다.
가장 오른쪽 원(상태)에서, 왼쪽의 원(상태)들로 넘어가려면 행동을 거쳐야 합니다.
맨 아래 점이 하나 있죠? 'Pub'이라는 행동을 나타낸 것입니다.
그 행동의 결과로, 3개의 원(상태)로 전이될 확률이 각각 0.2, 0.4, 0.4로 주어져 있습니다.
지문의 서술을 보겠습니다.
'영어 공부' 상태에서는 2가지 행동 중 하나를 취할 수 있는데, 선택한 행동에 따라 다음 상태인 '카페', '운동'으로 이동할 확률, 즉 상태 변이 확률은 각각 0.4와 0.6으로 주어져 있다. 그리고 이때의 보상(R)은 각각 +1, +10이다.
아마 '카페 가기' 행동을 취해 '카페' 상태로 전이될 확률이 0.4이고,
'운동 가기' 행동을 취해 '운동' 상태로 전이될 확률이 0.6인 것으로 읽어야 할 듯합니다.
하지만, 행동은 상태 전이 확률에 따라 정해지는 것이 아닙니다. 지문에도 나와 있습니다.
정책은 각 상태에서 취할 행동의 묶음이다.
어떤 행동을 선택할 지는 에이전트가 정책으로 정합니다.
만약 '영어 공부' 상태에서 할 2가지 행동, 즉 행동1과 행동2가 있다면,
에이전트는 정책에 따라 행동1과 행동2 중 하나를 선택할 것이고,
그 결과 '카페'와 '운동' 상태로 전이될 '상태 전이 확률'이 행동1과 행동2 각각 따로 정해져 있어야 합니다.
예를 들어, 만약 두 행동이 '카페 가기'와 '운동 가기'일 때 에이전트가 '카페 가기' 행동을 선택했다면,
'카페' 상태로 전이될 확률과 '운동'으로 전이될 확률이 각각 주어져야 하는 것입니다.
그리고 만약 이 확률이 각각 0.4와 0.6이라면,
'카페 가기' 행동을 선택했을 때 '운동' 상태로 전이될 확률이 0.6이라는 의미가 됩니다.
만일 그렇지 않고 '카페' 행동을 선택했을 때 '카페' 상태로만 전이된다면,
상태 전이 확률은 0.4나 0.6이 아닌 1이어야 합니다.
또, MDP에서 보상은 행동에 주어지는 것이지, 상태에 주어지는 것이 아닙니다.
MDP를 보면, 'Pub'이라는 행동에 대해 보상 '+1'이 주어집니다.
그런데 지문의 <그림>을 보면, '카페'와 '운동' 상태에 각각 보상 '+1, +10'이 주어지는 것처럼 보입니다.
'카페 가기' 행동을 했는데 '운동' 상태로 전이되었을 경우를 생각해 보면,
<그림>과 지문 서술로 비추어서는 보상이 +1인지 +10인지 알 수가 없습니다.
보상은 '카페 가기' 행동에 주어져야 합니다.
==========
(이전 신청 건 EBS 답변)
안녕하세요. 회원님의 의견에 대한 답변을 드립니다.
제시문에서 행동과 그에 따른 보상을 설명하고 있으므로, <그림>에서의 상태 간 전이는 에이전트의 행동 선택에 따른 결과로 해석해야 합니다. 즉, 제시문의 설명에 따라 <그림>을 MDP로 이해하는 데 문제가 없다고 판단됩니다.
감사합니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
단 30일만에 독해력 비약적으로 끌어 올리기 [칼럼] 0
안녕하세요. 소테리아의 길 입니다. 수능 전 마지막 모의고사인, 9월 모의고사를...
-
이런적이 잘 없어서 모르는데 원래 등급컷 98이니 쉽니어렵니 96이니 하면서 갈드컵 안함?
-
너무높다
-
-
수능때까지 2개로 줄이고 싶어요
-
5~6등급도 넣으면 면접은 보게 해주나
-
시험장 나옴 2
약도 못 챙겨서 아픈채로 응시하다가 국어 언매에서 개털리고 38 맞춰놓고 39틀림...
-
진짜로 이제는 탈릅하고 독재가야겠다.
-
고2 국어 0
이번에 국어 9모 난이도 어려운 편이였나요? 이번에 저는 시간이 부족했어서..
-
23시즌의 영광을 다시?
-
보기 깔끔하다곤 안했다 ㅋ
-
최근 사회 이슈 따라 가는 듯한 느낌? 가령 이번 9모만 해도 독서 챗지피티,...
-
독서 지문에 '인지적 낯섬'이 없어서 선지 꼬아내기에 한계가 있음 1
과거 기출 소재랑 최근 기출 소재만 비교해봐도 지문이 옆동네 친한 형 느낌임...
-
8덮 국수 등급 0
국어 83 수학 73 등급좀 알려주세요
-
내 실력에 인강 안 타면 안 될 듯 언매 문학이면 강민철인가
-
9모 기하 해설 0
높이비 1:3이고 사인비 1:3이니까 빗변비같다.. 나머지는 직각 닮음 이용한 계산...
-
수학 난도 오떰 0
공통은 또 쉬움? 불미적 평가하 물확통인가
-
ㅇ
-
요즘 국어는 이런것도 나오네요
-
아.... 3
갑시다
-
-
3점 다쉬운건 첨이다 ㄷㄷ
-
단일 신경망에 주기적으로 변이를 가하면 그 신경망에 랜덤한 함수들이 생겨난다 그...
-
9망수잘에서 7
9망을 성공햇으니까 수잘만 띄우면됨
-
??
-
ㅇㅇ
-
살자 마렵다 1
중력가속도 최대로 받고싶네
-
2컷 예상하고 가주시면 감사하갯습니다
-
평가원이 민심테스트 하는 중인듯
-
내일 공강임 3
왜냐면 모레가 시험이거든
-
3번 아니에요?????
-
이번 국어 ㄹㅈㄷ네요 13
체감상 2024 수능 재림? 그정도 ㄷㄷ;;; 선지 하나하나가 말장난을 해놔서 이...
-
내가 3이라 써놓고 나중에 5라읽음 내가 7이라 써놓고 나중에 11이라 읽음...
-
ㅇㅇㅇㅇㅇㅇㅌㅇㅇㅇㅇㅇㅇㅇㅇㅇㅇㅇㅇㅇㅇㅇㅇㅇ
-
빈순삽 답 공유좀
-
영어 망해도 됨 0
뛰어내리면 그만이야
-
공통만 3틀인데
-
3뜨면 다시 다니던 대학교 복귀하러감
-
딱 9모보기 전에 맛있게 예방주사 했네
-
국어4틀인데 2개 화작이고 이씨발수학년은 공통3개나가리 아오씨발진짜
-
푼 거 4개 틀리고 3지문은 다 틀림 기분 좋아야하나
-
기하 0
76 몇등급 나올가요
-
첨에 보고 음? 싶엇음 ㅋㅋㅋㅋㅋ
-
어떠신가요???
-
ㅅ 1 ㅂ 몇 등급..?
-
ㄹㅇ병신인가
-
확통런은 성공했다
-
2로밀었는데 답아는사람?
-
약간 변형시킨 것 같지만 아케인 같은데
-
영어공부 열심히하고 제대로 빡집중해서 쳐본게 너무 오랜만이라 이게 쉬운건지...
첫번째 댓글의 주인공이 되어보세요.