인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
궁금하네
-
3합6 최저를 맞추려면 국어, 수학 둘 중 하나를 4등급 맞아야 하는데 머가 더...
-
-
어이가 없네 2
어삼은 있네
-
목동도 쫌 와봐라ㅠ
-
개재밌다 ㄹㅇ
-
후기좀
-
엠스킬 0
불후의 개념 완강 햇는데 기출이랑 병행 하는게 좋나요 엠스킬 먼저 하는게 좋나요
-
정시 수시 고민 0
외곤데 수시로 3.극초 나와서 설대 종교학과 쓸거 같은데 설대 자전이 너무 가고...
-
시대반수반가기
-
경희대 가능? 2
3모 23221 백분위 90 79 2 93 99 5모 23322 백분위 92 81...
-
기하인강 둘 중에서 하나 들으려는데 뭐가 더 괜찮나요
-
요즘 현우진이랑 옛날 현우진 너무 다르네 ..ㅋㅋ 요즘엔 그냥 로봇같은데 옛날엔...
-
이야기 잘 돼서 규모 키워사 다시 일하기로 했었다가 다시 사직 ㅋㅋㅋㅋ죄송합니다...
-
진짜 에펨이랑 디시나 유튜브 축구 쇼츠 같은거 1년동안 들어가면 안 될듯 가뜩이나...
-
결승전 진출자가 아예 겜 던짐ㅋㅋㅋ 1라운드 3라운드 다 던져서 이기는게 레전드...
-
재미도 없는데 깨작깨작 할말은 다하고 수업도 졸라 느긋하게 나가다가 오버하는건 좀...
-
감귤 먹는 시골쥐의 우당탕탕 육지 여행기 1(부산) 16
***사진 많아요. 데이터 & 스압 주의*** 때는 저저저번주 어느 날, 뭔가...
-
26학년도 6평대비 사피엔스 모의고사 풀이(해설용) 5
30분 재서 시험본 건 따로 있는데 그건 부끄러워서 못 올릴 듯.. 문제시 삭제
-
3678x, 90543, 28176 선착순 1명 천덕
-
외가가 외할아버지랑 외할머니 두 분 다 전라도 분이셔서 전라도 사투리랑 서울말...
-
개념적고 마더텅 수특딸깍으로2등급가능한사탐뭐있어요?
-
만약 못풀었다면 1 3 5중에 하나 찍으셈 근데 27번이랑 번호 안겹치게+ 하나도...
-
7모 전까지 한바퀴 겨우 돌릴 수 있을 듯 막상 공부하면 재밌긴 함
-
AI에게 먹일 샘플 o4-mini 10초만에 다읽고 45개중에 제대로 읽은 OMR...
-
똥컴 4
누가 같은 한컴파일을 아이패드로 pdf 변환한거내가노트북으로한거 컴퓨터아니야
-
브레턴이 마지막 경제지문이라는데 킬러이슈 때문임?
-
꼭 수능에 나와서 통수치는듯..? 혹은 무조건 나온다 하는 게 안나오거나 예상을...
-
아니 나 제주도 사투리랑 경상도 전라도 사투리랑 섞였나봐 10
어카디 근디 시방 너무 배고픈디 뭐먹을까
-
왜 다 이과야 9
그러고보니 여긴 왜 다 이과야 왜 다 공돌이나 의돌이임 왜 문돌이 사대지망은 없는거임...?
-
화학 0
4덮 5모에 냈으면 1컷 38-39나왓을듯 진심으로
-
대학가면 롤 많이함? 11
어때요? 아직도 인기많나
-
특히 국어가 궁금합니다
-
물2 바이럴 14
하고다님 5모 표점 보라고 근데 수요는 없음
-
13354 5687x 43521 find x
-
하이호 드북 1
"하이호" 처음 만나서 반갑다는 인사이다. 하이호 하이호 하이호 하이호 하이호!...
-
맞음
-
안된다고 함..?? 글고 6모 신청했는데 이렇게 전에 퇴소하면 6모도 못봄..?ㅠㅠ
-
표점 말고 백분위도 낮은 건가요??? 깡표점 안 쓰는 대학도 동사 하면 불리해요?
-
이걸로 다시 메가패스 삿는데 이거 완전 호텔경제학 아니야?
-
수학글 쓰면 한 5분뒤에 하나 달림
-
중딩 때 학원 가면 집중 안된다고 혼자 공부해서 모든 시험 전교 2등 유지 후...
-
주황색으로 가자
-
학교가서 자는거 힘든데
-
-
너는 옯붕이잖아 그러기 위해 태어난 거잖아
-
틀린문제 2주정도 시간두고 3번풀고 모르겠으면 해설 보라는데 걍 모르겠어서 틀린...
-
목이 메어와~
-
진짜 있나요?
-
독서론, 독서 3지문, 문학4지문, 선택 각각 몇 분 걸리시는지 좀..
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.