인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
모두 남페미되도 문제없는거 아닐까
-
성불드가자
-
세상이 공정했다면 0 0
내 수학실력 올라야하잖아 ㅅㅂ....
-
서울대 다니면 좋은점 2 0
어른들이 좋아함. 그거 말고 없음 ㅋㅋ
-
세상에 영원한 건 없다는데 2 0
영원한 것이 없다는 게 영원하지 않을 수도 잇는 거 아닌가 근데 그러면 영원한 건...
-
학벌은 마치.. 7 3
학벌은 마치 커다란 고추와 같아서 남들 앞에서 자랑하거나 마구 휘두르고 다니면...
-
국어는 씨발 재능이야 9 0
씨발
-
오늘이 무슨 날인지는 다들 아시죠?? 현행 헌법 전문에 명시되어 있는 '4.19...
-
제발도내SSS급쿨뷰티미소년이되게해다오..
-
조기교육도 보통 영어 수학을 많이 하던데 이제보니 이해안됨 12 1
제발 국어 국어를 하라고
-
인생은 공정함 6 0
하지만 미소녀한테는 더 공정함
-
그냥 정치인들이 입 바른 소리 하는 거지 모두가 만족하는 공정하고 공평한 세상?...
-
내신이 좆같은 이유 1 0
서술형 답안 좀 애매해도 몰아주고 싶은 애들 정답처리 하거나 걍 답안 고쳐쓰게...
-
그럼 이건 0 0
문과에서 이과 복전 안할 시 경희 국캠 건대
-
내년에도 서울대 아니면 상관없다던데 올해에 뜰 생각을 해야하는데 생각해보니
-
오르비를 위해서 회선개통해서 인증받나
-
뭐 생기부쪼가리 잘쓴순서로 뽑던가 고교등급제라도 하던가 둘중 하나인건가 흠
-
서울대 <<< 의치떨학교면 개추 7 12
네.
-
얘 미카리냐 1 2
자자 산화 준비해야지?
-
세상이 너무 예민해~ 0 0
안 그래도 사회가 복잡해지면서 생각할 것들이 엄청 늘어났는데 왜 사소한 거에 더...
-
정시 내신반영 꼽긴한데 3 1
결국 본인이 내신 던진 업보지 그리고 수시는 불공정해서 안된다 이러면 사실 할 수...
-
그냥 수시정시 구분없이 가려는게 장기적인 목표인가
-
이러면 내신 반영이 더 필수적이어서 정시에 수능 영향은 줄어들고 나중엔 폐지 논의 나오면서 사라질듯
-
???:어 형이야 0 2
-
연애하고싶다 4 2
산책나왓는데 커플 엄청 많네 ㅜㅜ
-
좀 편하게 살면 안되나 8 5
어차피 서울대를 가던 전남대를 가던 공대면 대기업 취업률이 입시판에서의 격차만큼...
-
좀 논란의 발언일 수 있는데 2 2
개인적으로 약간 pussy같은 행동 별로 안 좋아함 요즘 학교에 뭔 일이 있어서 갑자기 생각남
-
노베에서 5 0
올9등급에서 1년동안 43333으로 올렸는데 올해는 21311가능함? 물론 그렇게만들거임 ㅇㅇ..
-
알고보면 현실의 연인이었다면?!
-
숙명여고 사건 한번만 더 터져주면 정시 생존할듯 7 2
익명의 내부고발자 모집(0/1557)
-
그니까 서울대가 짖으라하면 짖어야 한다 이 말이죠? 0 1
왈왈
-
오르비에서 유일하게 싸워본것 3 4
윤어게인과의 치열한 일기토
-
생1 진입에 대하여... 10 0
작년 물리한테 쳐맞고 생1런이나 사탐런 생각하고있는데 목표만 높아서 과탐 포기가...
-
솔직히 내가 서울대보단 1 1
정시와 입시의 공정성에 대해 일가견이 높은 것 같음 정시 100+ (정시+ 수시)...
-
근데 난 사실 저격이고 뭐고 2 0
현생 살기도 바쁘다 취미 생활만 해도 하루가 훌쩍 지나가는..
-
아니찜닭 가격 뭐지 버근가 14 0
이건아니죠
-
배성민의 드리블 누가 막을건데 0 0
-
그나마 조국이 정시를 지금까지 호흡기꽂고 연장시켰다 봄 7 4
아니었음 지금 이미 관짝에 못질하고 화장까지 다 끝남
-
설대 내신반영 4 0
2학기까지 들어가네... 3학년 1학기에 2.9정도까지 맞추고 수시쓴다음 그...
-
치킨 한 사람당 한 마리아님? 4 1
나는 한 마리 먹고도 부족하던데...
-
솔직히 교육부나 교육학교수들보다 14 2
내가 수능과 입시공정성에대한 이해도가 높은거같은데
-
여르비 커밍아웃 ㅇㅇ
-
조선 대학 기준 SNU and other이 팩튼데 비하할 여지가 어딨음
-
메인에 대체 뭔일이... 1 0
하...밥먹는중이라 이따가 파악한다
-
아마도 이게 평균이겠죠
-
그렇더라고...
-
사랑받기 위해서가 아닐까 나는 인간이기에 끊임없이 사랑을 갈구해
-
떡밥 재밋는 현역 n수생 컴컴 7 3
좆된거같은데 공부하러가죠
-
잘했었는데.. 사1과1은 메리트가 없어 보여서 걍 사2박은건데 지1은 ㄹㅇ 좋아했던...
-
뭔 일이래 1 0
ㄹㅇ
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.