인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
고고
-
갑자기 생각남... 갈 때가 됐나봄
-
재종담임쌤에 의해서
-
시대인재 외 학원에서 파는 시대컨은 모두 전국용인가요? 4
짭시대컨 말고 찐시대컨 사려면 비재원생은 시대인재on뿐인가요?
-
가입 사유 8
문항 공유
-
개빡침 2
독서실에서 수학 모고 ㅈㄴ 풀집중으로 풀고있는데 갑자기 엄마랑 동생이 연락도없이...
-
22번이랑 28번 다시 풀어도 틀렸어 어렵긴 어려웠는데 어케 컷 85냐
-
5모 ㄹㅇ 7모보다 훨 어려운거같은데
-
진짜 왜였지??
-
동아리 친구가 찐이라던데 동아리원들끼리도 여행 가고 그러나여
-
갠적인 의견이긴 한데 뭔가 미적재능러들은 저걸 바로 떠올린다고? 이 느낌이면...
-
그거를 되찾으려면 내년에 서울대를 가야 합니다….
-
오늘 겅부 끝 3
사다리운명론
-
공부질문 ㄷㄷㄷㄷㄷㄷ
-
확률 이거 맞는거 같아요 기대값(?)이 37037이니까 1분에 30번이 최대니까...
-
설거지 끝 4
아빠가 후라이팬이랑 집게 같은거 싱크대에 안 놓고 요리하고 그냥 가스레인지쪽에 놨둬서 두번함 ㅠㅠ
-
우석햄 키사마!!!!
-
우끼끼
-
비상 3
님들 베스킨라빈스 사랑에 빠진 딸기 단종되는거 알고 있었나요
-
메이플도 확률은 공개해놨는데...
-
하......글 쓰고 싶다.... ㅈㄴ게 댓글 달고 다니고 싶다..... 손이...
-
비호감 고닉 탈릅했네 19
...
-
책상이 넓은 곳이면 더 좋을듯영
-
프사가 이렇게 나뉘네 11
애니 프사, 기본 오르비 프사, 유명인 사진 프사, 동물 프사, 그 외
-
7모 20번 딱 보면서 몇번 해보니까 어라 혹시 극대일때가 경계인가 싶었는데 확신이...
-
무슨 시간대에 하시나요? 저는 원래 저녁에 했는데 너무 하기 싫어서 점심이후로...
-
누나나 나나 힘들구나.......... 근데 속상해도 어떡하냐 인생은 원래 비극인데...
-
수능 한달전에 피씨방가서 겜하기
-
민심테스트 4
봄 조이고
-
18개...
-
이름ㅈㄴ 묵직하네
-
설거지 11
당첨
-
생각해보면 그냥 자기 말이 맞는 줄 아는 경우가 대다수인듯
-
인생업적 3
김도영 마킹
-
킹콩T 19+9 들어라
-
지듣노 ㅊㅊ 2
들을수록 ㄹㅇ ㅈ쩌네ㅋㅋ 거의 요아소비 극초기 폼인데ㅋㅋ
-
전보단 나은가..
-
한화 빠는 저능아새끼라고 쪽지왔음 음 그건 팩트군
-
ㅠㅠㅠㅠㅠㅠ
-
냥품타 강퇴당하면 해야겠다
-
제가 솔직히 확실하게 adhd인것 같거든요 공부할때도 그냥 강의 보다보면 혼자...
-
아시는 분~
-
수고햇다고 나데나데해주는 미소녀가 업음... 공부의욕이안남..
-
새내기 때 강의실에 마음이 드는 친구 있으면 가서 말걸어서 친해지는 건가요 연대는...
-
기출 1회독도 못 끝낸 상황임 문학 연계 공부할 시간 부족할 거 같은데 대비 어케...
-
인생최대업적 4
무신사 플레티넘
-
흠 3
옆집 철수가 레즈는 싫어하는데 레즈물은 좋아한데요. 이게 뭔 개소리죠?
-
는 넝담 ㅋ 100명의 팔로워분들 안녕히계세요
-
센츄,에피 쉽게얻는법 12
1.센츄,에피를 찾아간다 2. 내 영혼을 몸에 넣는다 3.센츄에피 되기 끝! 유익하셨나요
-
연봉 15억인 놈은 야구룰을 몰라서 창조병살당하질않나 수비원툴 유격수는 한 5번...
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.