인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
왜나빼고자 0
재워준다먀재워준다먀재워준다먀재워준다먀재워준다먀재워준다먀재워준다먀재워준다먀재워준다먀재워...
-
얜 1구 전용 케이슨데 7만원밖에 안함 얘넨 개이쁜데 27만원임
-
야 술깼다 1
보통 자의로 마시진 않지만 그만마실게요
-
시험 4시간 전 0
치타 기상 완료
-
여유가없는데어떻게관심을쏟고연애를해
-
크아아아아악
-
교 수 님 2
에 이 주 세 요 에쁠이면 더 좋고
-
다시 시작 4시간의 전사는 달린다
-
D-6인데 완성된 과목이 없음...................... 화2생2는...
-
롤슈 떴구나 0
만델라 엔딩이라니 너무 아쉽다
-
미치겠다
-
작년에 쓴 문제 재탕하는게 왜 욕을 그렇게 쳐먹었던건지 모르겠음 우수하고 배울게...
-
뭐 난이도 라던가....표본....등등...
-
코로나 걸렸을 때랑 비슷함
-
공부해
-
-
찌그러진 토끼 카카오 이모티콘 내가할말 얘가다함 애들이 나 보고 만들엇냬 진짜 ㅅㅂㅋㅋㅋ다산다
-
이제 수학 개념 나갑니다. 까먹긴햇지만 2학년때 쎈 2회독하기도 했고 3떳습니다....
-
미네깃테유쿠 난다카~
-
맞추나 궁금해서 잠이안옴
-
롤체해야지 8
목표:챌린저
-
느낌이 좋다 4
몬스터 두 캔 빨았더니 잠도 거의 안 오다시피 하고 필기본 노트에 옮겨쓰는 중인데...
-
자취 여부랑 함께 말해주면 더 ㄱㅅ 보통 70 쓰나?
-
시발 4
아
-
제가 작년에 사놓은 책이 2025 뉴런,수분감,시냅스가 있는데 그냥 풀까요 아니면...
-
ㅍㅈ가 뭐게 341
피자 피지 피즈 퍼즐 또 뭐있죠
-
위 문제는 각각 2509 30번, 2506 12번입니당. 위에껀 ㄹㅇ 계산만 12분...
-
-
외국 살다가 군복무 마치고 오랜만에 공부하는데 예전엔 다 했었는데 지금은 기억 나는...
-
너무 아름다우심.. 저런분들은 왜 내 근처엔 없는거지
-
20수능 가형 30번풀이 이 풀이를 보고 같은 종이라고는 생각할 수 없는 격의 차이를 느꼈음
-
어버이날과 겹쳐서 겸사겸사 사려는데 고민 중 원래 사려던 비녀+장신구+책갈피 세트는...
-
26시간 하려면 내일 아침 8시까지는 해야 될거같은데 ㅋㅋ
-
D-2 ㅇㅈ 1
수학 더이상 할게없음 이제 으으
-
ㄹㅇ
-
2옥라에서멈춤 시에서가성처리함
-
결혼이나 여러 가지 '으른들의 이야기'를 듣고 있다 보면 내 얘기가 아닌데도 일단...
-
나머지 과목은 동사로 정했구 백분위는 정법이 더 좋은거같긴한데 공부량이나 여러가지...
-
누워서 문제만들고싶다
-
이해원N제 책이 1
이해원 모고 문제를 재탕하는 문제집인가요?
-
내 청력이 이럴리 없는데
-
힘들군
-
절 실물로 보실 기회가.. ㅎㅎ
-
-
레어 버그인가 4
두번 눌렀더니 두개 생겼네
-
-
지금 만나는 사람이랑 똑같음 생각해보니까 그러네 그에비해 난 아직 철이 덜 든거같음
-
오늘의 야식은 2
불닭과 핫바..
-
-
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.