인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
원래 이런글 잘 안쓰는데.. 1월 4일 점공 열리자마자 문의주셨던 형이 드디어 오늘...
-
저도 2시부터 시작이라면서 1시 반에 전화왔어요 2시까지 자다 받을까 싶었는데...
-
노베라 기초 개념부터 쌓으려고 하는데 고1 과목도 많이 부족해서ㅜㅜ 저 두 개...
-
민노총 간부 간첩 사건 공소장 전문을 공개합니다 ① 4
매일신문은 최근 민노총 간부들이 북한 문화교류국의 지령을 받아 대한민국에서 암암리...
-
-
ㅋㅋㅋㅋㅋㅋㅋㅋ 화1은 무슨 죄를 지은거임ㅋㅋㅋㅋ
-
그냥 항공권 살까
-
이 닉네임 I Love Yon Sei Business 줄인건데 2
쓸일이 없게됐네요 ㅋㅋㅋ 한의로는 닉네임 어찌 지어야 하지
-
진학사 기준으로는 예비 2번인거 같은데 오늘 전화 올까요 ㅠㅠ
-
혹시 질문하시는 분들 지금도 전추 돌리고 있습니다 저도 자느라 못받아서 부모님이...
-
점수:44/50 체감 난이도:3.5/5(화2 뗀 후 첫 실모인데 점수가 앵간히...
-
얼버기 2
-
대학커뮤니티 노크에서 선발한 성균관대 선배가 오르비에 있는 예비 성균관대학생,...
-
이네요....
-
생각도 못 해 본 학교인데,,, 과연 ㅜ
-
얼버기 4
잘잤다.
-
냥대 경금 4
예비 없다가 25번이다가 지금 9번까지 됐는데 이거 가능성있을까요…기대안하다 한자리...
-
-21학번 틀
-
스팸전화 1
개빡치게하네 아침부터 전화만 기다리는 사람 놀리는거도 아니고
-
입시 시작하면서부터 꿈꿔왔던 곳이라 붙어놓고 안가게 될거라는건 상상도 못해봐서 더...
-
외대 등록함 4
내선택에 후회를 남기지 않는다 후회따윈없는거임
-
사람왤케없지 7
흐음
-
맞팔9 6
밎팔9
-
전화 기다리는중
-
외대 전화추합 2
오늘 외대 전화추합 몇시부터 시작일까요?
-
궁금합니다
-
미적분 세절쉬>미친개념>스블 아니면 세절쉬>어삼쉬사>스블 둘중에 뭐가ㅈ나을까요?
-
어제 2칸 붙었다는 사람 몇명 있는거 보면 1칸합도 나올거같음
-
근데 이제 모르는 문제는 남겨뒀음 이번주 수목금토 동안 모르는문제 다시 풀어보고...
-
예비 줄어드나요? 전추 전화추합 한양대 서성한
-
모르고 필수 등록금만 납부해서 만원 추가로 내려고 했더니 송금이 안되네요.....
-
집 도착 0
마지막 휴가 갈 완료
-
1월엔 꽤 잘지키다가 2월돼서 폭망함 6시반기상후 다시취침후 7시반기상ㅅㅂㅋㅋㅋㅋㅋ...
-
그 쫙 펼쳤을 때가 딱코로 1대1인가? 바닥에 누워서 팔길이 대충 재보니까 키보다...
-
그간 입시데이터로 미루어보건대 지금부턴 한분 빠질때마다 바로전화라 이미 너무 낮아진...
-
내신 성적으로는 설농,포스텍 간당간당 Ky 기공, 서강 시반공반, 유니반갈정도...
-
ㅇㅇ 아 진짜 에바야 거기 스나 쑬걸…하…그러면 건동홍 성적대 애들도 붙은건가요?
-
-
엣지 뉴런 한완수..? 10
셋 다 실전개념으로 알고 있는데.. 셋 중 하나만 해도 될까요? 엣지는 하반기에...
-
님들이라면 어디고름? 서강반은 하닉 회로설계 계약학과임 서강반이 수능으로 설공 붙을...
-
읽는데 몇 분 정도 걸리나요? 문제 풀기 전에 지문만 읽을때 3-4분 정도 걸리는데...
-
이감을 사야할까요 상상을 사야할까요 아니면 한수? 13
작년엔 이감 쭉 풀었는데 간쓸개 되판다고 너무 고역이었어요.... 뭐 사야할까요?
-
어케 잤는 지 기억이 안남
-
공부기간 2024.1~2024.10.17 (10.18일부터 공부안하고 롤만함.....
-
달러든 주식이든 살 때는 싸서 댕꿀ㅋㅋ하는데 평가액 볼 때 +적으면 슬픔
-
씨르비 오발
-
안사지고 16퍼올라잇네 걍바로살걸ㄲㅂ
-
그러면 ebs는 더더욱 안봐도 될꺼임 ebs 적중저격은 대놓고 피하려고 발악하고...
-
괜찮군
-
의대가 눈앞에서 닫힌다생각하니 앞이 깜깜하네요ㅠㅠ 아무리봐도 빠져 나갈사람은 없고...
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.