인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
좆같네? 하...
-
누가 저성적들고 인설잡따라지갈줄 알겠냐고 아ㅋㅋ
-
오르비언의 능력 2 0
이모티콘 위치 다 외우고있음
-
국어잘하는법좀 2 0
수핫잘하는범좀 ㅈㅉ궁금하네용
-
다들 시험 잘 치고 오셨나요 2 0
-
학평만 보면 연고는 걍 갈줄 알았지...
-
잘생겼는데 외모 정병잇슴 10 0
번따 4번 정도 당해봄 클럽에서 가만히 있으면 여자가 와서 말 걺 암튼...
-
사실 이번 수능 걱정안되긴함 0 0
흐름상 재수생 성불수능일듯 이번에 새로운 유형이 등장하진 않을것같고 늘 먹던맛에서...
-
올해는 모고딸 안 치려구요 3 4
이 나이먹고 모고딸치는게 뭔 의미가있냐 대학이나 잘가자
-
으하하, 우하하 8 1
-
6모 대회 순위표 중 일부 4 1
정시가 진짜 1점 차이로 변하구나
-
나도부남하고싶다 3 0
시대인재다니고싶다
-
유머로 소비될 장면이 아닙니다
-
음침부남 새벽 옵붕이들... 3 2
그래도 가끔 귀여울 때가 있음
-
친구들 담배 ㅈㄴ핌 0 0
애들 막 레종 뭐시기 얘기하는데 못끼겧ㄴ음
-
사탐인강고민 0 0
생윤사문 둘다 3~4등급정도 뜨는데 임정환쌤 리밋만 듣고 기출 돌려도되나요? 목표는 2컷입니다
-
요즘 수학은 실모 거지같이내네 0 1
이걸 진짜로 100분안에 풀라고 만든건가 문제를 풀면 어려운게 아니라 피곤해서...
-
비호감고닉 9 1
-
솔직히 나를 싫어하는 사람보다 4 1
나를 좋아하는 사람이 더 대하기 까다로운듯 아으 어떡하지 회피하는것도 민폔데
-
오늘은 3 0
ㅇㅈ 메타 기대못하겠지..
-
무엇이든 물어보세오 19 0
쨔삐쨔삐
-
고2국어 1 0
고2이고 국어 보면 백분위 98정도로 계속 나오는데 지금 올오카 들어도되나요?
-
개수생들한테는 오르비가 0 1
디씨고 트위터야
-
-
심심하니까 오노추 2 0
tayori의 봄을 기다리다 입니다 가사가 좋아요 제 아내의 커버도 있으니 들어보세요
-
국어잘하는법좀 12 0
ㄹㅇ
-
내가 오르비를 지키겟다 6 1
-
다들 오늘도 고생 많았어요 5 2
잘자요
-
화작 0 0
2-3개 정도 틀리는데 이제부터 공부하려고 하거든요 일주일에 몇 번 몇 시간 투자하는게 좋을까요??
-
다들 조심해. 알겠지?
-
또받고싶다
-
김기현님 친절하시네요 9 1
러셀 다니고 있지만 대성 패스 쓰고있어서 따로 들을일이 없는데 전대실모 해설 보니까...
-
저도 메인 한 번 보내주십쇼 2 0
https://orbi.kr/00078949717/%EB%8B%A4%EB%93%A4%...
-
무물보 32 1
없으면 울거임 엉엉
-
-
본인특 2 1
식사할때-> 12000원 초과면 그돈씨 소리 나옴 공기밥 1000원 넘으면...
-
https://orbi.kr/00078949754/17?type=hot
-
수능치고옯스타를만들엇는데 4 1
다사라지면어떡해
-
싹다까보면놀라겟지 2 1
그급은마치
-
삼치리의 소원 8 3
오르비언들끼리 친하게 지내기비갤러도 오르비언이랑 친하게 지내기ㅣ불편한거 잇으면...
-
ㅇㅇ'사실 더프 성적이 수능성적임, 더프 못보면 너 망한거임ㅋㅋ' 8 3
겠냐?ㅋㅋ 어 형은 11덮까지 비슷하게 잘보고 공전 복학했어 ㅋㅋ 호들갑 ㄴㄴ...
-
메인 추천수 뭐임 0 0
아니 ㅋㅋㅋㅋㅋㅋ
-
지금 친구들 되게 웃기고 해맑긴 한데 진대가 안됨... 좀만 진지한 얘기 꺼내도...
-
독재 -> 학교 열람실 역체감 0 0
독재에서는 바로 옆에 책장이랑 서랍이 있으니 책이나 필요한 물건들 그때그때 꺼내서...
-
여자친구 사귀고싶다 5 0
진짜 제발
-
멀쩡해보이는 사람도 다 한가지씩 사연은 있는거 같음 2 3
고3때 집안 망해서 힘들었던 울 아빠 학창시절에 학폭당해서 운동 시작했다던...
-
내일 6시에 일어나야하는 나 4 0
-
수학 깔끔하게 푸는 법 좀. 14 0
아니 방금 공부인증 글 풀이뷰니까 ㅈㄴ 깔끔하던데 하 개부럽네
-
오르비 즐기는 방법 3 1
설뱃을 달고 센츄눈알 붙이고 똥글만 죽어라 쓰기
-
효율이 1 0
국어1시간30>수학4시간같음
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.