인공지능에게 LEET를 풀게 해 보았다.
게시글 주소: https://orbi.kr/00062055666
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
혼자 지내는 게 익숙해요
-
소신발언 0 0
인스타에서 공유 수 많으면 조롱이라던데 옯붕이:
-
김젬마쌤 봄봄 문학 독서 반 이상 정도 듣다가, 저랑은 방식이 안 맞는다는 것...
-
난 못생김 0 1
게다가 늙어보인대..
-
좀 이상하게 들릴 수 있는데 2 2
나 골반정병이 있음 골반이 말도 안되게 넓음 남자가 골반 좁은 게 좋다지만 넓어도...
-
아까 과호흡왔어.. 10 2
내가 내일 아침에 안들어오면 그대로 세상 하직한 거니까 알아둬 요즘 몸이 많이 안좋아
-
아 자면 안되는데 ㅈㄴ 졸리네 0 1
낼 비행기 비행시간 ㅈㄴ 긴데 내가 비행기에서 잘 못자는 체질이라 그냥 밤 새고...
-
나도 전여친한테 정병 처옮아서 8 0
한동인 개븅신으로 살았다가 어느샌가 빨간약먹고 정신차렷음 ㅇ; 무지성으로 외모만...
-
대학 붙고 빨리 커뮤 떠야지 1 3
뭔 대학 붙고도 새벽마다 와서 정병발사하고있냐
-
연애 안하고 싶은 사람은 없나 1 1
혼자살래
-
아 우우라네 1 1
하 ㅅㅂ
-
D-31 0 0
쌰 갈 !!!!!!!!!!!!!!!!!!!!!!!!!
-
웩슬러 ㅇㅈ 6 0
지각추론이 다 깎아먹음
-
외모 영역 최저학력기준 미달. 2 1
자살.
-
나는구마유시가 ㅈㄴ싫었음 0 1
이제 느그팀 원딜이라 딱히 안싫어함
-
하 7 1
이미 알고있어요…ㅜㅜㅜ
-
근데 그 방법 없나 4 0
모고 볼때처럼 긴장하고 공부하기 ㅇㅇ 수학 엔제를 푸는데 안풀리면 천장도 봤다가...
-
돼지 생식기 호흡기 증후군 0 0
돼지生殖器呼吸器症候群
-
행복하세요... 0 0
-
어그로력 보소 5 0
노이즈 마케팅 ㅆㅅㅌㅊ
-
누군가 탈릅했다 0 0
ㅠㅠ이
-
근데 오르비도 이러는구나 4 2
나는 얼굴 못생겼으면 공부라도 잘 해야지! 이런 마인드였는데 오르비 보니깐...
-
이런말해도되나 21 2
진지하게 삶이 힘든 오뿡이 끌고가서 라멘사주고싶은데 그럼너무주책일까싶기도 라멘먹고...
-
머리아퍼 4 0
아.. 내일 생각해..
-
금연 1분차 8 0
성실히 수행중
-
[한지]전국에서 제일 사람들이 못된..? 동네는 어딜까 1 2
그냥 급 궁금해졌는데 참고로 못됬다는건 뭐.. 적절한 표현은 아니지만 성질이 억센?...
-
돈 많은 애들은 그게 좋은 거인 줄 모르고 잘생긴 애들도 그게 좋은 거인 줄...
-
사실 나도 안정형임 ㅇㅇ 1 3
정병도 없음 ㅇㅇ 자 앵겨라!!!
-
정병메타를 막을 수 없구나 0 1
-
솔직히 나는 정신 겅강함 1 1
생각이 없어보일수도 있긴한데 암튼 튼튼함 스트롱 스트롱
-
난 좋아함 정병 1 1
훈
-
사람들이 악의에 차서 그런건 아님 그치만 상대장에 대한 배려가 있으면 타고났더라도...
-
날 떠나도 떠나지 않는 사람들 4 0
이렇게 간직하길 그래도 시간지나 나는 여기 있을거야 아무일도 없었던 것처럼
-
시발점 0 0
시발점 회독 어케 하는거임 걍 틀렸던 문제만 다시 풀어보면 되낭?
-
정병 심한 사람만 들어와봐 5 4
니넨 연애하지 마라 니네가 연애하면 정병이 두배다
-
모르겠어.. 4 2
모르겠어.. 자살해야하나.. 죽고 싶지 않아.. 인생망치고 싶지 않아.. 무서워.....
-
기만하는놈을쳐죽여버려 2 1
아이비리그컷을시켜버려
-
소소한 행복도 어려울정도로 내가 태어난지를 몰랐지
-
국어공부법 0 0
아니 예비고3이고 맨날 국어 3등급 나오는데 어떻게 공부해야할지 모르겠어요 지금...
-
제 꿈은 0 0
2027년 수능 올 1등급을 받은 자퇴생으로 n수의 신에 나가는 것입니다! 저는...
-
고능한 사람들은 수능은 재능보다 노력이다 하고 잘생기고 예쁜 사람들은 연애에서 외모...
-
저랑 같이 연애하고 헤어진담에 9 0
환연 5 나가서 사상최초 커뮤니티 커플 연프참여 타이틀 얻으실분?
-
주인 잃은 레어 1개의 경매가 곧 시작됩니다. 공군 짱구"상꺾이하 싸제 체련복 착용...
-
휴릅 3 0
2월말에 올게
-
자야되는데 0 0
자기싫은
-
예비고3... 뉴런 해야될까요 2 0
학교 내신이 많이 빡세서 고2때 뉴런 전부 2-3회독씩 했는데 막상 새로운 마음으로...
-
이젠 화장실 메타야? 6 0
나도 한 번
-
가지마 5 1
ㅜㅜ 나만현생에서도태되어서 영원히 커뮤에빠져사는것이냐...
-
여자랑 얘기해보는거 고딩때 조별과제 이후로 처음이라 너무 설레서 나보고 뭐라뭐라...
-
지역의사제 지역형으로 못쓰는거임? 인접지역으로 쓸수있는거임?
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.