LLM 모델의 한계
게시글 주소: https://orbi.kr/00078982774
한계는 매우 많은 것 같지만 조금 피상적인 것들 위주로 말해보겠습니다.
제가 진행한 실험의 결과로는 크게 두 축으로 갈립니다.
능력의 한계와 선택 편향이죠.
능력의 한계는 다음과 같습니다. 각 항목마다 제 추측을 달겠습니다.
1. 전역을 세우지 못한다. 즉, 전체적인 그림을 보지 못합니다. 작업을 진행하면 진행할수록 세부사항에 매몰되며 그 세부사항에 대한 결정이 전체 흐름을 어김에도 인지하지 못합니다. -> 이건 근본적으로는 LLM 모델 자체 학습 방법의 문제, 덜 근본적으로는 안전지향과 비합목적적 벡터 산출이 문제라고 생각합니다. LLM 모델 자체가 그럴듯함을 만들어 내는데 집중합니다. 따라서 진실된 학습이 아닙니다. 이해를 기반으로 하는 것이 아니고 이해한 것과 비슷한 결과물을 산출하게끔 유도된 것입니다. 이건 거시적으로는 문제가 없어보여도 세부적으로 보면 당연한 걸 이해하지 못하는 등의 문제를 보입니다.
2. 분량 재단을 못합니다. '자기'가 하는 말의 '수준'과 '양'을 모릅니다. 그러니까 자기평가가 제대로 진행되지 않는다고도 볼 수 있죠. -> 이건 딱 무엇의 문제라고 말하기에는 용어가 떠오르지 않네요. 다만 AI는 말하는 동시에 생각하면서 교정하는 등의 행동이 불가능합니다. 입력을 받으면 산출까지 직행입니다. 그 중간에 스스로를 돌아보며 재조정을 거칠 수가 없습니다. 또한 자아가 없습니다. 내가 어디까지인지를 모르니 애초에 자기평가가 잘 될리가요.
다음으로는 선택 편향 쪽입니다.
1. 흔한 쪽으로, 싼 쪽으로 산출하길 지향합니다. 흔하다는 건 학습이 많이 되었거나 많이 보이는 것들을 정당성과 혼동한다는 소립니다. 싸다는 건 토큰 비용이 절감되고 고도의 추론이나 복합 연산 등을 요구하지 않는 쪽부터 시도한다는 소리입니다. -> 이 둘을 합치면 그럴듯한 것, 즉 비용과 결과물 사이의 최적점을 겨냥하도록 설계되었다는 것이죠. 이것도 LLM 모델 자체 학습 방법의 문제입니다. 보상 해킹 문제이죠. 연구에 따르면 거의 모든 종류의 보상 체계는 해킹당할 수 있습니다. 이건 뭐 어떻게 건들여야할지 잘 모르겠네요.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
지구과학을 공부해야될까?? 5 1
고등 지학 살면서 책 한번 안펼쳐봤는데 고1돼서나 통합과학 시작하면 될까요??...
-
유튜브 쇼츠 막는법 0 3
유튜브 -> 설정 -> 시간관리 -> 쇼츠 피드 제한 0분 이러면 뇌빼고 쇼츠 보는일 막을 수 있음
-
스위스는거꾸로해도스위스 15 2
대학생학대는거꾸로해도대학생학대
-
지1 개무섭네 0 0
뭔 실모를 풀면 풀수록 처음보는 지엽포인트가 꼭있냐... 1,2페이지에서 틀린때마다...
-
스페인 축구 진짜 잘한다 4 1
아침에 자다가 깨서 봤는데 모든게 깔끔하고 안정적인듯
-
아 오늘 7모성적나온날이구나 0 1
언87 미84 표백 알려주세여 67/20 66/18
-
그게 나야 바 둠바 두비두밥~ ^^
-
1-2 2-1 둘 다 1.83으로 조금 올려서 유지 중이니깐 30등은 되려나 자연계열 약간 가산하면
-
한석원 기하 어떰? 0 0
궁금한데
-
지디 뭐임 ㄷㄷ 2 1
20년대 지디중 젤 잘생기게 나온듯
-
ㄹㅇ임
-
반수 조언 2 0
제가 작년 수능 98 88 3 99 67(언미물생) 받고 경희대 재학중인 헉생입니다...
-
참고)이새끼 영대비하다 탈주 0 2
영재고 원서도안씀ㅋㅋㅋㅋㅋㅋ 수학 개못해서 탈주함
-
근데 바꿀 프사가 없는데 4 0
바꾸고도 싶고,,, 고민중
-
우리 학교에 가해자나와서 학교에 경찰 몇번왔었음 ㄷㄷ 다들 그때 어땠음? 경찰 학교에 옴?
-
투데이 상태를 보니까 오늘 오르비를 너무 많이 했다는 사실을 알았음,, 3 1
자중할게요,,
-
내일할거 0 0
7시부터11시까지 막전위 미적분 벅벅 11-1 영단어 외우고 문법 암기...
-
반수고민 3 0
작수 현역 98 65 2 98(생윤) 92(사문)로 경희대 문과 왔는데 요즘 자꾸...
-
파마늘 사랑하면 개추 2 6
-
이걸 집에서 배긁으면서 치는건 평가원에대한 예의가아니다
-
물론 일단 하면 된다라는 우문현답이 있긴하지만 의약학 가려고 매일 8to11...
-
근데 지로함 22 1 1
내주면 좋겠는데 안 나올 거 같음 걍 사교육에 정복당한 테마같음 요새는 앵간하면...
-
물1물2 화1화2 이런 거 쌍사 쌍지 쌍윤은 꽤있는것은데 이런 말이 존재할 정도로
-
오늘 훠궈?처음 먹어보는데 3 0
그냥 샤브샤브더라
-
포키 멜론맛 삼 9 1
걍 궁금해서 사본건데 막상 사니까 또 먹기싫음
-
원이 x도 기울여질때 어떤 타원이 나오는지 내가 왜 알아야해 ㅅㅂ
-
이제 그냥 원과목=투과목임 7 2
선택자 다 줄어가지고 ㄹㅇ 표본이나 컷 차이 거의 없을듯그냥 하방 높고 간지나는 투과목 ㄱㄱ
-
D-122 1 1
내일부터 한 발자국만 더하기! 다들 더운데 고생하셨습니다
-
이제집감 0 0
피곤하다
-
작수 미적 풀어보는데 22 원래 이런거 나와요? 6 1
제가 좋아하는 테마라 맞추긴 했는데.. 진짜 그래프 확대 축소도 삼각함수 이외...
-
기시감 꼭 해야 되나요 3 0
쌍윤러 림잇 마더텅 기출 임팩트 잘노기 순으로 다 돌렸고 3567순으로 생윤 50...
-
님들 6모국어 안풀었는데 2 0
언매다까먹엇는데 좀 나중에풀까
-
4등급 나오고 확통은 보통난이도면 29,30 빼고는 다 풀수있어요 공통은...
-
영대비 하면서 썰 3 2
화1 베라디 저자 분께서 학원에 놀러오셔서 중2한테 화1 실모를 풀리심 근데 누가 48점 받음
-
내가시발왜물투를할라고해서 3 1
6개월을날린거지 그냥 ㅅㅂ 화1생1 할걸
-
현역 7모 성적표 ㅇㅈ 5 0
뭔가 잘 본 과목이 없는데 국수탐 백분위는 나름 ㄱㅊ네요
-
영어유기원 5 3
영어유치원도아니고영어유기원임뇨 영어해야하는데.... 왜케하기싫지 오르비보면공통된병인듯하지만
-
유대종쌤 짤 어디갔지 3 0
그 대성쌤들 있고 그 앞에 쪼꼬미 대종쌤 있는 그 짤 어디갔지
-
사탐 7월 시작 ㅁㅌㅊ 10 0
ㅋㅋㅋㅋㅋㅋㅋㅋㅋ
-
참고) 이새끼 좆반고 통과 4,생1 4 지1 5출신 2 2
예아~~~~~
-
그 광주 여고생 살인범 4 1
레전드네 공개 총살형 해야할듯
-
저울게요 5 3
영어진짜똥나오게힘들어서울게요
-
25수능 18 19 20 꼬라지보고 화2 버림
-
갑자기 양대인 독도킥생각나버림 0 0
ㅈㄴ잘차네
-
그러다가 2609 집모쳣는데 47인가? 2컷이래서 화1로 선회하고 공부 유기때리다가 이지랄남
-
지능 ㅇㅈ 4 1
분명히 낮은게아닌데 내꼬라지는왜이렇지?
-
드릴7<4규 했던사람 누구야 1 1
드릴7이 더어렵잔아... 수2는 또이또이인데 수1은 드7이 훨 어려운듯
-
아니 열품타 안 끄고 갔네 3 0
영어만 4시간 함ㄷㄷ
-
진짜모름 걍 영재학굔데 앞에 예술만 붙인거임?
-
반수생 24일차 D-122 3 1
국수 강의 밀도가 상당히 높앗음 김동욱T 갠적으론 굳
인지 과학적으로 보자면 인공지능과 인간은 모두 베이즈주의 머신이기 때문에 LLM의 한계는 DNN의 근본적 한계라기 보다는 가용할 수 있는 도구를 인간이 모델에게 쥐여줄 능력이 부족하다는 점에서 기인합니다.
예컨데 인공지능의 사고 개진 과정에서 DAG 다이어그램 등을 사용할 수 있게 해준다면 사고의 폭이 크게 확장될 것이라는 예측들이 학계에선 많이 돌고 있습니다.
그러니 이건 LLM의 한계가 아니라 인간의 LLM 활용 능력의 한계이고 LLM을 학습시킬 다이어그램 사용 예시를 양산할 수 없는 인간의 정보 생산 능력의 한계인 것입니다
전공이라서 좀 끄적여 봤습니다
정말 감사합니다. 정말 많은 도움을 주셨습니다!
제가 잘못 쓴 것이 아니라면 DAG를 활용한 방법을 시도해 보았습니다. 다만 그게 DAG라는 인식은 없어서 위상골격이라는 표현으로 쓰긴 했지만요. 지금 결과를 봤을 때는 사고과 확장되긴 하는 것 같습니다. 다만 아직 제가 원하는 수준까지 높이진 못했네요. ㅠㅠLLM은 기본적으로 언어를 매개로 사고합니다.
우리가 머릿속에서 다이어그램을 가용하는 방식과는 근본적으로 다른 점이, 우리는 언어 모델이 아니기 때문에 다양한 표상이나 기하적 직관을 동원하여 정보를 처리할 수 있는 반면에, LLM은 그 모든 작용을 언어적 엄밀성에 기반하여 비효율적인 노선으로 작동한다는 점입니다.
저희가 "표상 정보를 사용하는 예시"들을 양산할 수 없기 때문에 인공지능에게 이러한 직관을 학습시키는 것 또한 불가능하기에 현재 인공지능의 작동 방식이 이토록 인간과는 다르게 느껴진다는 것이죠.
감사합니다!! 이것도 참고할게요스캐폴딩이 도움될꺼라는 건 동의하는데 llm의 아키텍쳐 한계도 여전히 큰 걸림돌이긴 함
인간 정보생산 능력의 한계 때문만이라고 보기엔 요즘엔 llm 학습 데이터가 인간 생산 정보에 의존적이지 않기도 하고 (RL기반 추론 학습이라던가) dnn 자체의 근본적 한계도 명확함 조합적 일반화가 힘들다던가 인과 구조 파악이 안 된다던가 OOD에 취약하다던가 blackbox라던가..
인간과 ai 모두 베이즈주의적이라고 보기에도 서로 수준이 다르기도하고요 (ai는 베이즈정리를 알고리즘적으로 구현하는 게 아니니까요 + 베이즈주의는 하나의 이론일 뿐, 계산 수준의 유사성 != 알고리즘 수준의 동일성)
역시 고능고능나무다야. 이것도 참고하는 걸로