인공지능에게 LEET를 풀게 해 보았다.
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
저만 그런가요…..
-
수학 기출 복습 0
다들 수학 기출 복습하시는데 수학 기출문제집으로 풀었던 거 복습하사나요 아님 그냥...
-
지금은 3등급 간당간당하게 나오고 문제풀이량이 부족한 거 같아서어려운 3점~준킬러...
-
버저비터 ㄹㅈㄷ
-
고3 혀녀기 입장에서 성심성의껏 답변해드릴테니 부탁드립니다! 제가 mbti가...
-
그래서 하고샆은 말이 뭔지 잘 모르겠음.... 약수 너네 개ㅈ밥이잖아 왜 깝쳐?...
-
저 화작 독서 문학으로 푸는데 가나지문 에이어처럼 나오면 시간 ㅈㄴ날릴거같아서...
-
다 한 수위
-
너 자신을 알라 know yourself
-
시도한 방법 1. 실모 많이 사기 2. 비문학은 읽기만 하고 넘기기 3. 문학 답지...
-
영어 6모에 6 뜨고 그때부터 공부해서 9모 3 10모 3 떴는데 이명학 푸니까...
-
1일차 QWER 다이나믹듀오 에스파 싸이 여자아이들 2일차 라이즈 다비치...
-
공못콸콸울 6
저능함에탄식을금치못하는
-
덮 2
국어 77 수학 92
-
점메추 해드립니다 13
고고
-
유부 먹으러 왓다 12
흐흫흐
-
과학이랑 경제는 좋아하기도 하고 정답률도 되게 괜찮고 논리학도 생각보다 꽤...
-
드디어드디어
-
답지보고 공부하심?
-
어떻게 대처하세요? 막 실모 8090점 뜨다가 갑자기 70점 더심하면 60점대까지...
-
일단 못해도 연대는 갈수있어야 되겠지만 ㅠ
-
쩝.... 1
재밌는 글이 안보이는구만
-
1. 이전글을 보면 알겟지만 현재 의대입학은 이전에 비해, 아니 불과 작년까지만...
-
이거 왜이러는거임?
-
빡모 조낸어렵네 0
S2풀었는데 일단 계산에 압도당했고 그리고 내가 그냥 존1나 못했음 최근에 본...
-
이거 원래 누가 가르친 거예요?? 이때까지 ㅈㄴ 머리로 상상하면서 쳐그렸는데 개현타옴 ㅋㅋ ㅍ
-
둘이 다른건 알겠는데 자료까지 하나도 안겹침?
-
시대 장재원t 1
고2 학평 1정도면 들을만한가여
-
똥망하면 어떡하지
-
댄디의 가호를 받던 그때가 그리워요..
-
그래서 공부안함
-
ㅠㅠ 또 나만 어렵지..
-
수능전에 다할수있나
-
달 수 잇을가 나도 뱃지 달아서 꼭 기만글 쓰고 싶다
-
더프 진짜 개망한줄 알았는데 생각보다는 잘봤네요... 8
어제 속상해서 많이 우울했는데 매겨보고 기분 좀 나아졌습니다.국어 89미적 88영어...
-
모닝실모 9
강x s4 14회 88...인데 사실상 하나 찍맞이니 84로 칩시다 계산 드럽게...
-
ㅠㅠㅠㅠㅠ
-
순공0시간 0
하필이면 지금시기에 코로나를 걸리네..
-
수학 풀 때 머리 안 돌아가요 ㅠㅜ 도와주세여 ㅜㅜㅜㅠ 2
국어 실모 풀고(국어는 잘 풀려요) 수학 푸는 시간에 수학 풀기 시작하면 유독...
-
28시간 무수면 4
잠이 오히려 안오기 시작함
-
평균적으로 독서 2-3틀에 문학 5-6틀인데 문학이 유독 더러운거 저만 그런건가요?
-
3명끼리 친해서 자주 보고 이번에 여행도 가는데 A가 너무 덤벙대고 시간약속이나...
-
-
오늘 지구 내일 화학 하면 딱 될듯
-
11덮 국수 4
뭐냐 ㅋㅋㅋㅋㅋㅋ 생각보다 너무너무 잘봤네요 국어 92 독서 -2(어휘) 문학 -6...
-
12번 다구해놓고 오른쪽 교점 말고 왼쪽 교점에 대해서 계산헤서 틀 24번은 걍...
-
냄새로도 민폔데 가래침끼는거 시험90분내내 우왁쿠왂끆컼대는거죽이고싶음 기침도 입...
-
23시 시작이라 좀 애매한데 고민되네요
-
23수능 백분위 98 올해는 몰루? 평가원은 1뜸 올해는 짬찌라서 공부 시간 적어서...
-
다들 노래 끊으심???
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.