인공지능에게 LEET를 풀게 해 보았다.
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
과외생도 옯창이면 내가 평소에 싸는 똥글들을 이미 다 알고있다는거잖아
-
새터 오티 날짜 공유해주실 수 있나요!! 예비번호 받았는데 전화추합노려야 할 것...
-
뮌가가 뒤죽박죽
-
그리고 베댓........ ㅠ...
-
찐따의 장점 3
그런건없다게이야 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ
-
자습실에서 옆머리 고정하려고 핑크색 리본 모양 찍찍이 머리에 달고 공부하다가 급식...
-
어라
-
ㄹㅇ 루시드가 처음인듯 원래는 미드, 서폿방송만 보는게 디폴트인데
-
메타가 이상해 4
이상하면 치과로.
-
찐따의장점 0
같은게있으면내가이따구로살고있겠음?
-
옵붕이들 잘자 8
엉아 오늘은 일찍 잘게
-
찐따의 장점 6
돈 아껴서 주식가능
-
아님 얘가 가채점을 잘못했나? 질투나는거? 솔직히 맞음 아니겠지 시발 진짜라면...
-
찐따의 장점 2
혼자 지낼 수 있음 혼자 미식할 수 있음 귀찮게 여자 안사귀어도됨 정신소모 덜할수...
-
찐따의 장점 3
그런 게 있을 리가 있노?
-
작년 초에 교육청 문제들을 갈래별로 편집해 봤는데 수요가 꽤 있어서 올해는 좀 더...
-
현역 사탐런 3
25학년도 6,9,수능 물1 화1 둘다 집에서 풀었을 때 시간 남으면서 1등급...
-
찐따의 장점 5
을 찐따가 아닌 사람들이 말하면 어캄..
-
찐따의 장점 0
그런건 없다
-
찐따의장점 5
난그런거모름ㅋ
-
합격여부에 “불합격”이라고만 써있으면 예비도 없이 불합격이라는 뜻인가요? 아니면...
-
텝스 결론 1
2월 9일에 응시 안하면 1학기에 영어수강신청 불가 개인적으로 응시하고 나중에 들으먼 댐
-
찐따의 장점 2
...
-
어떻게 생각함? 수학에 쓸 시간 많음 기출은 별로 하고싶지가 않고 올해 이해원...
-
홍대 자취 0
최근 3개년기준 6~80번대까지 추합도는 학과인데 오늘 50번대 예비받고 긱사는...
-
찐따의 장점 5
조용히 공부만 할 수 있음
-
찐따으ㅏ 장점 3
찐따임
-
https://sbz.kr/zdk1D
-
물1 비역학 퍼즐 싫어서 물2까지 간사람인데 과탐 수능1 받은 능지면 할만할까요?...
-
하염없는 기다림...
-
맞팔로우 하실분 2
아무나
-
그날 긴장하면 뇌에 있는 생각은 아무 것도 안나고 척수랑 손가락에 새겨진 머슬...
-
도표를 공부해도 틀릴거면 차라리 정법해서 암기로 때우는게 더 좋지 않나요..? 이게...
-
으음 이거야
-
화작 2~3등급에 미적 원점수 82로 갈수있는곳이 있다고?
-
다군 1명 뽑는데 예비2입니다.
-
자기 할 거나 잘하자 외대 내려치기 한다고 자기들 미래가 달라질까
-
눈 뜨기 싫다
-
[후략]
-
과외 구해요@@@@@@ 18
정상화와 만날 수 있는 절호의 기회! 현역 42221등급 국숭세단에서 재수...
-
국 수 영 탐 다 과외 중(탐구는 정법 사문 세사 국수영 과외생들 풀이법 추가로...
-
정답 / 정답률 추가함; 수학 기출 번호로 찾는 사이트 2
https://pastkice.kr/findbynumber.php 기존...
-
저는 100문제 정도 풀면 그 중 60문제를 계산 실수로 틀리는 사람입니다. 제가...
-
강사 3명이라 수업 한 번 돌고나면 강사 교재만 엔제 3권 분량이 나옴... 근데...
-
ㄹㅇ 개많음ㅋㅋ
-
가입하니까 온갖 의대생들이 보내던데 나 뭐 어케 잡을 수는 있는건가
-
스카이 ㄹㅈㄷ 5
딘시보니 스가이 였네
-
강민철 범작가 0
강기분까지는 다 할 생각이고, 새기분으로 넘어갈까용 아니면 국일만을 해볼까요?...
-
-
헤헤
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.