인공지능에게 LEET를 풀게 해 보았다.
안녕하세요. 해커스 로스쿨 LEET 언어이해 이재빈 강사입니다.
요새 chat GPT가 여기저기에서 화제입니다. chat GPT가 미국 의사 면허 시험도 통과했다는 소식에 LEET 언어이해 강사로서 chat GPT가 LEET에서는 몇 점을 맞을 지가 갑자기 궁금해져서 한 번 문제를 풀려보기로 했습니다.
chat GPT에게 글을 읽고 문제를 푸는 훈련을 진행해보자고 제안한 뒤에, 작년에 시행되었던 LEET 언어이해 첫 번 째 지문을 읽게 해 보았습니다.
그만 chat GPT에게 에러가 뜨고 말았습니다. 예상치 못한 결과에 당황했지만 "지문 읽기가 필요 없는 문제를 풀게 해보면 어떨까?"라는 생각이 들어서 LEET 언어이해 문제 중 '윗글을 읽고 답하는 형식'이 아닌 문제를 하나 풀게 해 보았습니다.
2023 LEET 언어이해 22번 문항을 풀게 해 보았습니다. 헤겔 철학과 관련된 지문을 읽고 푸는 문제인데 chat GPT에게는 지문을 제공해 주지 않은 채로 풀게 해 보았습니다.
역시 인공지능답게 지문을 읽지 않고도 배경 지식만으로 문제를 푸는 클라스를 보여주었습니다.
덤으로 제가 자체 모의고사를 위해 제작하고 있는 철학 지문 문제들도 풀게 해 보았는데 모두 정확한 답을 맞추는 클라스를 보여주었습니다.
수능 국어나 언어이해에서 배경지식 공부의 중요성을 확인할 수 있는 지점이었습니다. 인공지능 수준의 배경지식을 갖출 수 있다면 지문을 읽지도 않고 문제를 풀 수 있다는 의미입니다 ㅎㅎ
혹시 헤겔 관련 문제는 배경지식을 적용하기에 너무 용이한 것이 아닌가 싶어 다른 문항들도 풀려 보았는데, 다른 문항들도 대부분 지문을 읽지 않고도 배경지식만을 활용하여 쉽게 풀어내는 것을 확인할 수 있었습니다.
그런데 흥미롭게도 chat GPT가 틀리는 문항도 꽤 있었는데요. (지문을 안 읽고 풀리기는 했지만 ㅎㅎ)
위 문제의 경우 답이 1번인데 5번을 골랐습니다. 5번은 많은 학생들이 골랐던 오답이기도 했는데 인공지능도 똑같은 실수를 범한다는 사실을 확인할 수 있었습니다.
0 XDK (+0)
유익한 글을 읽었다면 작성자에게 XDK를 선물하세요.
-
되는 학과 있나요..
-
오후 8시까지 오르비에 댓글이나 글 쓰는 것 적발되면 6
이 게시글 선착순 10명에게 1만덕 씩 드립니다 미적분 공부 빡세게 족보 파야함…
-
탈릅한 네임드가 6
알고보니 나랑 택시를 10번이나 같이 탄 앞 아파트 친구였던 것에 대해.. 그 친구...
-
쌩N수는 솔직히 리스크가 크니 뭐라고 못하겠지만 반수는 뭐랄까 누군가에겐 간절한...
-
서술형 있음뇨?
-
다군 어디가 좋을까요? 인하대는 집에서 40-50분 정도 과기대는 1시간 반 정도...
-
올해 많이날수밖에 없지않음? 마지막엔 제발 기적이 일어나길
-
이러면 모두가 행복해짐
-
ㅇㅂㄱ 0
-
엄마가 자꾸 다군에 한장 쓰라고하네 내가 보기엔 어림도 없을거같은데
-
오프 내놔 0
좀 쉬자
-
안녕하세요 제가 올해 재수해서 정시로 가려는데.. 걍 진학사로만 보고 넣으려고...
-
대학 미진학 or 신등록 시 5만원 떼고 환급 기존 대학 재학 시 3천만원 3월 일시불 납부
-
현역 최저고 이번 방학때 물1생1 하다가 6평때 박살나면 사탐으로 런쳐도 사탐 1...
-
ㅋㅋㅋㅋ
-
동의하면 댓글좀.
-
9+2 환장의콜라보
-
시비가 아니고… 장점? 이 뭔가용 친구가 텔그사라는데 진학사에 텔그 하나 더산다고...
-
추합 빨리 되라 6
ㅇㅇㅇ
-
[민족고대]25학번 아기호랑이들 고파스 단톡!(19, 20, 21, 22, 23, 24 종합 최다인원!) [고려대] 0
안녕하세요, 고려대학교 재삭생 대표 커뮤니티 고파스의 새내기 맞이단입니다!!...
-
대성패스 사서 유빈아카이브 벅벅하는게 이득
-
ㅋㅋ 난 이미 지하철 탔어
-
제정하면안될까요
-
특히 인서울 한약수라인분들은 직업전망이랑 자료들 정말 잘 찾아보시고 원서접수...
-
물1 4
내년에 물1 표본이 청정해질 일은 없겠지?? 물1화1에서 화2생2로 바꾸면 할게 좀...
-
원고지 작성법 0
연필로 쓰는데 원고지 교정법 많이 사용하면 안 좋게 보실까요? 볼펜은 무서워서...
-
중앙vs경시 0
어디가좋을까요
-
부탁드립니다!!!
-
수험번호 가리면 안됨??
-
중상위부터는 택도 없어보이고 하위과는 표본이 너무 없네요.. 걍 서성한 상경으로 만족하는게 맞나요
-
쓰는 사람들 정신병있어보임
-
이유도 알려주시면 좋을 것 같습니다!
-
서울대 에타를 알아보자 10
그만 알아보자..
-
저는 The Fray Lifehouse ColdPlay The script
-
넣어는 볼까
-
내 고속 누백을 확인하기. 예를 들어 중경외시 성적에 서성한 노리면 서성한 각...
-
경제적 여건 때문에 메가 패스 비용이 부담되서 항상 대성만 사용하고 있는데 이번...
-
고신대 지역인재 아닌 일반고전형입니다. 면접 제 시간에 제출했고 내신은 고신대식...
-
오빠한테 화2과외 받고 부모님깨서 오빠한테 용돈 80만원 추가로 주는 걸로 합의봄ㅋㅋㅋㅋㅋㅋ
-
답장ㅇ이 안 와 4
떨려서 이 창 보는 것도 못하겠다
-
연세대라 궁금
-
피램 팔까.. 1
오리진하면서 1권 하고 있는데 생각해보니까 올오카 개강하면 매월 승리도 해야하고.....
-
제 친구가 물어보네요...
-
뱃지 나왔다 7
차냥하라 닝겐들아 하냥대를!!
-
[생명과학1] 25 To 26 (분석지, 설명회 이벤트) 2
안녕하세요! 생1 강사 권희승T입니다. 수능이 끝난 지 벌써 한 달이 지났네요....
-
부산의 붙여줘라 2
떼굴떼굴 굴러서 갈게
-
수능 표본 어떻게 될지...
-
결정 완료 7
잘 가라 내 한 달치 월급아..
-
N+1을 멈춰주세요 허수 N수생 죽어나가요
-
예비 고3이고 김승리 커리 타려는데 고2 모고 풀면 고정1 나오는데 꼭 풀커리를...
와...
수능 문제들은 인공지능이 풀 수 있을만큼 정교하고 확실하게 만들어졌다 ㄷㄷ
반도체 ai 주식 지금 긁어모읍시다
ㅋㅌㅋㅋㅋㅋ
배경지식이 많으면 많을수록 치트키이긴하네요이거보고 리트따위 안보기로 결심했다
이거 보고 인공 지능이 되기로 했습니다 감사합니다
존 코너 게이야...
이거 보고 철학과 가기로 했다
배경지식으로 비문학푸는법 ㅇㄷ
chat GPT 공부법 어떠십니까
배경지식(570GB)
어라
어어
이거보고 ai가 되기로 결심했습니다
자, 이제 인강 강사 버리고
챗지피티 공부법 드가자~
올해는 챗지피T 풀커리 타야겠다..
이어폰 챙겨서 들어가기로 했읍니다..
왕...
수능문제는 AI도 틀릴 수 있다 ㄷㄷ..
사실 chat GPT는 생각보다 오류가 많습니다. 질문을 어떻게 하느냐에 따라서 같은 문제에 대해서 다른 답을 말하는 경우가 많습니다.
에이... 인공지능에게 저렇게 배경지식으로만 풀 수 있는 문제를 묻는건 구글에 헤겔에 대해서 질문하는 것과 다를게 없죠ㅠ
놀랍게도 헤겔 문제 뿐만 아니라 거의 대부분의 LEET 언어이해 문제가 인공지능에게는 '배경지식으로만 풀 수 있는 문제'에 해당합니다 ㅎㅎ
그쵸... 그래서 지문을 바탕으로 묻는 문제를 질의시키는게 제일 유의미한거 같아요
현재 단계에서는 문제가 무엇인지 이해하는(것처럼 보이는 것)만으로도 의미가 있는 것 같아요
아직 ChatGPT는 새로운 지식을 추론하고 만드는건 애매하니깐요
와..
선생님 저는 국어문제를 스도쿠풀듯 취미로 풀어보는 평범한 이십대 중반입니다.
리트강사라고 하셨는데, 제가 느끼기에 법학적성시험 2009년것과 2023년이 확 다릅니다. 난이도에서 말이죠.
물론 출제집단이 평가원에서 ~(갑자기 잊어버림..)으로 바뀌긴 했다지만, 어떤 사건들이 있어서 이렇게 확 바뀐걸까요?
단순 출제집단이 바뀌어서? 평가 목적이 달라져서?
2019년을 기점으로 출제기관인 법학전문대학원협의회가 공청회를 진행하고 출제방향을 대거 개편할 것을 공개적으로 천명한 바 있습니다. 2019년 이전과 이후의 LEET(특히 언어이해)는 아예 다른 시험이라고 보아도 무방합니다.
리트는 그러면 최근 시험이 어려운건가요?
선생님은 몇년 리트시험지가 제일 어렵다고 보시나요?
21과 22가 가장 어렵습니다. 가장 최근꺼인 23은 좀 쉬웠구요.