• 목록

국가대표 인공지능(AI)에 도전하는 국내 정예팀들의 거대언어모델(LLM)이 수능 수학문제 풀이 등에서 해외 모델에 크게 뒤처진다는 시험 결과가 나왔다. LG 측은 “모델 특성을 고려하지 않은 시험”이라며 반박에 나섰다.
김종락 서강대 수학과 교수 연구팀은 “국내 국가대표 AI 도전 5개 팀의 주요 LLM과 챗GPT 등 해외 5개 모델에 수능 수학 20문제, 논술 30문제를 풀게 한 결과 양측 성적에 큰 격차가 있었다”고 15일 밝혔다.
연구팀은 수능 문제로는 공통과목, 확률과 통계, 미적분, 기하에서 가장 어려운 문항 5개씩을 뽑아 20문제를 설정했고, 논술 문제는 국내 10개 대학 기출 문제와 인도 대학 입시 10문제, 일본 도쿄대 공대 대학원 입시 수학 10문제 등 30문제를 설정해 총 50개 문제를 10개 모델에 풀게 했다.
한국 모델로는 업스테이지의 ‘솔라 프로-2’, LG AI연구원의 ‘엑사원 4.0.1’, 네이버의 ‘HCX-007’, SK텔레콤의 ‘A.X 4.0(72B)’, 엔씨소프트 경량모델 ‘라마 바르코 8B 인스트럭트’를 활용했다. 해외 모델에는 GPT-5.1, 제미나이 3 프로 프리뷰, 클라우드 오푸스 4.5, 그록 4.1 패스트, 딥시크 V3.2 등이 활용됐다.
시험 결과 해외 모델은 76~92점을 받았지만, 한국 모델은 솔라 프로-2만 58점을 받았을 뿐 나머지는 20점대 낮은 점수를 기록했다. 라마 바르코 8B 인스트럭트는 2점으로 가장 낮은 점수를 받았다.
이번 시험 결과는 ‘AI 3강’을 목표로 내건 국내 LLM 개발 정예팀들의 실력이 국제적 수준에 한참 못 미친다는 ‘지표’로 해석되며 적잖은 파장을 낳았다.
이날 오후 LG AI연구원이 자체 시험 결과를 공개하며 ‘반박’에 나섰다. 서강대 연구진이 뽑은 수능 수학문제 20개 문항을 연구원이 ‘엑사원 4.0.1’에 다시 풀어보게 했더니 88.75점이 나왔다는 것이다. 서강대 연구진 측정 결과(35점)의 두 배를 넘는 결과다. LG AI연구원 측은 자체 시험이 “통상적인 AI 모델 수학 벤치마크 테스트 방식”으로 이루어졌다고 설명했다. 시간관계상 수능 수학문제에 한해 시험을 진행했다.
LG AI 연구원 관계자는 “‘엑사원 4.0.1’은 일반·추론 통합모델로, 추론 기능을 작동시키기 위해서는 특정 프롬프트가 필요한데 이를 고려하지 않은 것으로 보인다”면서 “(서강대 연구진이 활용했다고 밝힌) 파이선 계산툴 또한 엑사원엔 지원되지 않는 기능이다. (서강대 시험은) 모델 특성을 고려하지 않고 측정했기 때문에 점수가 낮게 나왔던 것으로 보인다”고 설명했다.

아반떼N장기렌트, 안산이혼전문변호사, 안양상간소송변호사, 평택이혼전문변호사, 수원상간소송변호사, 용인성범죄전문변호사, 당일 폰테크, 차량렌탈, 인터넷가입현금지원, 달렌트, 수원불법촬영변호사, 장기렌트카사이트, , 분당강제추행변호사, 의정부이혼변호사, 렌트차량승계, 인터넷가입, 용인불법촬영변호사, 장기렌트카후기, 안양이혼전문변호사, 용인이혼변호사, 빠른이혼, 성남법무법인, 의정부이혼전문변호사, 소규모해썹, 수원법무법인, 하루렌트, 수원강제추행변호사, 장기렌트카비교, 서울탐정사무소, 수원법률사무소, 신차구매앱, 차빌리기, 성남음주운전변호사, 의정부이혼변호사, 인천이혼전문변호사, 상간녀변호사, 네이버 홈페이지 상위노출, 성남성범죄전문변호사, 서울폰테크, 장기렌트카아반떼, 하나복권, 폰테크, 신용회복장기렌트, 이혼상담, 차량한달렌트, 인터넷가입사은품많이주는곳, 의정부법률사무소, 승소사례, 이혼소송, 모델3장기렌트, 장기렌트잔존가치, 폰테크 당일, 마사지구인, 대전흥신소, 차량하루렌트, 저신용장기렌트카, 성남음주운전변호사, 분당불법촬영변호사, 남양주음주운전변호사, 인터넷가입현금지원, 안양학교폭력변호사, 의정부대형로펌, 이혼전문변호사, SNS마케팅, 청주이혼전문변호사, 투산신차가격, 세종이혼전문변호사, 용인음주운전변호사, 이혼전문변호사, 차렌트비용, 용인성추행변호사, 용인이혼전문변호사, 저신용장기렌트, 차량렌트비용, 한게임머니상, 신차비교어플, 용인이혼변호사, 폰테크, 용인불법촬영변호사, 수원법률사무소, 안양법무법인, 광고대행사, 수원강간변호사, 렌트카가격비교, 폰테크당일, 의정부법률사무소, 성남성범죄전문변호사, 무심사장기렌트카, 구리학교폭력변호사, 성남음주운전변호사, 장기렌트업체추천, 용인부장검사출신변호사, 한게임클래식머니상, 인터넷티비현금많이주는곳, 안산이혼전문변호사, 수원검사출신변호사, 수원이혼전문변호사, 서울흥신소, 자동차할인, 인터넷비교사이트, 이지렌트카, 현대자동차견적내기, 수원성범죄전문변호사, 안산이혼전문변호사, 수원변호사, 안양이혼전문변호사, 용인의정부검사출신변호사, 구리학교폭력변호사, 개인사업자렌트카, 상간남소송, 대구이혼전문변호사, 카니발출고기간, 폰테크, 용인이혼전문변호사, 차량대여, 아우디할인, 의정부이혼전문변호사, 수원이혼전문변호사, 저신용자장기렌트, 수원법무법인, 무보증장기렌트 , 인터넷가입현금지원, 인터넷가입, 고양이혼전문변호사, 인터넷가입사은품많이주는곳, 무심사무보증장기렌트, 카니발렌트승계, 인스타 팔로워 구매, 수원음주운전변호사, 이혼상담, 수원강간변호사, 서울이혼전문변호사, 서울이혼전문변호사, 장기렌트카가격비교사이트, 카니발신형, 출장용접, 수원학교폭력변호사, 수원변호사, 수원검사출신변호사, 인터넷설치현금, 카니발구매혜택, 장기렌탈승계, 렌트와리스차이, 남양주법무법인, 의정부형사전문변호사, 분당강간변호사, 인터넷설치현금, 국어시험, 안양이혼전문변호사, #폰테크, 수원촉법소년변호사, 렌트카저렴한곳, 업무용승용차, 중고차리스, 네이버 웹사이트 상위노출, 장기렌트보험료, 전기차장기렌트카, 수원음주운전변호사, 의정부학교폭력변호사, 서울탐정사무소, 이혼전문변호사, 수원형사전문변호사, 자동차장기렌탈비용, 벤츠리스가격, 남양주음주운전변호사, 신차렌탈, 안산이혼전문변호사, 무심사장기렌트카, 안산학교폭력변호사, 의정부대형로펌, 의정부형사변호사, 의정부차장검사출신변호사, 양주학교폭력변호사, 성남이혼전문변호사, 신차렌트, 수원성범죄전문변호사, 제네시스장기렌트, 제주장기렌트카, 부산폰테크, 티볼리장기렌트, 렌트카견적, 개인회생렌트, 의정부음주운전변호사, 안양학교폭력변호사, 포드익스플로러리스, 폰테크 홈페이지, 의정부이혼변호사, 수원법무법인, 수원음주운전변호사, 수원법률사무소, 네이버 웹사이트 상위노출, 신차장기할부, 일일렌트카, 개인회생중장기렌트, 차량한달렌트, 양산이혼전문변호사, 폰테크, 월랜트, 약, 평택이혼전문변호사, 이혼상담, 당일폰테크, 성남법무법인, 수원이혼변호사, 분당강간변호사, 아반떼하이브리드장기렌트, 성남이혼변호사, 폰테크, 기아자동차가격, 현대자동차견적 , 이혼전문변호사, 장기렌트이자, 이지렌트카, 개인회생장기렌트카, 수원성범죄변호사, 출장용접, 출장용접알곤, 세종이혼전문변호사, 안산상간소송변호사, 탐정사무소, 자동차렌트비용, 성남법무법인, 6개월렌트카, 용인이혼전문변호사, 아반떼리스가격, 전기차장기렌트, 남양주대형로펌, 의정부음주운전변호사, 렌터카, 의정부이혼변호사, 올뉴카니발 장기렌트, 이혼상담, 분트, 웹사이트상위노출, 수원법무법인, 용인이혼전문변호사, 장기렌트출고기간, 장기렌터카장단점, 상조내구제, 새차할부, 용인마약변호사, 장기렌트비용처리, 용인법무법인, 승합차장기렌트, 인스타 팔로워 구매, 이혼상담, 의정부상간소송변호사, 장기렌트신차, 창원이혼전문변호사, 저신용무보증장기렌트, 이지렌트, 모델3장기렌트, 대구이혼전문변호사, 만22세장기렌트, 경주이혼전문변호사, 폰테크, 용인형사전문변호사, 자동차가격표, 신용불량렌트카, 무심사무보증장기렌트, 서울흥신소, 폰테크당일, 수원형사전문변호사, 용인검사출신변호사, 폰테크당일, 부산이혼전문변호사, 빠른이혼, 의정부형사전문변호사, 수원성범죄변호사, 수원상간소송변호사, 분당강간변호사, 이지렌터카, 의정부형사전문변호사, 인터넷설치현금, 재산분할, 자동차비교, 안양상간소송변호사, 신차장기렌트, 양육권, 성남상간소송변호사, 광주전연령렌트카, 미스트롯4투표, 출장용접, 한게임머니상, 양주학교폭력변호사, 의정부학교폭력변호사, 남양주학교폭력변호사, 신차리스, 수원학교폭력변호사, 사이트 상위노출, 용인음주운전변호사, 폰테크, 싼타페장기렌트, 암요양병원, 6개월렌트, 안양상간소송변호사, 신차장기렌트견적, 영맨, 폰테크., 쏘나타장기렌트, 장기렌트견적비교, 분당성추행변호사, 성남학교폭력변호사, 수원성범죄변호사, 인터넷가입현금지원, 장기자동차렌트, 인터넷비교사이트, 폰테크, 현대차구매, 성남성범죄변호사, 안양이혼전문변호사, 의정부소년보호사건변호사, 중고차장기렌탈, 인터넷가입현금지원, 신차카드할부, 평택학교폭력변호사, 이혼상담, 수원이혼전문변호사, 청주이혼전문변호사, 협의이혼, 위자료, 폰테크 카페, 제주도장기렌트, 1달렌트, 장기차렌트, 수원이혼전문변호사, 렌트카저렴, 업무용승용차, 서울탐정사무소, 한게임클래식머니상, 수원차장검사출신변호사, 의정부음주운전변호사, 인터넷가입사은품많이주는곳, 용인이혼변호사, 한달단기렌트카, 출장용접, 성남이혼전문변호사, 남양주법무법인, 수원형사전문변호사, 랜트카, 장기렌트카, 수원강제추행변호사, 수원성범죄변호사, 성남상간소송변호사, 수원성범죄변호사, 용인불법촬영변호사, 인터넷가입, 싼타페리스, 남양주학교폭력변호사, 근처렌트카 , 다이렉트KB, 카니발7인승리스, 토레스하이브리드 장기렌트, 분당불법촬영변호사, 서울이혼전문변호사, 용인강간변호사, 1달렌트카, BMW5시리즈장기렌트, 양주학교폭력변호사, 자동차장기렌트장단점, 휴대폰성지, 수원성범죄전문변호사, 외제차가격 , 창원이혼전문변호사, 중고장기렌트카, 렌트카업체, 부천이혼전문변호사, 자동차장기렌탈비용, 홈페이지 상위노출, 수원형사변호사, 의정부이혼전문변호사, 이지렌트, 신차딜러서비스, 개인사업자자동차, 용인음주운전변호사, 용인이혼변호사, 수원법무법인, 수원의정부검사출신변호사, 외제차프로모션, 성남대형로펌, 일렌트카, 수원불법촬영변호사, 성남성범죄전문변호사, 랜트, 수원대형로펌, 미니쿠퍼장기렌트, 수입차장기렌트카, 성남이혼변호사, 1년장기렌트, 의정부법률사무소, 인스타 팔로워, 의정부소년범죄변호사, 수원성범죄전문변호사, 수원형사변호사, 일일차량렌트, 모닝신차가격, 인터넷설치현금, 렌탈카, 용인성범죄전문변호사, 리스장기렌트차이, 양산이혼전문변호사, 수원이혼전문변호사, 폰테크, X5장기렌트, 수원성추행변호사, 렌트카특가, 성남상간소송변호사, 양육권, 신차렌트카, 세종이혼전문변호사, 용인상간소송변호사, 수원형사전문변호사, 인터넷티비현금많이주는곳, 대전폰테크, 제네시스견적, 의정부이혼전문변호사, 폰테크, 수원법률사무소, 이혼전문변호사, 구미이혼전문변호사, 출장용접, 수원이혼변호사, 수원이혼전문변호사, 의정부이혼전문변호사, 3개월렌트카, G90장기렌트, 자동차한달렌트비용, 폰테크, 상조내구제, 7리스, 이혼상담, 용인대형로펌, 당일폰테크, 이혼전문변호사추천, 당일 폰테크, 렌트자동차, 이혼상담, 용인성추행변호사, 평택이혼전문변호사, 일주일렌트, 장기렌트저렴한곳, 상간녀소송, 인터넷가입현금지원, 수원형사전문변호사, 이지렌터카, 수원성추행변호사, 수원성범죄전문변호사, 대구이혼전문변호사, 무보증장기렌트카, 자동차한달렌트, 위자료, 의정부음주운전변호사, 의정부검사출신변호사, 검사출신변호사, 포항이혼전문변호사, 안양학교폭력변호사, 용인법무법인, 폰테크, 폰테크 홈페이지, 의정부변호사, 신불자장기렌트, 용인상간소송변호사, 용인성범죄전문변호사, 2024카니발, 의정부법무법인, 수입차렌트, 의정부성범죄변호사, 저신용장기렌트카, 부천이혼전문변호사, 수원법률사무소, 인스타 좋아요 늘리기, 양산이혼전문변호사, 용인성범죄전문변호사, 폰테크, 용인성추행변호사, 이지렌트, 장기렌트업체추천, 장기렌트카비용, 0대장기렌트, 용인음주운전변호사, 양산이혼전문변호사, 의정부변호사, 포항이혼전문변호사, 부천이혼전문변호사, 이혼소송, 분당강제추행변호사, 웹사이트, 차량렌트, 성남성범죄변호사, 용인상간소송변호사, 구리학교폭력변호사, 한달렌트카, 폰테크, 수원형사변호사, 수원강제추행변호사, 인터넷비교사이트, 인터넷티비현금많이주는곳, 법인차량구매, 남양주이혼전문변호사, 대구장기렌트, 의정부형사전문변호사, 의정부이혼전문변호사, 용인상간소송변호사, 장기렌트카가격비교, 중고차장기렌탈, 의정부이혼변호사, 의정부형사전문변호사, 의정부이혼변호사, 리스초기비용, 그랜저장기렌트, 렌터카대여, 한게임클래식머니상, 명품레플리카, 수원이혼전문변호사, 수원음주운전변호사, 성남이혼전문변호사, 폰테크, 장기렌트장점, 전연령렌트카가격, 카니발가격표, 이혼전문변호사, 안양상간소송변호사, 수원음주운전변호사, 당일폰테크, 출장용접, 장기렌트카승계 , 안양이혼전문변호사, 의정부음주운전변호사, 폰테크후기, 용인소년법전문변호사, 현대렌터카, 수원강제추행변호사, 인터넷설치현금,