올해 세무사 1차 시험의 회계학개론에서 AI 모델이 문제지만 보고 40문항을 모두 맞혔다.
같은 과목에서 실제로 90점 이상을 받은 응시자도 예년보다 크게 늘었다.
다만 세법학개론에서는 법령을 참고했는지에 따라 AI 점수가 달라져, 만점이라는 결과만으로 시험 과목별 차이를 설명하기는 어렵다.
국회 과학기술정보방송통신위원회 소속 황정아 더불어민주당 의원실이 공개한 실험에서 앤트로픽의 클로드 오푸스 4.7은 2026년 4월 25일 시행된 제63회 세무사 1차 시험 회계학개론 40문항을 모두 맞혀 100점을 받았다.
이 모델은 시험 9일 전인 4월 16일 출시된 당시 최신 버전이었다.
실험은 문제지 이미지만 AI에 제공하고 정답이나 해설은 주지 않은 방식으로 진행했으며, 한국산업인력공단의 최종 정답을 기준으로 채점했다.
같은 시험을 푼 이전 버전들의 점수는 차이가 컸다.
클로드 소네트 4.5는 62.5점, 하이쿠 4.5는 25점, 오푸스 4.5는 75점이었다.
반면 실제 응시자 가운데 회계학개론 90점 이상은 2024년 1명, 2025년 2명에서 올해 66명으로 늘었다.
과목 최고점도 차례로 90점, 95점, 100점이 됐고, 올해 만점자는 1명이었다.
세법학개론은 다른 양상을 보였다.
오푸스 4.7은 문제지만 받았을 때 72.5점을 기록했지만, 국가법령정보센터 등에서 관련 법령 원문을 확인하도록 하자 40문항을 모두 맞혔다.
실제 시험에서 이 과목 90점 이상을 받은 응시자는 만점자 1명뿐이었다.
따라서 회계학개론과 세법학개론의 AI 점수를 비교할 때는 법령 자료를 제공했는지라는 조건을 함께 봐야 한다.
시험 이후 출시된 AI 모델 9개는 모두 회계학개론에서 90점 이상을 받았고, 그중 6개는 만점을 기록했다.
11월 출시된 페이블 5.2는 별도 학습 없이 문제지만 보고 회계학개론과 세법학개론 모두 100점을 받았으며, 법학적성시험(LEET) 70문항도 전부 맞혔다.
회계학개론 40문항을 푸는 데 걸린 시간은 약 1분 30초였다.
LEET 사례도 모델의 성능이 어떤 방식으로 시험되는지 보여준다.
7월 시행된 2027학년도 시험에서는 40일 전에 출시된 페이블 5가 문제지만 보고 언어이해 30문항을 모두 맞혔고, 추리논증은 40문항 중 39문항을 맞혔다.
최근 3개년 기출문제를 학습시키고 문제를 나눠 풀게 하자 추리논증도 전부 맞혔다.
황 의원은 회계학개론 고득점자가 30배 넘게 늘어난 현상을 우연으로 보기 어렵다며 통계적 특이성 등을 조사해 부정행위 여부를 가려야 한다고 주장했다.
또 수능의 관리·감독 방안을 국가자격시험에도 확대하는 방안을 제안했다.
이는 의원의 문제 제기이며, 공개된 점수 자체가 부정행위를 입증하는 것은 아니다.