메뉴 건너뛰기

인공지능 이미지/사진=Blutgruppe Corbis


인공지능(AI) 모니터링 해외 웹사이트 ‘트래킹 AI’(Tracking AI)가 매주 업데이트하는 AI 모델 대상 IQ 테스트가 화제다.

트래킹 AI는 17개의 텍스트 기반 AI 모델과 6개의 비전 기반 AI 모델을 대상으로 멘사 노르웨이 테스트와 오프라인 테스트를 진행하여 IQ를 측정했다. 멘사 노르웨이 테스트는 멘사에서 제작한 온라인 IQ 테스트이고 오프라인 테스트는 트래킹 AI가 직접 제작해 AI가 학습한 경험이 없는 문제로 구성되어 있다.

두 가지 테스트 종합 1등을 차지한 AI 모델은 구글의 제미나이 2.5 프로였다. 멘사 노르웨이 테스트에서 인간의 ‘매우 우수한’ 지능 수준으로 평가되는 IQ 128점을, 오프라인 테스트에선 115를 기록했다.

오프라인 테스트에서 특히 강세를 보인 모델은 앤트로픽의 클로드 3.7 소넷 익스텐디드로 107점을 기록했다.

전체 순위를 놓고 봤을 때 상위 10개 모델 중 6개는 오픈 AI의 모델이었다. o1 프로, o3 미니, o1, o3 미니하이, o1 프로(비전), GPT 4.5 프리뷰 모델이 모두 상위권을 차지했다. 앤트로픽은 클로드 3.7 소넷 익스텐디드와 클로드 3.7(비전) 모델이 각각 3위와 10위에 오르며 선방했다.

전세계 파장을 일으킨 딥시크의 R1, V3 모델은 각각 15위와 17위에 머물렀고 xAI의 그록3 씽크와 그록-3는 각각 12위, 18위에 올랐다. 메타는 라마 4 메버릭이 9위, 라마 3-2는 하위권에 올랐다.

그러나 IQ가 AI의 성능을 평가하는 기준이라고 볼 수는 없다. 영국 옥스퍼드대학의 기술 및 규제 연구자 산드라 왁터는 ‘인간과 AI를 같은 척도로 비교해선 안된다’며 ‘자동차는 인간보다 빠르고 잠수함은 잠수능력이 더 뛰어나지만 이것이 인간 지능을 능가한다는 것을 의미하지는 않는다’고 비판했다.

IQ 테스트 방식 자체에 대한 비판도 있었다. 킹스 칼리지 AI 전문 연구원 마이크 쿡은 ‘IQ 테스트는 매우 유사한 패턴을 반복하는 경향이 있다’며 그 패턴만 학습하면 되는 AI가 인간과 같은 기준으로 평가될 수 없다고 비판했다.

AI를 평가하는 별도의 기준이 필요하다는 목소리가 나오고 있다. AI 연구소 ‘AI 나우 인스티튜트’의 수석 과학자 하이디 클라프는 “기계 학습 모델의 성능을 인간 지능과 직접 비교하는 것은 비논리적”이라며 “AI를 평가하기 위한 별도의 척도를 마련해야 한다”고 말했다.

한경비즈니스

번호 제목 글쓴이 날짜
45503 무너진 다리를 넘은 기적… “다시 숨 쉬는 매일이 선물” 랭크뉴스 2025.04.18
45502 법원, 尹 21일 재판도 지하주차장 진출입 허용…法 “사회적 관심도 고려” 랭크뉴스 2025.04.18
45501 CEO 부재에 경영난… 車 판매 세계 5위 스텔란티스 ‘흔들’ 랭크뉴스 2025.04.18
45500 법원, 윤 전 대통령 21일 재판도 지하주차장 출입 요청시 허용 랭크뉴스 2025.04.18
45499 홍준표 “차별금지법 반대, 동성애 비옹호, ‘PC주의’는 좌파”···또 드러낸 소수자 혐오 랭크뉴스 2025.04.18
45498 이준석 "자살하라며 내쳐 놓고 이제 와서 단일화? 금수의 마음" 랭크뉴스 2025.04.18
45497 사진 속 신부가 두명… 중국판 막장 결혼식 알고 보니 랭크뉴스 2025.04.18
45496 문형배·이미선 헌법재판관 퇴임…“헌재 결정 존중해야” 랭크뉴스 2025.04.18
45495 떠나는 문형배 "헌재 결정 존중해달라"…여느 퇴임사와 달랐던 점은 랭크뉴스 2025.04.18
45494 ‘음주운전 이유’ 물었더니… 1위 ‘이것’ 없어서 랭크뉴스 2025.04.18
45493 문형배·이미선 퇴임 “대통령-국회의 갈등, 헌재가 해소할 수 있어” 랭크뉴스 2025.04.18
45492 '尹파면' 선고후 떠난 문형배·이미선 "헌법준수·결정존중"(종합) 랭크뉴스 2025.04.18
45491 한동훈 최측근이던 장동혁, ‘반탄’ 김문수 캠프 총괄사령관으로 랭크뉴스 2025.04.18
45490 “음료수 줄게 따라올래?”… 서울 강남 초등학교서 학생 유괴 시도 랭크뉴스 2025.04.18
45489 ‘찔끔추경’, 얼어붙은 소비심리 되살릴 수 있나···“취약계층 직접 지원 늘려야” 랭크뉴스 2025.04.18
45488 강남 초교들서 '유괴미수' 의심신고…학부모 불안에 "전화 빗발"(종합2보) 랭크뉴스 2025.04.18
45487 영주시, 숨진 6급 팀장 '직장내 괴롭힘 피해' 조직적 은폐 의혹 랭크뉴스 2025.04.18
45486 정부, 12.2조 원 규모 추경안 국무회의 의결 랭크뉴스 2025.04.18
45485 [속보] 경찰, 문형배 대행 퇴임 맞춰 전담경호 해제 랭크뉴스 2025.04.18
45484 돌려차기 사건 피해자 김진주씨 "살아있다는 것만으로도 벅찬 삶, 행복하다" 랭크뉴스 2025.04.18