[직장인 AI 교육] (55편) AI 성능비교, 구독은 순위로?
AI 구독을 하나 고르려는데, 어느 AI가 더 나은지 알기 어렵습니다.
AI 성능 순위는 구독을 고를 때 참고할 만했고, 제 체감도 순위와 크게 다르지 않았습니다.
저는 구독을 알아보다가 모델 순위표를 우연히 알게 됐습니다. 문서작업 순위를 보고 개인 구독을 챗지피티에서 클로드로 바꿨습니다.
AI 성능비교 순위표는 사람 투표로 매긴 모델 순위입니다
AI 성능비교 순위표는 사람들이 두 AI의 답을 비교해 고른 투표로 모델 순위를 매긴 표입니다. 제가 보는 곳은 아레나(Arena)의 리더보드이고, 텍스트·비전·문서·검색 같은 부문별로 순위가 따로 있습니다.
단점부터 말씀드립니다. 순위는 자주 바뀝니다. 아래 숫자는 10월 16일에 확인한 값입니다.
- 텍스트 부문 1~7위 점수는 1,524점에서 1,501점 사이였습니다.
- 점수 옆에는 오차 범위가 함께 표시됩니다. 1위 1,524점은 ±9, 2위 1,509점은 ±11입니다.
- 두 오차 범위는 겹칩니다. 순위 한 칸 차이만으로 우열을 가리기는 어렵습니다.
구독을 바꾼 기준은 문서작업 순위와 쓰는 용도였습니다
제가 구독을 바꾼 기준은 문서작업 순위와 AI별로 쓰는 용도였습니다. 개인 계정은 처음에 챗지피티만 썼습니다. 제미나이를 알고 둘 다 구독하다가, 문서작업 순위를 보고 챗지피티를 클로드로 바꿨습니다.
그 당시 챗지피티의 답변은 단순했고, 문서작업도 클로드에 밀렸습니다. 바꾼 뒤 체감은 순위와 크게 다르지 않았습니다.
제미나이는 그대로 뒀습니다. 이유는 세 가지입니다.
- 가족 등 6인이 함께 쓸 수 있습니다.
- 이미지에 강합니다.
- 노트북LM 서비스가 있습니다. 노트북LM 사용은 (33편) 노트북LM 사용법, 출퇴근길 발표 연습?에 정리했습니다.
지금 업무별 구성은 이렇습니다. 회사 구독인 업무용 계정은 챗지피티와 클로드를 씁니다.
- 문서작업: 클로드(개인·업무용), 챗지피티(업무용)
- 이미지: 제미나이, 챗지피티
- 앱 개발: 클로드
- 자료 정리: 클로드, 챗지피티
세 AI를 직접 써 본 비교는 (32편) 챗지피티 제미나이 클로드 비교, 승자는?에 있습니다.
연말에 '모두의 AI' 출시되면 쓰려는 이유는 핵심 기술을 해외에만 맡기면 선택권이 줄기 때문입니다
국산 AI를 쓰려는 이유는 핵심 기술을 해외에만 맡기면 결정적인 순간에 선택권이 줄 수 있다고 보기 때문입니다.
10월 16일 확인 기준, 아레나 에이전트 부문에서 업스테이지의 솔라 프로 4(Solar Pro 4)는 54위였습니다. 제가 확인한 한국 기업 모델은 솔라뿐이었습니다.
국산 AI가 나오면 성능이 다소 떨어져도 적극 쓸 계획입니다. 사용량이 늘어야 성능이 오른다고 생각하기 때문입니다. 제가 말하는 AI 식민화는 핵심 AI 기술을 해외 기업에 맡긴 탓에, 가격 인상이나 일방적인 조치가 있어도 손쓸 수 없게 되는 상태입니다.
이런 걱정을 하게 된 계기가 있습니다. 파이낸셜뉴스(10월 15일)는 우크라이나 대통령실 기술고문의 발표를 보도했습니다. 스페이스X가 군용 스타링크 단말기의 이동 속도 기준을 시속 약 160km로 제한했고, 사전 통보도 없었다는 내용입니다. 우크라이나군은 이 때문에 드론 통신이 끊겨 일부 작전에 차질이 생겼다고 주장합니다. 서울신문(10월 16일)에 따르면 미국 당국은 이번 속도 제한과 무관하다는 입장입니다. 원인에 대해서는 입장이 엇갈립니다.
확인: 두 답 중 바로 쓸 수 있는 쪽이 어느 쪽인지 직접 보고, 순위와 같은 결과인지 비교하면 됩니다.
- AI 성능 순위는 구독을 고를 때 참고할 만했고, 제 체감도 순위와 크게 다르지 않았습니다.
- 순위표는 사람 투표 기반이고, 제 체감으로는 2~3개월마다 바뀝니다.
- 점수 옆 오차 범위가 겹치면 순위 한 칸 차이로 우열을 가리기 어렵습니다.
- 저는 문서작업 순위를 보고 개인 구독을 챗지피티에서 클로드로 바꿨고, 제미나이는 가족 공유·이미지·노트북LM 때문에 유지했습니다.
- 국산 AI가 나오면 성능이 다소 낮아도 쓸 계획입니다. 핵심 기술을 해외에만 맡기는 것이 걱정이기 때문입니다.
→ (54편) 노션 독서노트, 업로드는 AI에? 글 보기 AI를 고를 때 순위, 후기, 직접 써 보기 중 무엇을 가장 먼저 보십니까? 하나를 골라 이유와 함께 댓글로 알려 주세요.
출처
작성 시점: 2026년 10월


댓글
댓글 쓰기