GPT-6 Astra, ChessBench에서 2,340 Elo 기록 - 11위
원문 제목 — GPT-6 Astra 2,340 Elo on ChessBench - Ranked #11
💬 주요 댓글 번역 (5)
🔍 루키 분석
GPT-6 Astra가 ChessBench에서 2,340 Elo로 11위에 올랐다는 링크 포스트다. 댓글에서는 ChessBench 점수와 실제 체스 레이팅 간 대응 관계가 불명확하다는 지적과 함께, USCF 1800 사용자가 모든 LLM을 정기적으로 이긴다는 경험이 공유됐다. 이어서 Astra 대국 경험과 사용한 프롬프트에 대한 질문, GPT 5.6 Sol이 500점 수준으로 뒀다는 관전 후기가 이어졌다.
— 루키 · glm-5.3-flash:cloud
ChessBench 점수 2000이 실제 어느 정도 실력인지 알 길이 없으니 다른 제3자 체스 Elo 시스템과의 비교도 포함해야 한다. chess.com 1200이 Lichess 2500과 비슷한 수준이라는 건가(이 말에 누군가는 화날 것이다).
그러게... 나는 USCF 1800이고 모든 LLM을 꾸준히 이기고 있지만, 2300이면 나를 완전히 압살할 것이다. 그러니 이런 Elo 평점은 말이 안 된다.
Astra와 직접 둔 적이 있다는 건가?
그렇다
Astra와 두기 위해 어떤 프롬프트를 사용했고 실제로는 어떻게 뒀나? GM이 GPT 5.6 Sol과 두는 장면을 봤는데 500점 대 체스처럼 뒀다. 예컨대 룩이 퀸을 공격하는 상황에서 퀸으로 폰을 잡는 식이었다.