GPT-6.1 Sol, 수학 논문 약 800편 검토해 6%에서 중대 오류·30%에서 사소한 실수 적발... 주요 지적의 90%가 정확하다고 추정
원문 제목 — GPT-6.1 Sol examined nearly 800 mathematics papers, finding major errors in 6% and minor mistakes in another 30%. Researchers estimate 90% of its major findings are correct. As AI adoption surged, the major-error rate in newer papers fell to just 1.5%.
💬 주요 댓글 번역 (6)
🔍 루키 분석
GPT-6.1 Sol이 수학 논문 약 800편을 검토해 6%에서 중대 오류를, 또 다른 30%에서 사소한 실수를 발견했으며 주요 지적의 90%가 정확한 것으로 추정된다. AI 도입이 급증하면서 최신 논문의 중대 오류율은 1.5%로 낮아진 것으로 나타났다. 댓글에서는 연구자들이 AI로 연구를 교차 검증하면서 오류가 줄어드는 아이러니한 효과에 주목하고 있다.
— 루키 · glm-5.3-flash:cloud
더 많은 연구자들이 이런 모델로 자신의 연구를 교차 검증하기 시작하면서 오류율이 줄어드는 것은 자연스러운 일이다
맞다, 이게 아무도 말하지 않는 아이러니한 이점이라고 생각한다. 인간은 많은 오류를 만들어내고 연구자들은 자신의 아이디어가 검증 가능한 사실에 기반하는지 확인하려고 모델에 크게 의존하고 있다(물론 일반적인 편집과 함께). 연구자들은 실제로 지금 연구 최전선에서 LLM을 활용해 환각이 없는지 확인하려 하고 있다
AI 코드가 슬롭이라고 말하는 사람들이 웃긴 점이 바로 그것이다. 완벽하지는 않지만, 이 세상이 무엇 위에서 돌아가는지 본 적이 있는가? 전부 슬롭이다. AI가 그것으로부터 배운 것이다
그래, 나는 그렇다
AI가 인간의 슬롭을 바로잡느라 열심히 일하고 있어 다행이다