예전에 주니어에게 맡기던 업무를 이제 Opus 5.5가 몇 분 만에 해낸다. 우리는 GDPval을 얼마나 넘어섰는지 아직 실감하지 못하고 있다
원문 제목 — Work I used to give juniors now takes Opus 5.5 minutes. I don't think we've clocked how far past GDPval we are
📄 전문 번역
지난 12월 GPT-5.2는 산업 전문가를 상대로 과제의 71%에서 승리하거나 비겼다. 4월에는 GPT-5.5가 85%, Opus 4.7이 80%에 도달했다. 그리고 OpenAI는 자체 인간 채점 수치 공개를 조용히 중단했고 우리는 그냥 넘어가 버렸다. (artificial analysis가 공개한 GDPval-AA v2.1은 AI 채점 방식이므로 제외한다)
이것들이 잘 정의된 과제일 뿐 직업 전체는 아니라는 점은 안다. 하지만 이는 내 하루 업무의 상당 부분을 차지하며, 그 이후 최신 모델들은 더 앞서 나갔다.
Opus 5.5를 쓰면 예전에 주니어 동료에게 위임했던 과제가 이제는 몇 분 만에 최소한의 오류로 끝난다. 나는 이제 처음부터 직접 만드는 일이 거의 없다. 원하는 것을 설명하면 모델이 만들어내고 내가 검토한다. 내 검토 기준으로는 95% 이상 정확하다. Fable 5.5와 이후 모델들도 기대한다. 더 많고 더 어려운 분야도 비슷한 지점에 도달할 것이라 본다.
이는 정상성 편향처럼 느껴진다. 각 모델은 이전 모델보다 한 단계 나은 정도라 아무도 우리가 실제로 얼마나 멀리 왔는지 실감하지 못한다. 여러분은 일상적인 사무 업무에서 어떻게 느끼는가? 직접 하는 일이 줄고 AI에 위임하고 검토하는 쪽으로 변하고 있는가? 의견을 듣고 싶다. 작성자는 TraditionalHome8852다.
💬 주요 댓글 번역 (5)
🔍 루키 분석
이 글은 GDPval 벤치마크 기록의 변화를 근거로 최신 AI 모델이 전문가 수준 업무에 도달했다고 진단한다. 작성자는 Opus 5.5가 예전에 주니어에게 맡기던 업무를 몇 분 만에 95% 이상 정확도로 처리한다고 평가하며, 모델 간 발전이 단계적으로 이뤄져 변화의 크기가 체감되지 않는 정상성 편향을 지적한다. 댓글에서는 법률 분야를 중심으로 AI가 지적 노동을 대체하되 변호사 직업은 자격과 규제 체계 때문에 쉽게 사라지지 않는다는 상반된 의견이 오갔다.
— 루키 · glm-5.3-flash:cloud
나는 변호사이고 수년간 많은 로 클럭(법률 보조원)이 나를 위해 일했다. 현재 모델들은 그 누구보다 높은 수준의 작업을 일관되게 해내며, 내가 로 클럭 시절 했던 작업보다도 낫다. 모델은 지금 모든 리서치 프로젝트에서 내 첫 번째 선택지다. 실제 집필에 쓰는 것은 피하는데 글쓰기 실력이 퇴화하는 것을 원치 않기 때문이다. 대신 발행 전에 내 작업 거의 전부를 검토하게 하는데, 중요한 제안을 하고 의미 있는 오류를 잡아낸다. 법률 업계에서 입문 직무는 대개 거의 전적으로 지적인 노동인데…
AI가 법정 변호사(barrister)라는 직업을 없애고 실제로 합리적인 결과를 내는 일을 하기를 바란다.
웃음. 변호사는 사라지지 않는다. 적어도 전부는 아니다. 앞으로 일어날 일은 지적 창의성이 모두 대체되고, 남는 사람은 골프를 잘 치는 처세술가들이라는 것이다.
AI가 제품 개발(당신의 경우 법률 문서)의 실무 작업 대부분을 맡게 되면 우리는 모두 그저 영업사원이 된다.
변호사는 거의 방탄이다. AI가 그들의 업무 대부분을 해낼 수 있는가? 물론이다. 하지만 변호사에게는 초능력이 있는데, 미국 어느 주든 연방 입법부든 절반 이상이 변호사 자격자라는 사실이다. 변호사가 규칙을 만들고 그 규칙은 각종 일에 자격 있는 변호사를 요구한다. 그들이 자신들의 서비스를 필요하게 만든 법을 다시 써서 스스로 무의미해지기로 결정할 미래는 보이지 않는다.