AI has improved significantly at reasoning about IKEA furniture assembly
Samaritan Research (formerly Epoch AI benchmark publication) · 2026-09-2360장·가구 3종의 시험 구성, GPT-6 Astra 80%, 3분 중앙값과 일반화 한계를 공개합니다.
Epoch AI가 공개한 Furniture Assembly Benchmark에서 모델들은 조립 설명서와 가구 사진을 함께 보고 올바르게 조립됐는지, 틀렸다면 어느 단계에서 어떤 오류가 있었는지 답했습니다. 초기 공개 결과에서 GPT-6 Astra가 60개 사진 항목 중 80%를 맞혔습니다. 다만 시험은 가구 3종에 한정됐고 사람 기준 점수가 없으며, 설명의 일부는 별도 언어 모델이 관대하게 채점했습니다.
60장·가구 3종의 시험 구성, GPT-6 Astra 80%, 3분 중앙값과 일반화 한계를 공개합니다.
사진·설명서·도구 제공 방식, 80단계 예산과 GPT-5.6 Sol 채점 절차를 설명합니다.
80% 결과와 시험 범위를 확인하며 로봇의 실제 조립 능력을 시험한 것은 아니라고 구분합니다.
60장·가구 3종의 80% 결과를 확인하고 실제 물리 작업으로의 일반화가 아직 불명확하다고 전합니다.
선정 기준 2026년 9월 28일 최근 48시간의 주요 AI 발표를 먼저 검토했지만 충분한 1차 자료와 독립 확인을 갖춘 비중복 사건을 찾지 못해 7일 보완 창을 적용했습니다. 9월 23일 공개된 벤치마크와 방법론, 9월 23일 및 26일의 독립 보도를 모두 열어 확인하고, 80% 점수와 함께 60장·가구 3종·사람 기준 부재·언어 모델 채점이라는 범위를 보존했습니다.
END OF EPISODE 018
“이 결과는 가구 3종의 사진 60장에 한정되고 사람 기준 점수도 없어, 실제 수리·정비 현장으로 일반화하려면 별도 검증이 필요하다.”