REDDIT / r/singularity
GPT-6-Astra-Max, ARC-AGI-3 벤치마크서 62.7% 달성! 비용 논쟁과 벤치마크 유용성 논란이 뜨겁다.
본문 요약
작성자는 6개월 전 ARC-AGI-3에서 1% 미만이던 모델 성능이 GPT-6-Astra-Max를 통해 62.7% (무하네스)를 달성했다고 보고했다. 이는 1년 예상치보다 빠르게 나왔지만 비용은 여전히 $26.1k로 높다. 메모리 어댑터를 사용하면 벤치마크는 포화 상태이나, AI 비용 하락 추세로 더 저렴한 고성능 모델을 기대한다.
이 페이지는 Reddit 원문과 반응을 AI로 요약한 자료입니다. 아직 편집자 검수를 거치지 않았습니다. 중요한 내용은 원문에서 확인해 주세요. 요약·검수 원칙 →
Reddit 댓글 요약
AI 성능 및 비용 예측
GPT-6-Astra-Max가 하네스 사용 시 ARC-AGI-3에서 거의 100% 성능을 보였다는 언급과 함께, 토큰 가격 하락 추세로 $2에 75% 성능 달성 시점에 대한 낙관론과 $18,800/$2 비용 계산법의 한계에 대한 이견이 제시되었다.
ARC-AGI 벤치마크에 대한 회의론
ARC-AGI가 무엇을 측정하는지, 그리고 실제 유용성에 대한 의문이 제기되었으며, LLM이 취약한 공간/시간 추론 능력에 치중되어 있다는 지적과 함께 AGI는 여러 AI 패러다임의 조합일 것이라는 의견이 나왔다.
AI의 시각 처리 능력에 대한 오해 해명
모델이 눈이 없어 '시각' 작업을 이해하지 못한다는 오해를 반박하며, 모델 또한 토큰을 통해 시각 데이터를 처리하므로 인간의 뇌와 유사하게 '본다'고 설명했다.
※ AI가 작성한 요약으로, 오류나 누락이 있을 수 있습니다. 정확한 내용은 Reddit 원문을 확인해 주세요.