물리 세계·현실 영향IBM (Raffi Khatchadourian)
Replayable Financial Agents 발표
Replayable Financial Agents 발표 — 7개 모델·4개 프로바이더에서 온도 0.0으로 4,705회 에이전트 실행. 저자 측정 결과 결정 재현성과 과제 정확도 사이에 상관 없음(r=-0.11, p=0.63). 120B+ 대형 모델은 재현성 20% 미만
왜 중요한가
도메인은 금융이지만 감사 재현 요구는 품질 감사와 동일 구조. 정확도 높은 모델을 고르면 재현성이 따라온다는 통념을 4,705회 실행으로 반증
출처 — 1차 출처만 싣고, 직접 이동해 확인할 수 있어요
논문arxiv.orghttps://arxiv.org/html/2601.15322v22026년 8월 24일에 더한 조각 · 그 주 보기