DPO

모델이 잘못된 힌트에 휩쓸리지 않으면서, 정확한 힌트는 잘 활용하도록 훈련하는 방법을 제시한 논문 무엇이 문제였나 — AI가 문제를 풀다가 그럴듯하지만 틀린 힌트만 들어와도 답을 바꿔버린다. 23개 모델 모두 평균 17.1포인트 정확도가 떨어졌다. 어떻게 풀었나 — 같은 문제를 힌트 없음/틀린 힌트/맞는 힌트/무관한 힌트 4가지로 만들어, 틀린 힌트에 흔들리지 않으면서 맞는 힌트는 잘 쓰도록 선호 학습을 시켰다. 그래서 뭐가 좋아졌나 — 틀린 힌트로 인한 오답 전환율(SC2W)이 절반 가까이 줄고, 정확한 힌트를 줬을 때 성능은 그대로 유지됐다. ...

개요 “AI는 클수록 좋다.” 지난 3년간 기업 AI 도입 전략을 지배해 온 암묵적 공식이다. 그런데 이 공식에 균열이 생겼다. Dharma-AI가 발표한 DharmaOCR 벤치마크는 30억 파라미터 특화 모델이 GPT-5, Claude Opus, Gemini Pro를 포함한 모든 상용 프론티어 API를 품질·비용·안정성 세 축에서 동시에 앞섰다는 사실을 실증했다. 비용 차이는 52배다. 이 결과가 왜 중요한지, 무엇이 이를 가능하게 했는지를 짚는다. ...