Auker 1.0 снизил стоимость бенчмарка в 6 раз
🧪 116 экспериментов — и в итоге Auker 1.0 от Reasonary AI снизил стоимость бенчмарка до $9.73, что почти в 6 раз меньше первоначальной. Вместо того чтобы просто использовать мощные модели, Auker переработал подход к распределению интеллекта между подзадачами. Это привело к точности 80.35% на MMMU-Pro без потери качества. Методология, история экспериментов и результаты доступны по ссылке: здесь.
Источник:
www.reddit.com