Distributed Local Agents Benchmark — Как разработчик создал платформу для тестирования локальных моделей AI
🧪 У разработчика возникли сомнения в тестировании локальных моделей AI. Он понимал, что задача не из лёгких: нужно было протестировать все конфигурации и модели на различных устройствах. После долгих размышлений разработчик решил создать веб-сайт, где каждый может протестировать свои настройки и делиться результатами. Теперь на airbench.ai можно найти таблицу лидеров, где представлены тесты, и добавлять свои результаты для создания полностью распределённого бенчмарка агентов.
Источник:
www.reddit.com