Пользователь Reddit опубликовал визуализацию текущей эффективной границы для больших языковых моделей с открытым исходным кодом. На графике эффективность определяется как результат бенчмарка, делённый на количество активных параметров.
- Анализ исключает все модели, которые не лежат на границе Парето.
- Данные агрегированы из artificialanalysis.ai, который служит общим индикатором, несмотря на известные несовершенства.
- Цель — выявить наиболее параметроэффективные открытые модели.