xAI выпустила ранний превью Grok-2 и её более лёгкую версию, Grok-2 mini, что знаменует собой значительное улучшение по сравнению с предыдущей моделью Grok-1.5. Эти новые модели в настоящее время доступны в бета-версии на 𝕏 для пользователей Premium и Premium+, при этом доступ к корпоративному API планируется открыть позже в этом месяце.
- Grok-2 демонстрирует передовые возможности в чате, программировании и рассуждениях, превосходя Claude 3.5 Sonnet и GPT-4-Turbo в рейтинге LMSYS Chatbot Arena.
- Обе модели показывают значительные улучшения по сравнению с Grok-1.5 в следовании инструкциям, предоставлении фактической информации и использовании инструментов.
- Бенчмарки указывают на конкурентоспособную производительность с другими передовыми моделями в задачах естественных наук для выпускников (GPQA), общих знаниях (MMLU, MMLU-Pro) и математике (MATH).
- Grok-2 достигает лучших результатов в визуальном математическом рассуждении (MathVista) и ответе на вопросы по документам (DocVQA).
- Корпоративный API будет поддерживать развертывание инференса в нескольких регионах с улучшенными функциями безопасности, такими как обязательная многофакторная аутентификация.
Выход этой версии позиционирует xAI на переднем крае разработки ИИ за счёт улучшения базовых способностей к рассуждению благодаря новому вычислительному кластеру и расширенному мультимодальному пониманию.