На Artificial Analysis Image Arena Leaderboard модель пока сидит на 3м месте, при этом ultra версия уже успела занять топ-1 на арене от LMSYS.

Цены: $60/$40/$20 за 1000 изображений для режимов Ultra, Standard и Fast соответственно. В режиме Fast картинка генерируется за пару секунд. В Ultra, даже в разрешении 2K, — около 20 секунд, что в разы быстрее той же GPT. Но, к сожалению, без редактирования текстом (для этого есть Veo 3 😂).

Потыкаться во все три режима бесплатно можно в AI Studio.

@ai_newz

Начали пока что с GPT OSS 120B, хотя такую практику стоило бы расширить и на другие модели. Тестируют модель, прогоняя несколько бенчмарков несколько раз на каждом API провайдере, при это показывают не только медианное значение, но и разброс результатов бенчмарков. Как оказалось, разница между провайдерами огромная — на AIME25 худший провайдер уступает лучшему на 15 процентных пунктов.

Хуже всех себя показали Azure, AWS и Nebius, хотя, казалось бы, у триллионных компаний должны быть ресурсы на контроль качества. А вот лучше всех себя показали инференс стартапы — Fireworks, Novita и DeepInfra. Cerebras даёт лучшие результаты на AIME25, но на GPQA и IFBench заметно просаживаются.

Такой разброс может быть результатом как багов в софте, так и незадокументированных изменений в процессе инференса, вроде квантизации. Инференс LLM всё же крайне сложное дело — мелкие неточности в подсчётах могут крайне сильно повлиять на результаты, особенно если речь идёт о fp8 инференсе. Поэтому независимые и стандартизированные бенчи настолько важны. Ну а Artificial Analysis стоит подумать, как убедится что провайдеры не используют практики Volkswagen.

@ai_newz

Заниматься будут генеративными моделями, компьютерным зрением, распознаванием голоса, защитой от дипфейков и генерацией 3D. На старте компания закладывает 1 млрд рублей ($12.5M) инвестиций, с планами инвестировать в AI до 12 миллиардов ($150M) к 2028 году.

Лабораторию возглавил Александр Рыжков — трёхкратный Kaggle Grandmaster (пик — топ-44 мирового рейтинга). Это очень круто — я на пике входил в топ-45, это эксклюзивный клуб куда попадают очень немногие. Команда лаборатории будет заниматься не только фундаментальными исследованиями, но и быстрым созданием MVP – разработки должны внедряться в продукты Авито. Надеюсь, смогут натренировать что-то классное свое!

@ai_newz