Artificial Analysis запустила шесть отраслевых индексов производительности для оценки реальных бизнес-приложений в сферах финансов, права, здравоохранения, операций, инженерии и экономики, согласно данным мониторинга Beating. В отличие от традиционных универсальных бенчмарков, основанных на академических наборах данных, новые индексы используют индивидуальные веса на основе классификаций рабочих активностей O*NET для имитации реального распределения задач в каждом секторе. В ходе начального тестирования Claude Fable 5 возглавил все восемь индексов, в то время как открытая модель GLM-5.2 заняла первое место в пяти из шести отраслевых индексов и набрала 53 балла по инженерному индексу, приблизившись к показателю Claude Sonnet 5 в 55 баллов. Индексы выявляют значительные разрывы в производительности: в правовом бенчмарке Gemini 3.1 Pro Preview сравнялся по точности с Claude Fable 5 в пределах 11 баллов, при этом работая в 7 раз быстрее.

Посмотреть источник

Дисклеймер: Информация на этой странице может быть получена из источников третьих сторон и предоставляется только для ознакомления. Она не отражает взгляды или мнения Gate и не является финансовой, инвестиционной или юридической рекомендацией. Торговля виртуальными активами связана с высоким риском. Пожалуйста, не основывайте свои решения исключительно на данных этой страницы. Подробнее смотрите в Дисклеймере.

Связанные новости

4ч назад

Китайские предприятия за 12 месяцев перераспределяют 46% бюджетов на AI-ускорители в пользу отечественных чипов

5ч назад

Goldman Sachs прогнозирует капитальные расходы на ИИ в размере 7,6 триллиона долларов к 2031 году, переход к физической экономике ускоряется

12ч назад

Goldman Sachs: глобальные капитальные расходы на ИИ достигнут 7,6 триллиона долларов к 2031 году, переходя в реальную экономику

20ч назад

FCA предупреждает о «гонке вооружений» в регулировании ИИ в финансовых услугах, поскольку 20% взрослых в Великобритании используют модели ИИ для управления деньгами

20ч назад

Morgan Stanley публикует отчет «Истины об инвестициях в ИИ», показывающий обязательства на сумму 2,3 триллиона долларов с 2017 года.

Детальный анализ