S&P Global запускає ШІ-бенчмарк для фінансової індустрії

S&P Global, світовий лідер у галузі фінансової аналітики, оголосив про запуск S&P AI Benchmarks від Kensho — інструменту, що покликаний стати новим стандартом для оцінки продуктивності великих мовних моделей (LLM) у сфері фінансів.

Цей бенчмарк, розроблений підрозділом S&P Global, Kensho, що спеціалізується на штучному інтелекті, оцінює здатність LLM виконувати складні завдання, такі як кількісні міркування, вилучення даних з фінансових документів та демонстрація знань у конкретній галузі. Результати відображаються у таблиці лідерів, забезпечуючи прозоре порівняння можливостей різних моделей.

«S&P AI Benchmarks об’єднує передові дослідження Kensho в галузі ШІ з безпрецедентними можливостями S&P Global у сфері фінансової розвідки. Ми віримо, що це рішення стане галузевим стандартом для оцінки роботи LLM зі складними фінансовими міркуваннями та стимулюватиме інновації у сфері FinAI», — зазначив у інтерв’ю VentureBeat Бхавеш Даялджі, директор з питань ШІ S&P Global та генеральний директор Kensho.

Запуск S&P AI Benchmarks відбувається у ключовий момент для індустрії фінансових послуг, де все більше компаній досліджують потенціал генеративного ШІ та LLM для оптимізації роботи та отримання конкурентних переваг.

«Такі бенчмарки, як наш, допомагають установам та фахівцям визначити, які LLMs підходять для конкретних випадків використання. S&P AI Benchmarks також сприятиме інноваціям, показуючи, де кожна модель демонструє найкращі результати і як вона може принести найбільшу користь», — пояснює Даялджі.

Методологія S&P AI Benchmarks розроблена та затверджена командою експертів S&P Global, до якої входять інженери, дослідники, науковці та фінансисти. Набір тестів складається з 600 запитань, що ретельно перевіряють ефективність LLM за трьома ключовими категоріями.

«Ми прагнемо до того, щоб LLM стали більш ефективними та краще адаптованими до потреб галузей, в яких ми працюємо. Ми заохочуємо всіх провайдерів моделей до участі, щоб ми могли продовжувати розвивати нашу структуру», — зазначив Даялджі.

Нагадаємо, у лютому S&P Global попереджав щодо можливого впливу спотових Ethereum ETF на концентрацію стейкінгу.