#Microsoft

Пекінський університет та Microsoft співпрацюють над створенням ефективних довгих контекстних вбудовувань

Спільними зусиллями Пекінського університету та Microsoft було представлено LongEmbed — метод розширення контекстного вікна вбудовування моделей до 32 000 токенів без перенавчання. LongEmbed унікально поєднує інтерполяцію позиції та RoPE для обробки довших текстових послідовностей, зберігаючи при цьому базову продуктивність на коротких вхідних даних.

Microsoft, AWS та уряди США та Японії об’єднують зусилля для розвитку ШІ

США та Японія оголосили про нову домовленість, яка включає значні інвестиції в ШІ. У рамках цієї угоди Microsoft і AWS виділять $17,9 млрд на розвиток інфраструктури та освіти в галузі ШІ в Японії.

Microsoft та Nvidia оголосили про нові важливі інтеграції та інновації на GTC

Участь корпорації Microsoft у нещодавній конференції Nvidia GTC AI у Сан-Хосе, що проходила з 18 по 21 березня, продемонструвала її співпрацю з Nvidia, яка виводить компанію на лідируючі позиції в галузі інновацій у сфері штучного інтелекту.

Microsoft представила нові можливості вбудовування багатомовних текстів у моделі обробки природної мови

Основна проблема в обробці природної мови (NLP) полягає в розробці моделей, які можуть однаково добре працювати з різними мовами. Традиційні моделі, часто англоцентричні, мають проблеми в багатомовних контекстах, що підкреслює необхідність вбудовування моделей, навчених на різноманітних лінгвістичних даних.

TAG-LLM: ШІ-інструмент для розшифровки складних білкових структур і хімічних сполук

TAG-LLM, розроблений у Microsoft Research, відкриває нові перспективи для застосування великих мовних моделей (LLM) у спеціалізованих галузях, таких як обчислювальна біологія і хімія.