Microsoft trénuje nový AI model dostatečně velký, aby konkuroval hlavním LLM

Společnost Microsoft vyvíjí nový velký jazykový model (LLM) s označením MAI-1, který má potenciál konkurovat jazykovým modelům vyvinutým společnostmi Google a OpenAI. Je to poprvé, co Microsoft vyvíjí takto rozsáhlý jazykový model od doby, kdy investoval miliardy dolarů do společnosti OpenAI za práva na nasazení její technologie ve své sadě softwaru pro produktivitu..

Na vývoj MAI-1 podle portálu The Information dohlíží Mustafa Suleyman, spoluzakladatel společnosti Google DeepMind a Inflection.V březnu 2024 získala společnost Microsoft část zaměstnanců společnosti Inflection na základě transakce v hodnotě 650 milionů dolarů.

Podle zprávy z 6. května bude mít model MAI-1 přibližně 500 miliard parametrů, což jej řadí mezi model GPT-4 společnosti OpenAI, který má údajně jeden bilion parametrů, a model Llama 3 od společnosti Meta, který má 70 miliard parametrů.

Podle zprávy z 6. května bude mít model MAI-1 přibližně 500 miliard parametrů, což jej řadí mezi model GPT-4 společnosti OpenAI, který má údajně jeden bilion parametrů, a model Llama 3 od společnosti Meta, který má 70 miliard parametrů. Očekává se také, že bude „mnohem větší“ a dražší než kterákoli z předchozích menších open-source umělých inteligencí od Microsoftu (Phi-3 a WizardLM-2), protože bude vyžadovat větší výpočetní výkon a trénovací data.

Ačkoli MAI-1 může využívat techniky a tréninková data od společnosti Inflection, zůstává odlišný od jakýchkoli modelů nebo technologií vytvořených společností OpenAI nebo právě Inflection. Podle zaměstnanců společnosti Microsoft, kteří jsou s projektem obeznámeni, je MAI-1 zcela nový LLM vyvinutý interně společností Microsoft.

Microsoft ještě neoznámil přesný účel MAI-1 a jeho přesné využití bude záviset na jeho výkonnosti. Společnost zatím pro zdokonalení modelu vyčlenila velké množství serverů s grafickými procesory Nvidia a využívá velké množství dat z různých zdrojů.

V závislosti na jeho pokroku by podle dostupných zpráv mohla společnost Microsoft předvést model MAI-1 na vývojářské konferenci Build koncem tohoto měsíce. To však nebylo potvrzeno.