A Microsoft egy új AI modellt képez ki, amely elég nagy ahhoz, hogy versenyezzen a főbb LLM-ekkel

A Microsoft egy új nagy nyelvi modellt (LLM) fejleszt, amelynek kódneve MAI-1, és amely versenyképes lehet a Google és az OpenAI által fejlesztett AI LLM-ekkel.

Ez az első alkalom, hogy a Microsoft ilyen nagyszabású LLM-et fejlesztett ki, mióta milliárdokat fektetett be az OpenAI-ba, hogy megszerezze annak technológiájának jogait a saját termelékenységi szoftvercsomagjában.

Az MAI-1 fejlesztését a Google DeepMind és az Inflection társalapítója, Mustafa Suleyman felügyeli, egy jelentés szerint, amelyet a The Information tett közzé. 2024 márciusában a Microsoft megszerezte az Inflection számos alkalmazottját egy 650 millió dolláros üzlet keretében.

A május 6-án közzétett jelentés szerint az MAI-1 körülbelül 500 milliárd paraméterrel rendelkezik, ami valahol az OpenAI GPT-4 egybillió paramétere és a Meta Llama 3 AI modelljének 70 milliárd paramétere között helyezkedik el.

Várhatóan “jóval nagyobb” és drágább is lesz, mint a Microsoft bármely korábbi, kisebb, nyílt forráskódú AI-modellje (Phi-3 és WizardLM-2), mivel több számítási teljesítményt és képzési adatot igényel.

Bár az MAI-1 kihasználhatja az Inflection technikáit és képzési adatait, továbbra is különbözik minden olyan modelltől vagy technológiától, amelyet az OpenAI vagy az Inflection készített. A projektet ismerő Microsoft alkalmazottak szerint az MAI-1 egy teljesen új LLM, amelyet a Microsoft belsőleg fejlesztett ki.

A Microsoft egyelőre nem közölte az MAI-1 pontos célját, és annak pontos felhasználása a teljesítményétől függ majd. A vállalat mindeközben egy nagy szervercsoportot allokált Nvidia GPU-kkal, és különféle forrásokból származó nagy mennyiségű adatot használ fel a modell fejlesztésére.

A jelentések szerint az előrehaladástól függően a vállalat a hónap végén bemutathatja az MAI-1-et a Build fejlesztői konferencián, de ez az információ még nincs megerősítve.