Microsoft випустила компактну мовну модель Phi-2, яка перевершує Llama 2 та Mistral 7B

Microsoft

Компанія Microsoft випустила компактну мовну модель Phi-2, яка перевершує аналоги від Meta та інших технологічних гігантів. Вона містить 2,7 млрд параметрів і може працювати навіть на ноутбуці.

Що відомо

За словами розробників, продуктивність Phi-2 можна порівняти з набагато більшими моделями на кшталт Llama 2 від Meta або Mistral-7B, які містять по 7 млрд параметрів. Phi-2 також випереджає нещодавно анонсовану Gemini Nano 2 від Google, маючи на пів мільярда параметрів менше.

Порівняння продуктивності Phi-2 та інших мовних моделей

Крім того, нова розробка Microsoft демонструє меншу токсичність і зміщення у відповідях порівняно з Llama 2. У демонстраційному ролику Phi-2, як і Gemini Ultra від Google, змогла правильно відповісти на запитання учня.

Приклад відповіді моделі Phi-2 на запитання

Поки що Phi-2 ліцензована лише для дослідницьких цілей, а не для комерційного використання.

Джерело: Microsoft