Microsoft har lansert den kompakte språkmodellen Phi-2, som overgår Llama 2 og Mistral 7B.

Av: Bohdan Kaminskyi | 13.12.2023, 19:44

Microsoft

Microsoft har lansert Phi-2, en kompakt språkmodell som overgår tilsvarende modeller fra Meta og andre teknologigiganter. Den inneholder 2,7 milliarder parametere og kan til og med kjøres på en bærbar datamaskin.

Dette er hva vi vet

Ifølge utviklerne kan Phi-2s ytelse sammenlignes med mye større modeller som Metas Llama 2 eller Mistral-7B, som hver inneholder 7 milliarder parametere. Phi-2 ligger også foran Googles nylig annonserte Gemini Nano 2, som har en halv milliard færre parametere.


Ytelsessammenligning mellom Phi-2 og andre jazikoi-modeller.

Microsofts nyutvikling viser også mindre toksisitet og svarskjevhet sammenlignet med Llama 2. I demoen klarte Phi-2, i likhet med Googles Gemini Ultra, å svare riktig på en elevs spørsmål.


Et eksempel på hvordan Phi-2-modellen svarer på et spørsmål.

Foreløpig er Phi-2 kun lisensiert for forskningsformål og ikke for kommersiell bruk.

Kilde: Microsoft: Microsoft