Microsoft heeft Phi-3 Mini gelanceerd, een compact model voor kunstmatige intelligentie
Microsoft heeft de Phi-3 Mini onthuld, zijn nieuwe lichtgewicht model voor kunstmatige intelligentie, het eerste van drie aangekondigde kleine modellen in de Phi-3 familie.
Dit is wat we weten
Phi-3 Mini heeft slechts 3,8 miljard parameters, wat aanzienlijk kleiner is dan grote taalmodellen zoals GPT-4. Maar volgens de verklaring van Microsoft is de nieuwkomer, ondanks het compacte formaat, bijna net zo krachtig als GPT-3.5.
Volgens Eric Boyd, vice president van Microsoft Azure AI Platform, heeft Phi-3 Mini vergelijkbare mogelijkheden als de grote taalmodellen "alleen in een kleinere vormfactor".
Het bedrijf is ook van plan om Phi-3 Small met 7 miljard parameters en Phi-3 Medium met 14 miljard parameters in de toekomst uit te brengen. De kleine modellen hebben verschillende voordelen - ze zijn goedkoper en werken beter op persoonlijke apparaten.
Volgens Boyd is de Phi-3 Mini getraind op een eigenaardige manier "curriculum" geïnspireerd door leermethodes uit kinderboeken met eenvoudige zinsstructuren, waarbij geleidelijk wordt overgegaan naar meer complexe concepten.
Hoewel de compacte modellen niet kunnen tippen aan de grotere modellen als het gaat om de breedte van kennis, zijn ze voldoende voor veel populaire taken, zoals het samenvatten van teksten, helpen met programmeren of het maken van chatbots.
Wanneer we het kunnen verwachten
Phi-3 Mini is al beschikbaar in Azure, Hugging Face en Ollama. Grotere versies volgen later.
Bron: The Verge