Code Llama de Meta se acerca a GPT-4 en precisión de generación de código

Meta ha actualizado su gran modelo de lenguaje para la generación de código Code Llama 70B. Según el desarrollador, su precisión se acerca ahora a la del GPT-4 de OpenAI.

Esto es lo que sabemos

Según Meta, el Code Llama 70B actualizado puede manejar más consultas y producir resultados más precisos. En la prueba HumanEval obtuvo un 53% de precisión. En comparación, GPT-3.5 tiene una puntuación del 48,1% y GPT-4 del 67%.

Code Llama de Meta ayuda a los programadores a generar fragmentos de código basados en pistas y a depurar programas existentes. El modelo 70B se entrenó con 1 TB de datos relacionados con la programación. Está disponible gratuitamente para investigación y empresas.

Anteriormente, Meta presentó las herramientas específicas de lenguaje Code Llama Python y Code Llama Instruct. Ahora la empresa dice que sus modelos de IA están mostrando "los mejores resultados a la hora de ayudar a los desarrolladores."

Fuente: The Verge