Para Baidu, ERNIE Bot supera a ChatGPT en chino

Baidu anunció este martes 27 de junio que su inteligencia artificial generativa (AI), ERNIE Bot, será más poderosa que ChatGPT de OpenAI en varias áreas clave. Ahora puede integrarse en aplicaciones chinas.

ERNIE todavía necesita progresar en la ciencia

El 16 de marzo, frente a dos millones de espectadores en WeChat, Robin Li, fundador del motor de búsqueda chino Baidu, presentó el desempeño de su IA llamada ERNIE Bot. Después de la conferencia de 50 minutos, el valor de las acciones de la empresa cayó más del 6% en la Bolsa de Valores de Hong Kong. No se detectaron errores ni errores durante este evento. A los inversores simplemente no les gustó tanto la falta de asunción de riesgos como la falta de innovación de la empresa.

En el escenario, el propio Robin Li admitió: “No puedo decir que estemos listos. Comparar ERNIE Bot con ChatGPT, o incluso con GPT-4, es un listón muy alto”. Hoy, eso parece haber cambiado. Baidu anunció en un comunicado de prensa la nueva versión de su IA, ERNIE 3.5.

” Solo tres meses después del lanzamiento de ERNIE Bot, el gran modelo de lenguaje de Baidu basado en ERNIE 3.0, su nueva versión, ERNIE 3.5, ha logrado grandes mejoras en eficiencia, funcionalidad y rendimiento. dice la empresa. Agrega que ERNIE 3.5 superó a ChatGPT en varias pruebas comparativas.

La compañía dice que las pruebas se basaron en exámenes estándar de admisión y calificación para ingresar a la universidad o convertirse en abogado. Los resultados publicados en el Ciencia diaria de China indican que la IA de Baidu logró una puntuación de 57,11, frente a los 44,73 de ChatGPT en la prueba AGIEval. Un conjunto de evaluaciones creado por Microsoft para determinar el nivel de desempeño de una IA en 20 exámenes de nivel secundario.

En todas las pruebas, GPT-4, el modelo más nuevo y avanzado de OpenAI, supera el rendimiento de ERNIE sin problemas. La IA china aún se las arregla para mantenerse en una evaluación del idioma chino que contiene más de 13,000 preguntas de opción múltiple sobre más de 50 temas diferentes. Obtiene 71,93 contra 68,57 para GPT-4 y 51,70 para su versión anterior. ERNIE debe, sin embargo, progresar en el tema de las ciencias globales y en particular en las humanidades donde obtuvo una puntuación muy inferior a las de OpenAI.

En su declaración, Baidu dice que su IA ahora está lista para usarse a través de aplicaciones. ” Cualquier aplicación que involucre lenguaje, texto o código puede potencialmente usar ERNIE Bot “dice la empresa. Si la empresa quiere mejorar aún más su IA, tendrá que estar atenta a la situación geopolítica entre China y Estados Unidos. Desde hace unos meses, las empresas del Reino Medio están incluidas en la Entity List, la lista negra del Departamento de Comercio estadounidense. Ya no pueden comprar chips lo suficientemente potentes como para entrenar y ejecutar potentes IA. Líder del mercado, Nvidia, sin embargo, ha desarrollado componentes que están suficientemente restringidos para ser exportados.