Amazon desarrolla un modelo de lenguaje listo para competir con GPT-4

Amazon creó recientemente un equipo con el objetivo de desarrollar un modelo de lenguaje eficiente (LLM). El gigante del comercio electrónico lleva varios meses inmerso en una carrera por la inteligencia artificial (IA) generativa y ahora quiere competir con sus rivales utilizando una herramienta de última generación.

Discreto sobre la IA, hasta ahora

El equipo creado por la firma de Jeff Bezos está liderado por Rohit Prasad, exdirector de aprendizaje automático y vicepresidente senior de Alexa. Llamó a varios investigadores especializados en IA que habían colaborado para Alexa y para el equipo científico de Amazon con el objetivo de trabajar en modelos de entrenamiento eficaces.

Este grupo de investigadores está trabajando particularmente en el proyecto “ Olimpo », un LLM que incluiría 2.000 mil millones de parámetros según testimonios recogidos por Reuters. A modo de comparación, se estima que el último modelo de OpenAI, el GPT-4, tiene, según algunos especialistas, 1 billón de parámetros.

Si Amazon decidió asumir este desafío es porque considera que tener modelos de lenguaje propios podría hacer más atractivos sus servicios. Internamente, la empresa se dio cuenta de que sus clientes, especialmente en la rama de la nube de AWS, utilizaban las herramientas más potentes con mayor regularidad. Por el momento, no se ha filtrado información sobre la fecha de lanzamiento de Olympus.

¿Cambio de estrategia en Amazon?

Hasta ahora, el grupo había tomado un camino muy diferente en lo que respecta a la inteligencia artificial generativa. El pasado mes de abril, AWS lanzó Bedrock, su oferta que reúne multitud de modelos de start-ups especializadas como AI21 o Anthropic. La división de nube de la compañía también ofreció Titan, su modelo de capacitación en herramientas de inteligencia artificial generativa que era mucho menos eficiente que los LLM más avanzados.

Adam Selipsky, director ejecutivo de AWS, dijo que quería ofrecer “ elección y flexibilidad » a sus clientes, conscientes “ que es poco probable que un solo modelo satisfaga las necesidades de todos nuestros clientes ». En junio, Amazon lanzó un centro de innovación dedicado a la IA generativa como parte de una inversión de 100 millones de dólares. Todos los especialistas del centro apoyan a las empresas clientes del grupo en la adopción de esta tecnología. “ Buscamos no sólo fortalecer nuestra posición en el mercado de la IA, sino también ayudar a otras empresas a aprovechar el potencial de la IA generativa. », afirmó Amazon.

Al mismo tiempo, la empresa decidió invertir en prometedoras empresas emergentes de IA, empezando por Anthropic. Amazon ya ha inyectado 1.250 millones de dólares a la joven empresa y prevé aumentar esa cifra hasta los 4.000 millones de dólares. Una táctica que recuerda a la de Microsoft con OpenAI. Al decidir desarrollar sus propias tecnologías internamente, la empresa creada por Jeff Bezos decidió incrementar sus armas ante la competencia.