[AINews] Thinky's Inkling: 975B-A41B multimodal, nuevo mejor Apache 2.0 abierto
La empresa Thinking Machines Lab ha lanzado su primer modelo de lenguaje multimodal abierto, llamado Inkling. Este modelo tiene 975 mil millones de parámetros y 41 mil millones de parámetros activos.
Inkling es un modelo de transformador que combina expertos y admite una ventana de contexto de hasta 1 millón de tokens. Fue entrenado con 45 billones de tokens de texto, imágenes, audio y video. El modelo también incluye una versión más ligera llamada Inkling-Small, con 12 mil millones de parámetros activos.
“La empresa ha lanzado el modelo con licencia Apache 2.0, lo que significa que es de código abierto y puede ser utilizado y modificado por cualquier persona”
El modelo Inkling es capaz de razonar de manera nativa sobre texto, imágenes y audio, y equilibra el costo con el rendimiento a través de un esfuerzo de pensamiento eficiente y controlable. La empresa ha lanzado el modelo con licencia Apache 2.0, lo que significa que es de código abierto y puede ser utilizado y modificado por cualquier persona.
La liberación de Inkling ha sido bien recibida por la comunidad de inteligencia artificial, con muchos expertos calificándolo como el modelo de lenguaje abierto más fuerte lanzado en Estados Unidos hasta la fecha. Sin embargo, algunos han señalado que todavía está detrás de los mejores modelos cerrados y de algunos modelos abiertos chinos en algunas pruebas de rendimiento. El modelo ya está disponible en la plataforma Tinker de Thinking Machines Lab, así como en Hugging Face y otros sitios web de la comunidad.