Cerebras lanza la tecnología de inferencia de IA más rápida del mundo, con un rendimiento 20 veces superior al de NVIDIA

Cerebras Systems acaba de anunciar oficialmente Cerebras Inference, considerada la solución de inferencia de IA más rápida del mundo. Esta inferencia de Cerebras ofrece un rendimiento de hasta 1.800 tokens por segundo para los modelos Llama 3.1 8B (8 mil millones de parámetros) y 450 tokens por segundo para Llama 3.1 70B, lo que es hasta casi 20 veces más rápido que las soluciones de inferencia de IA basadas en GPU de NVIDIA disponibles en las nubes de hiperescala actuales en todo el mundo, incluido Microsoft Azure.

Además de su increíble rendimiento, el precio del servicio de esta nueva solución de inferencia también es muy económico, una fracción del precio de las populares plataformas de nube de GPU. Por ejemplo, un cliente puede obtener un millón de tokens por solo 10 centavos, lo que proporciona un rendimiento de precio 100 veces mayor para cargas de trabajo de IA.

La precisión de 16 bits de Cerebras y la velocidad de inferencia 20 veces más rápida permitirán a los desarrolladores crear aplicaciones de IA de alto rendimiento de próxima generación sin comprometer la velocidad ni el costo. Esta innovadora relación precio/rendimiento es posible gracias al sistema Cerebras CS-3 y al procesador de inteligencia artificial Wafer Scale Engine 3 (WSE-3). CS-3 ofrece 7.000 veces más ancho de banda de memoria que Nvidia H100, lo que resuelve el desafío técnico del ancho de banda de memoria para la IA generativa.

Cerebras lanza la tecnología de inferencia de IA más rápida del mundo, con un rendimiento 20 veces superior al de NVIDIA

Cerebras Inference está actualmente disponible en los siguientes tres niveles:

  • El nivel gratuito ofrece acceso gratuito a la API y límites de uso generosos para cualquier persona que se registre.
  • El nivel de desarrollador está diseñado para implementaciones flexibles y sin servidor, y proporciona a los usuarios puntos finales de API a una fracción del costo de las alternativas existentes en el mercado, con los modelos Llama 3.1 8B y 70B con un precio de solo 10 centavos y 60 centavos por millón de tokens respectivamente.
  • Los planes de nivel empresarial ofrecen modelos optimizados, acuerdos de nivel de servicio personalizados y soporte dedicado. Ideal para cargas de trabajo persistentes, las empresas pueden acceder a Cerebras Inference a través de la nube privada administrada por Cerebras o en las instalaciones locales.

Con un rendimiento récord, precios competitivos y acceso API abierto, Cerebras Inference establece un nuevo estándar para el desarrollo e implementación de LLM abierto. Como la única solución capaz de ofrecer entrenamiento e inferencia de alta velocidad, Cerebras abre posibilidades completamente nuevas para la IA.

Con las tendencias de IA evolucionando rápidamente y NVIDIA actualmente ocupando una posición dominante en el mercado, el surgimiento de empresas como Cerebras y Groq señala un cambio potencial en la dinámica de toda la industria. A medida que aumenta la demanda de soluciones de inferencia de IA más rápidas y rentables, soluciones como Cerebras Inference están bien posicionadas para arriesgarse al dominio de NVIDIA, especialmente en el espacio de inferencia.

Dejar un comentario

Eliminar restos de pegamento de la ropa: actuar con cuidado antes de que la mancha se quede para siempre

Eliminar restos de pegamento de la ropa: actuar con cuidado antes de que la mancha se quede para siempre

Eliminar restos de pegamento de la ropa: desde despegarlos con cuidado pasando por el frío, agua con jabón y quitamanchas hasta el lavado. Con consejos para el cianocrilato, restos de etiquetas y tejidos delicados.

Limpiar el filtro del lavavajillas: guía sencilla para evitar residuos y malos olores

Limpiar el filtro del lavavajillas: guía sencilla para evitar residuos y malos olores

Aprenda a limpiar el filtro de un lavavajillas paso a paso: extracción, aclarado, cepillado, montaje, frecuencia y señales de que una simple limpieza ya no es suficiente.

¿Se puede usar ácido cítrico para limpiar el humidificador? Precauciones por tipo y procedimientos seguros con ejemplos ficticios

¿Se puede usar ácido cítrico para limpiar el humidificador? Precauciones por tipo y procedimientos seguros con ejemplos ficticios

Explicación basada en información oficial de fabricantes sobre la concentración, el remojo, el enjuague y las precauciones por tipo al limpiar humidificadores con ácido cítrico. Se presentan procedimientos prácticos mediante ejemplos ficticios.

¿Qué pasa si no limpias el filtro del aire acondicionado? Riesgos en la factura eléctrica, eficiencia y moho, y cómo elegir la frecuencia de limpieza

¿Qué pasa si no limpias el filtro del aire acondicionado? Riesgos en la factura eléctrica, eficiencia y moho, y cómo elegir la frecuencia de limpieza

No limpiar el filtro del aire acondicionado puede provocar un aumento en la factura eléctrica, una menor eficiencia de calefacción y refrigeración, así como olores y moho. Basado en información oficial de fabricantes y de ahorro energético, explicamos la frecuencia de limpieza, las funciones de autolimpieza y cuándo usar servicios profesionales.

Lavar la mochila en la lavadora: cuándo se puede hacer y cuándo es mejor evitarlo

Lavar la mochila en la lavadora: cuándo se puede hacer y cuándo es mejor evitarlo

Descubre cuándo lavar una mochila en la lavadora, cómo leer la etiqueta, elegir el ciclo y el detergente, proteger correas y cremalleras, y cuándo preferir el lavado a mano.

Solución de problemas de actualizaciones de error H en Microsoft Teams

Solución de problemas de actualizaciones de error H en Microsoft Teams

¿Tiene problemas con el Error H de Microsoft Teams durante las actualizaciones? Descubra cómo solucionar el Error H de Microsoft Teams, sus causas comunes y soluciones rápidas para restablecer una colaboración fluida. Actualizado con las últimas soluciones.

Solución de problemas de errores de llavero en Microsoft Teams para Mac

Solución de problemas de errores de llavero en Microsoft Teams para Mac

¿Tienes problemas con el llavero de errores de Microsoft Teams para Mac? Descubre soluciones paso a paso y probadas para macOS y recupera una colaboración fluida. ¡Soluciones rápidas en el interior!

Cómo solucionar el error 1200 de Microsoft Teams en tu teléfono (iOS/Android)

Cómo solucionar el error 1200 de Microsoft Teams en tu teléfono (iOS/Android)

¿Cansado de que el error 1200 de Microsoft Teams bloquee tus llamadas? Descubre soluciones rápidas y paso a paso para iOS y Android y vuelve a trabajar en equipo sin problemas rápidamente, ¡sin necesidad de conocimientos técnicos!

¿Por qué falló mi grabación en Microsoft Teams? Razones comunes

¿Por qué falló mi grabación en Microsoft Teams? Razones comunes

¿Frustrado porque tu grabación de Microsoft Teams falló? Descubre las razones más comunes, como problemas de permisos, límites de almacenamiento y fallos de red, además de soluciones paso a paso para evitar futuros fallos y grabar siempre de forma impecable.

¿Por qué no puedo ver las salas de grupos pequeños en mi reunión de Teams?

¿Por qué no puedo ver las salas de grupos pequeños en mi reunión de Teams?

¿Frustrado porque las salas de reuniones no aparecen en tu reunión de Teams? Descubre las principales razones por las que no puedes verlas en Teams y sigue nuestras soluciones paso a paso para que funcionen correctamente en minutos. ¡Ideal tanto para organizadores como para participantes!