Inicio Empresa Dell y Meta impulsarán la innovación en IA generativa local con Llama 2

Dell y Meta impulsarán la innovación en IA generativa local con Llama 2

by harold fritts

Las empresas están adoptando una metodología más centrada en el ser humano al implementar modelos de IA generativa, ampliando así los límites de la innovación y la eficiencia. Estos modelos resultan útiles en diversas aplicaciones, como chatbots, desarrollo de código y asistentes virtuales. Sin embargo, las soluciones de nube pública, aunque convenientes, a menudo vienen con condiciones. Estos incluyen los riesgos de seguridad que rodean la soberanía de los datos, los costos impredecibles y los problemas de cumplimiento.

Las empresas están adoptando una metodología más centrada en el ser humano al implementar modelos de IA generativa, ampliando así los límites de la innovación y la eficiencia. Estos modelos resultan útiles en diversas aplicaciones, como chatbots, desarrollo de código y asistentes virtuales. Sin embargo, las soluciones de nube pública, aunque convenientes, a menudo vienen con condiciones. Estos incluyen los riesgos de seguridad que rodean la soberanía de los datos, los costos impredecibles y los problemas de cumplimiento.

Optar por soluciones locales con código abierto grandes modelos de lenguaje (LLM), específicamente Llama 2, ofrece una alternativa más predecible y segura. Este modelo ofrece una estructura de costes sostenible en el tiempo y un control más estricto sobre los datos sensibles. En términos más generales, esto reduce drásticamente los riesgos relacionados con violaciones de seguridad de datos y fugas de propiedad intelectual, alineándose mejor con el cumplimiento y las regulaciones.

Soluciones GenAI de diseño validado por Dell

Dell Technologies ha creado una solución llave en mano con sus soluciones de IA generativa para agilizar esta transición, subrayada por el diseño validado de Dell. Este paquete integrado proporciona hardware y software previamente probados y una base sólida construida explícitamente para proyectos de IA generativa. La colaboración con Meta amplía este ecosistema, permitiendo a las empresas integrar fácilmente los modelos de IA Llama 2 de Meta en la infraestructura existente de Dell.

El hardware que impulsa estos modelos tampoco se queda atrás. Por ejemplo, el Dell PowerEdge XE9680 El servidor (el favorito de Jordan) está equipado con ocho GPU NVIDIA H100, lo que lo convierte en un caballo de batalla ideal para ajustar e implementar grandes modelos de lenguaje como Llama 2. Al ofrecer una solución local previamente validada, Dell permite a las empresas funcionar sin interrupciones. y garantiza una mayor protección de la propiedad intelectual.

Abriendo nuevas vías para la personalización

La inversión de Dell en investigación, particularmente en técnicas de personalización de modelos como el ajuste supervisado, LoRA y p-tuning, ha abierto nuevas vías para la personalización a nivel empresarial. Han demostrado la eficacia de estas técnicas en una variedad de modelos Llama 2, desde 7B hasta 70B, lo que permite a las empresas la flexibilidad de adaptar estas potentes herramientas de IA a sus necesidades específicas.

En esencia, la colaboración de Dell con Llama 2 de Meta se suma al nuevo pero rico panorama de opciones para organizaciones de distintos tamaños. Este enfoque integrado permite una implementación perfecta de soluciones de IA generativa en múltiples áreas de implementación, ya sean escritorios, centros de datos centrales o ubicaciones perimetrales, e incluso se extiende a infraestructuras de nube pública. Por lo tanto, las empresas cuentan con un conjunto de herramientas completo pero flexible que pueden aprovechar a medida que se aventuran más en la IA generativa.

Dell y Meta colaboran para impulsar la innovación en IA generativa

Implementación de Llama 2 en el servidor Dell PowerEdge XE9680

Interactuar con StorageReview

Boletín | YouTube | Podcast iTunes/Spotify | Instagram | Twitter | TikTok | RSS Feed