Tech Mahindra lanza el LLM ‘Project Indus’, fase 1 diseñada para hindi y sus más de 37 dialectos

El Proyecto Indus se destaca por su enfoque en las lenguas y dialectos índicos, lo que lo convierte en una adición única y valiosa al panorama del modelo lingüístico.

Para brindar una perspectiva comparativa, modelos multilingües conocidos como BERT y XLM están entrenados en una variedad de idiomas, incluido el inglés, pero es posible que no funcionen de manera óptima para idiomas de índice específicos. El Proyecto Indus, por otro lado, está diseñado específicamente para lenguas índicas, lo que garantiza precisión y una mejor comprensión.

Del mismo modo, los LLM sólidos, como GPT-3 y GPT-4, reciben capacitación principalmente en inglés y otros idiomas importantes. Project Indus se centra en la diversidad lingüística índica, abordando matices y dialectos que estos modelos pueden pasar por alto.

Los modelos existentes específicos de India, como TALNet e IndicBERT, son valiosos, pero pueden carecer de la escala y versatilidad del Proyecto Indus.

En resumen, Project Indus cierra la brecha al ofrecer una solución sólida, escalable y sensible al contexto para los idiomas indios. Su enfoque en dialectos y aplicaciones de la industria lo convierte en una adición prometedora al panorama de la IA.

Además, Tech Mahindra está colaborando con Dell Technologies e Intel para implementar el marco ‘GenAI in a box’ del proyecto a nivel mundial. Como parte de esta colaboración, Tech Mahindra también aprovechará los aceleradores Intel® Gaudi®AI y los activos de capacitación de IA para capacitar a la futura generación de modelos Indus, así como capacitar a sus empleados en la cartera de productos Intel (hardware y software) para proporcionar GenAI. experiencia a su amplia red de clientes globales en todas las industrias.

1. Modelo fundamental para lenguajes de índice:

• Project Indus es un LLM indígena desarrollado por Tech Mahindra.
• La primera fase de Indus LLM se centra en el idioma hindi y sus más de 37 dialectos.
• Su objetivo es proporcionar soluciones avanzadas de inteligencia artificial que permitan a las empresas escalar rápidamente.

2. Marco de implementación innovador: GenAI en una caja:

• El Indus LLM se implementará a través de un marco innovador llamado ‘GenAI en una caja’.
• Esta solución simplifica la implementación de modelos avanzados de IA para empresas.
• Aprovecha las soluciones informáticas de alto rendimiento, el almacenamiento y las capacidades de red de Dell Technologies.

3. Colaboración Intel:

• El LLM también adopta soluciones de infraestructura basadas en Intel, incluidos los procesadores Intel® Xeon® y el software OneAPI.
• Se utilizan productos de generación futura que utilizan funciones de CPU como Intel® Advanced Matrix Extensions (AMX).
• Tech Mahindra colabora con Intel para capacitar a la futura generación de modelos Indus y capacitar a sus empleados sobre la cartera de productos Intel.

4. Aplicaciones para la Industria:

• Project Indus tiene como objetivo redefinir las soluciones impulsadas por IA en diversas industrias.
• Los casos de uso incluyen atención al cliente, experiencia, creación de contenido y más en sectores como salud, educación rural, banca, finanzas, agricultura y telecomunicaciones.

5. La perspectiva de las tecnologías de Dell:

Denise Millard, directora socia de Dell Technologies, enfatiza la importancia de la accesibilidad y la escalabilidad para las organizaciones que adoptan la IA.

Dell AI Factory respalda LLM como Project Indus, que promueve el crecimiento, la productividad y la innovación.

Tech Mahindra ha logrado avances significativos al ofrecer soluciones de próxima generación a empresas de todo el mundo. La compañía anunció recientemente que está creando un LLM para preservar el bahasa indonesio, el idioma oficial y nacional de Indonesia y sus dialectos. Esta colaboración demuestra aún más el compromiso de Tech Mahindra de permitir que las empresas escale rápidamente con avances tecnológicos y construya un futuro donde las soluciones de IA sean accesibles, escalables y responsables.