Los avances recientes en el campo de la inteligencia artificial, y en particular de la inteligencia artificial generativa, han capturado la imaginación del público y han demostrado lo que quienes desarrollan estas tecnologías saben desde hace mucho tiempo: tienen el potencial de ayudar a las personas a hacer cosas increíbles, crear una nueva era de economía. y oportunidades sociales y brindar a las personas, los creadores y las empresas nuevas formas de expresarse y conectarse con las personas.
Creemos que un enfoque abierto es la forma correcta de desarrollar modelos modernos de IA, especialmente en un espacio generativo donde la tecnología avanza rápidamente. Al hacer que los modelos de IA sean abiertos, pueden beneficiar a todos. Brindar a las empresas, las nuevas empresas, los empresarios y los investigadores acceso a herramientas diseñadas a una escala que sería difícil de construir por sí mismos, respaldadas por un poder informático que de otro modo no tendrían, abrirá un mundo de oportunidades para la experimentación y la innovación de maneras emocionantes. y, en definitiva, beneficios económicos y sociales.
Y creemos que es más seguro. Abrir el acceso a los modelos de IA de última generación significa que una generación de desarrolladores e investigadores pueden ponerlos a prueba, identificando y resolviendo problemas rápidamente como una comunidad. Al ver cómo otros utilizan estas herramientas, nuestros propios equipos pueden aprender de ellas, mejorarlas y corregir vulnerabilidades.
Meta ha puesto la investigación, el código abierto y la colaboración con socios académicos y de la industria en el centro de nuestros esfuerzos de IA durante más de una década. Hemos visto de primera mano cómo la innovación abierta puede conducir a tecnologías que benefician a más personas. Ya se han lanzado docenas de modelos de lenguaje importantes y están impulsando el progreso de desarrolladores e investigadores. Están siendo utilizados por las empresas como los ingredientes principales para nuevas experiencias generativas basadas en IA. Nos ha sorprendido la gran demanda de Llama 1 por parte de los investigadores, con más de 100 000 solicitudes de acceso a un modelo de lenguaje grande, y las cosas increíbles que han logrado, edificio encima.
Ahora estamos listos para abrir el código fuente de la próxima versión de Llama 2 y hacerlo accesible gratis para investigación y uso comercial. Incluimos pesos de modelo y código inicial para el modelo preentrenado, así como versiones conversacionales finamente ajustadas. Como dijo Satya Nadella en el escenario de Microsoft Inspire, estamos llevando nuestra asociación al siguiente nivel con Microsoft como nuestro socio elegido para Llama 2 y ampliando nuestros esfuerzos generativos de IA. A partir de hoy, Llama 2 está disponible en Azure AI Model Catalog, lo que permite a los desarrolladores que usan Microsoft Azure crear con él y usar sus propias herramientas basadas en la nube para el filtrado de contenido y las funciones de seguridad. También está optimizado para ejecutarse localmente en Windows, lo que brinda a los desarrolladores un flujo de trabajo fluido a medida que brindan experiencias de IA generativa a los clientes en todas las plataformas. Llama 2 está disponible a través de Amazon Web Services (AWS), Hugging Face y otros proveedores.
Las personas y las empresas se han beneficiado de la asociación de larga data entre Microsoft y Meta. Juntos presentamos ecosistema abierto para entornos de IA intercambiables, y somos coautores de trabajos de investigación para avanzar en el arte contemporáneo en el campo de la IA. Nos hemos asociado para escalar la adopción Antorcha es actualmente la plataforma de IA líder creada por Meta y la comunidad de IA en Azure, y somos miembro fundador de la Fundación PyTorch. Microsoft y Meta se han unido recientemente a un grupo de seguidores que apoyan Asociación de IA para la acción colectiva para crear y compartir medios sintéticos. Nuestra asociación se extiende más allá de la IA y llega al metaverso para ofrecer experiencias inmersivas para el futuro del trabajo y el juego.
Ahora, a través de esta asociación ampliada, Microsoft y Meta respaldan un enfoque abierto para ampliar el acceso a las tecnologías de IA principales para beneficiar a las empresas de todo el mundo. Meta y Microsoft no son los únicos que creen en democratizar el acceso a los modelos de IA actuales. Tenemos amplia gama de seguidores de todo el mundo que también creen en este enfoque, incluidas las empresas que nos han brindado comentarios tempranos y están emocionadas de crear nuevos productos con Llama 2, proveedores de la nube que incluirán Llama 2 en sus ofertas para clientes, institutos de investigación que colaboran con nosotros en despliegue seguro y responsable de grandes modelos generativos, y personas en círculos técnicos, académicos y políticos que vean los beneficios como nosotros.
Centrarse en la responsabilidad
Nuestro enfoque de código abierto promueve la transparencia y la accesibilidad. Sabemos que, si bien la IA ha traído un tremendo progreso a la sociedad, también conlleva riesgos. Estamos comprometidos con el desarrollo responsable y brindamos una variedad de recursos para ayudar a aquellos que usan Llama 2 a hacerlo.
- Ejercicios con equipos rojos: Nuestros modelos modificados han sido probados por seguridad a través de esfuerzos internos y externos. El equipo ha estado trabajando en la creación de pistas contradictorias para ayudar a afinar el modelo. Además, encargamos a terceros que realicen pruebas adversarias externas de nuestros modelos refinados para identificar de manera similar las brechas de rendimiento. Estos procesos de ajuste de seguridad se repiten; Continuaremos invirtiendo en seguridad a través de ajustes y evaluaciones comparativas, y planearemos lanzar modelos ajustados actualizados basados en estos esfuerzos.
- Esquema de transparencia: Explicamos nuestros métodos para ajustar y evaluar el modelo y destacamos sus deficiencias. Nuestro esquema de transparencia, ubicado en Trabajo de investigaciónrevela los problemas conocidos y los problemas que hemos encontrado y brinda información sobre las acciones tomadas para abordarlos y los futuros que tenemos la intención de investigar.
- Pautas para un uso responsable: Creamos esta guía como un recurso para apoyar a los desarrolladores con las mejores prácticas para el desarrollo responsable y la evaluación de la seguridad. Describe las mejores prácticas que reflejan la investigación actual de vanguardia sobre IA generativa responsable que se está discutiendo dentro de la industria y dentro de la comunidad de investigación de IA.
- Política de uso aceptable: Nosotros ponemos política en un lugar que no permite ciertos casos de uso para ayudar a garantizar que estos modelos se usen de manera justa y responsable.
Meta también ha creado nuevas iniciativas para utilizar el conocimiento y la creatividad de personas, investigadores y desarrolladores de todo el mundo para obtener comentarios sobre cómo funcionan los modelos y cómo se pueden mejorar.
- Comunidad de investigación de IA de innovación abierta: Hoy también lanzamos una nueva asociación programa para investigadores académicos su objetivo es profundizar nuestra comprensión del desarrollo responsable y el intercambio de grandes modelos lingüísticos. Los investigadores pueden postularse para unirse a la comunidad de práctica para compartir conocimientos sobre este importante tema, y la comunidad dará forma a la agenda de investigación para avanzar.
- Prueba de impacto de llama: Queremos dinamizar la comunidad de innovadores que están comprometidos con el uso de Llama para resolver problemas complejos. Estamos lanzando un desafío para alentar a varias organizaciones comunitarias, sin fines de lucro y comerciales a usar Llama 2 para fines ambientales, educativos y otros importantes. reglas de llamadas estará disponible antes de que comience.
Conclusión
A lo largo de la historia de nuestra empresa, hemos visto los beneficios de un enfoque de código abierto al innovar en otras áreas del negocio. Nuestros ingenieros han desarrollado y compartido plataformas que ahora son estándares de la industria, como React, el marco líder para crear aplicaciones web y móviles, y PyTorch, ahora la plataforma líder para IA. Se han convertido en una infraestructura ampliamente utilizada por toda la industria tecnológica. Creemos que el intercambio abierto de los grandes modelos de lenguaje actuales también contribuirá al desarrollo de una IA generativa útil y más segura.
Esperamos ver lo que el mundo está construyendo con Llama 2.