Contacta con nosotros

Temario del curso

Introducción a Modelos Multimodales

  • Visión general del aprendizaje multimodal de máquina
  • Aplicaciones de modelos multimodales
  • Desafíos al manejar múltiples tipos de datos

Arquitecturas para Modelos Multimodales

  • Explorando modelos como CLIP, Flamingo y BLIP
  • Comprensión de mecanismos de atención cruzada entre modos
  • Consideraciones arquitecturales para escalabilidad y eficiencia

Preparación de Conjuntos de Datos Multimodales

  • Técnicas de recolección y anotación de datos
  • Preprocesamiento de entradas de texto, imágenes y video
  • Equilibrio de conjuntos de datos para tareas multimodales

Técnicas de Afinamiento para Modelos Multimodales

  • Configuración de flujos de trabajo de entrenamiento para modelos multimodales
  • Gestión de restricciones de memoria y computacionales
  • Manejo de la alineación entre diferentes modos

Aplicaciones de Modelos Multimodales Afinados

  • Preguntas visuales
  • Descripción de imágenes y videos
  • Generación de contenido usando entradas multimodales

Optimización y Evaluación del Rendimiento

  • Métricas de evaluación para tareas multimodales
  • Optimización de latencia y rendimiento para producción
  • Asegurar robustez y consistencia entre modos

Despliegue de Modelos Multimodales

  • Empaquetado de modelos para despliegue
  • Inferencia escalable en plataformas de nube
  • Aplicaciones e integraciones en tiempo real

Casos de Estudio y Laboratorios Prácticos

  • Afinamiento de CLIP para recuperación de imágenes basada en contenido
  • Entrenamiento de un chatbot multimodal con texto y video
  • Implementación de sistemas de recuperación cruzada entre modos

Resumen y Próximos Pasos

Requerimientos

  • Dominio del lenguaje de programación Python
  • Comprensión de conceptos de aprendizaje profundo
  • Experiencia con el afinamiento de modelos preentrenados

Público Objetivo

  • Investigadores en IA
  • Científicos de datos
  • Practicantes de aprendizaje automático
 28 Horas

Número de participantes


Precio por participante

Próximos cursos

Categorías Relacionadas