Contacta con nosotros

Temario del curso

Introducción a los LLM multimodales en Vertex AI

  • Resumen de las capacidades multimodales en Vertex AI.
  • Modelos Gemini y modalidades admitidas.
  • Casos de uso en empresas e investigación.

Configuración del entorno de desarrollo

  • Configuración de Vertex AI para flujos de trabajo multimodales.
  • Trabajo con conjuntos de datos a través de modalidades.
  • Laboratorio práctico: configuración del entorno y preparación del conjunto de datos.

Ventanas de contexto largas y razonamiento avanzado

  • Comprensión de los flujos de trabajo de contexto largo.
  • Casos de uso en planificación y toma de decisiones.
  • Laboratorio práctico: implementación del análisis de contexto largo.

Diseño de flujos de trabajo cruzados entre modalidades

  • Combinación del análisis de texto, audio e imagen.
  • Cadena de pasos multimodales en canalizaciones.
  • Laboratorio práctico: diseño de una canalización multimodal.

Trabajo con parámetros de la API de Gemini

  • Configuración de entradas y salidas multimodales.
  • Optimización de la inferencia y la eficiencia.
  • Laboratorio práctico: ajuste de los parámetros de la API de Gemini.

Aplicaciones e integraciones avanzadas

  • Agentes y asistentes multimodales interactivos.
  • Integración de APIs y herramientas externas.
  • Laboratorio práctico: construcción de una aplicación multimodal.

Evaluación e iteración

  • Prueba del rendimiento multimodal.
  • Métricas de precisión, alineación y deriva (drift).
  • Laboratorio práctico: evaluación de flujos de trabajo multimodales.

Resumen y próximos pasos

Requerimientos

  • Competencia en programación Python.
  • Experiencia en desarrollo de modelos de aprendizaje automático.
  • Familiaridad con datos multimodales (texto, audio, imagen).

Audiencia

  • Investigadores de IA.
  • Desarrolladores avanzados.
  • Científicos de ML.
 14 Horas

Número de participantes


Precio por participante

Próximos cursos

Categorías Relacionadas