Ta kontakt

Kursplan

Introduksjon til multimodale LLM-er i Vertex AI

  • Oversikt over multimodale funksjoner i Vertex AI
  • Gemini-modeller og støttede modaliteter
  • Bruksområder i næringsliv og forskning

Oppsett av utviklingsmiljøet

  • Konfigurasjon av Vertex AI for multimodale arbeidsflyter
  • Arbeid med datasett på tvers av modaliteter
  • Praktisk øvelse: oppsett av miljø og forberedelse av datasett

Lange kontekstvinduer og avansert resonnement

  • Forståelse av arbeidsflyter med lang kontekst
  • Bruksområder i planlegging og beslutningstaking
  • Praktisk øvelse: implementering av analyse med lang kontekst

Design av kryss-moder arbeidsflyter

  • Kombinere analyse av tekst, lyd og bilder
  • Kjede multimodale steg i pipelines
  • Praktisk øvelse: design av en multimodal pipeline

Arbeid med Gemini API-parametre

  • Konfigurering av multimodale input og output
  • Optimalisering av inferens og effektivitet
  • Praktisk øvelse: tuning av Gemini API-parametre

Avanserte applikasjoner og integrasjoner

  • Interaktive multimodale agenter og assistenter
  • Integrasjon av eksterne API-er og verktøy
  • Praktisk øvelse: bygging av en multimodal applikasjon

Evaluering og iterasjon

  • Testing av multimodale ytelse
  • Metriker for nøyaktighet, tilpasning og drift
  • Praktisk øvelse: evaluering av multimodale arbeidsflyter

Oppsummering og neste steg

Krav

  • Ferdigheter i programmering med Python
  • Erfaring med utvikling av maskinlæringsmodeller
  • Kunnskap om multimodale data (tekst, lyd, bilde)

Målgruppe

  • AI-forskere
  • Avanserte utviklere
  • ML-forskere
 14 Timer

Antall deltakere


Pris per deltaker

Kommende kurs

Relaterte kategorier