Ta kontakt

Kursplan

Innføring til multimodale LLM-er i Vertex AI

  • Overblikk over multimodale kapasiteter i Vertex AI
  • Gemini-modeller og støttede modaliteter
  • Brukstilfeller i næringslivet og forskning

Innstilling av utviklingsmiljøet

  • Konfigurasjon av Vertex AI for multimodale arbeidsflyter
  • Arbeid med datsett tvers igjennom modaliteter
  • Laboratorium: Miljøinnstilling og datforberedelse

Lange kontekstvinduer og avansert resonnering

  • Forståelse av lange kontekst-arbeidsflyter
  • Brukstilfeller i planlegging og beslutningstaking
  • Laboratorium: Implementering av lang kontekst-analyse

Design av kryssmodale arbeidsflyter

  • Kombinasjon av analyse av tekst, lyd og bilder
  • Kjedeling av multimodale steg i prosesslinjer
  • Laboratorium: Design av en multimodal prosesslinje

Arbeid med Gemini API-parametere

  • Konfigurasjon av multimodale innganger og utganger
  • Optimalisering av inferens og effektivitet
  • Laboratorium: Justering av Gemini API-parametere

Avanserte anvendelser og integrasjoner

  • Interaktive multimodale agenter og assistenter
  • Integrasjon av eksterne API-er og verktøy
  • Laboratorium: Bygging av en multimodal applikasjon

Utvurdering og iterasjon

  • Testing av multimodal ytelse
  • Måledata for presisjon, justering og drift
  • Laboratorium: Utvurdering av multimodale arbeidsflyter

Oppsummering og neste steg

Krav

  • Godkjennet ferdighet i Python-programmering
  • Erfaring med utvikling av maskinlæringsmodeller
  • Kunnskap om multimodale data (tekst, lyd, bilde)

Targetgruppe

  • KI-forskere
  • Avanserte utviklere
  • ML-vitenskapsmenn
 14 Timer

Antall deltakere


Pris per deltaker

Kommende kurs

Relaterte kategorier