Ta kontakt
 Varighet 14 timer

Kursplan

Introduksjon til forsterkningslæring fra menneskelig tilbakemelding (RLHF)

  • Hva er RLHF og hvorfor er det viktig
  • Sammenligning med overvåkede finjusteringsmetoder
  • RLHF-anvendelser i moderne KI-systemer

Belønningsmodellering med menneskelig tilbakemelding

  • Innsamling og strukturering av menneskelig tilbakemelding
  • Bygging og trening av belønningsmodeller
  • Vurdering av belønningsmodellens effektivitet

Trening med Proximal Policy Optimization (PPO)

  • Et overblikk over PPO-algoritmer for RLHF
  • Implementasjon av PPO med belønningsmodeller
  • Iterativ og sikker finjustering av modeller

Praktisk finjustering av språkmodeller

  • Forberedelse av datasets for RLHF-workflows
  • Håndverk-finjustering av en liten LLM ved hjelp av RLHF
  • Utfordringer og milderingsstrategier

Skalering av RLHF til produksjonssystemer

  • Infrastruktur og beregningsoverveielser
  • Kvalitetskontroll og kontinuerlige tilbakemeldingsløkker
  • Beste praksis for utplassering og vedlikehold

Ethiske overveielser og forurensningsreduksjon

  • Håndtering av etiske risiko i menneskelig tilbakemelding
  • Strategier for oppdagelse og retting av forurensning
  • Sikring av samsvar og sikre utdata

Kasusstudier og virkelige eksempler

  • Kasusstudie: Finjustering av ChatGPT med RLHF
  • Andre vellykkede RLHF-utplasseringer
  • Lærte leksjoner og industri-insikter

Krav

  • Forståelse for grunnleggende prinsipper i overvåket læring og forsterkningslæring
  • Erfaring med modellfinjustering og nøyronetverksarkitekturer
  • Kjennskap til Python-programmering og dype læring rammeverk (f.eks. TensorFlow, PyTorch)

Målgruppe

  • Maskinlæringsingeniører
  • KI-forskere

Antall deltakere


Pris per deltaker

Kommende kurs

Relaterte kategorier