Contattataci
 Durata 14 ore

Struttura del corso

Introduzione al Reinforcement Learning da Feedback Umano (RLHF)

  • Cosa è il RLHF e perché è importante
  • Confronto con i metodi di fine-tuning supervisionato
  • Applicazioni del RLHF nei sistemi AI moderni

Modellazione della Ricompensa con Feedback Umano

  • Raccolta e strutturazione dei feedback umani
  • Creazione e addestramento dei modelli di reward
  • Valutazione dell'efficacia dei modelli di reward

Addestramento con Proximal Policy Optimization (PPO)

  • Panoramica sugli algoritmi PPO per il RLHF
  • Implementazione di PPO con modelli di reward
  • Fine-tuning iterativo e sicuro dei modelli

Fine-Tuning Pratico dei Modelli Linguistici

  • Preparazione dei dataset per i flussi di lavoro RLHF
  • Fine-tuning hands-on di un LLM di piccole dimensioni con RLHF
  • Sfide e strategie di mitigazione

Scalabilità del RLHF nei Sistemi di Produzione

  • Considerazioni su infrastruttura e potenza di calcolo
  • Garanzia della qualità e cicli di feedback continui
  • Migliori pratiche per deployment e manutenzione

Aspetti Etici e Mitigazione dei Bias

  • Gestione dei rischi etici nei feedback umani
  • Strategie per il rilevamento e la correzione dei bias
  • Assicurare l'allineamento e output sicuri

Studi di Caso ed Esempi dal Mondo Reale

  • Studio di caso: Fine-tuning di ChatGPT con RLHF
  • Altre implementazioni di successo del RLHF
  • Lezioni apprese e insights del settore

Requisiti

  • Conoscenza dei fondamenti dell'apprendimento supervisionato e del reinforcement learning
  • Esperienza nel fine-tuning dei modelli e nelle architetture delle reti neurali
  • Familiarità con la programmazione Python e i framework di deep learning (ad esempio, TensorFlow, PyTorch)

Pubblico di Riferimento

  • Ingegneri del machine learning
  • Ricercatori di AI

Numero di Partecipanti


Prezzo per partecipante

Corsi in Arrivo

Categorie relative