Upskilling Week - RL en MuJoCo: de l'entrenament al desplegament de polítiques per al MicroDuck
Taller pràctic de 5 hores en què ensenyarem a un petit robot bípede, el MicroDuck, a jugar a la xarranca: xutar una pilota amb la força justa perquè arribi a la casella escollida. Sense necessitat de tenir coneixements previs d'IA, recorrerem pas a pas un projecte real de robòtica amb aprenentatge per reforç (RL).
Objectius específics | Temari
Què aprendràs?
Simulació: què és MuJoCo, com es descriu un robot i com es prepara una escena pròpia.
Fonaments de RL: agent, entorn, observacions, accions i recompenses, amb exemples visuals, fins a arribar a PPO, l'algoritme que utilitza el MicroDuck.
Pràctica guiada: amb mjlab dissenyarem la recompensa del xut, iniciarem un entrenament curt i veurem com cada canvi modifica el comportament del robot.
ROS 2: nodes, topics i fitxers de llançament. Integrarem polítiques ja entrenades (en format ONNX) amb nodes de visió, control i teleoperació per jugar una partida completa en simulació.
Cada bloc combina una breu explicació amb exercicis pas a pas i material llest per utilitzar, perquè tots els participants acabin amb el sistema en funcionament.
Impartit per Alberto Colmenero, desenvolupador de physical AI a Bravo Robots, i Guillermo Revilla, consultor.
Edicions
Informació general
Persona formadora
Cursos relacionats
- Upskilling Week - Com crear el teu segon cervell amb IA
- Upskilling Week - De principiant a expert: intensiu de disseny de sistemes frontend
- Upskilling Week - Hacking Wi-Fi empresarial: Phishing amb xarxes Wi-Fi obertes, portals captius i Evil Twin
- Upskilling Week - Introducció pràctica a la computació quàntica mitjançant reservoris
- Upskilling Week - Laboratori d'incidents en producció: depuració de sistemes distribuïts amb OpenTelemetry
- Upskilling Week - Sistemes abans que agents: la infraestructura d'IA que necessita la teva empresa
- Upskilling Week - Volant de curses Edge AI: crea un sistema de telemetria i direcció en temps real amb Arduino UNO Q i Edge Impu
- Upskilling Week - Webs llestes amb la IA: MCP UI, WebMCP, Jev i IA local al navegador
- Upskilling Week Anàlisi de dades en l'esport: de l'explicació a la predicció
