Jak wytresować
humanoida.

Marcin Wysocki
machinekind.ai
Krok pierwszy

Mieć
humanoida.(opcjonalnie)

machinekind.ai
Otwarte kartony z częściami robotaassets/build/1-kartony.jpg
Trzy osoby pozują z częściami nóg robotaassets/build/4-ekipa.jpg
Części robota rozłożone na stołach, dwie osoby przy pracyassets/build/2-czesci.jpg
Skręcanie ogniwa nogi, na stole narzędziaassets/build/3-skrecanie.jpg
Tułów robota osadzony na nogach, za nim jeden z budującychassets/build/6-tulow.jpg
Złożone nogi i miednica robota na stoleassets/build/5-nogi.jpg
Test silnika: silnik w dłoni, instrukcja i płytka sterownika na biurkuassets/build/8-silnik.jpg
Instrukcja montażu RoboParty Roboto Origin w dłoniassets/build/7-instrukcja.jpg
Politechnika Wrocławska Katedra
Sztucznej Inteligencji
Krok drugi

Symulator.

machinekind.ai
Jak to działa

Nagroda i miliard prób.

4096
kopii robota naraz, na jednej karcie graficznej
50 Hz
mała sieć ustawia 23 stawy
1,2 mld
kroków na jeden trening
9 miesięcy
chodzenia bez przerwy, w niecałe 4 godziny
MuJoCo MJX · PPO · sieć 512-256-128 · bez mocapu
machinekind.ai
machinekind.ai

Efekt.

video
assets/pogoda-goal-1019.mp4
machinekind.ai
Próba 2

Wojtek + przepis producenta.

Z Wojtka
pipelinePPO + MuJoCo na karcie graficznej
ocenabateria 7 testów, wideo, raport
lekcjedlaczego polityka woli stać
Od producenta
robotmodel i wzmocnienia silników
nagrodyskładniki i wagi z ich przepisu
resztakomendy, szumy, randomizacja, PPO
22 składniki nagrody · 1,2 mld kroków · 16 384 robotów · 4 karty
machinekind.ai
Próba 2 · efekt

Ani jednego kroku.

1,2 mld kroków treningu
pochyla się i szura w miejscu
stanie się opłaca
video
assets/v1-walk.mp4
roboto_walk_v1 · komenda: rozpędź się do 0,75 m/s
machinekind.ai
Drabina

Dostajesz to, za co płacisz.

PróbaZa co płacimyCo robi robot
v1przepis producentapochyla się i szura w miejscu
v2+ czas na jednej nodzemikrokroki: 0,1 s, 5 mm nad ziemią
v3+ wysokość krokudalej nie chodzi
v4te same nagrody, 4× mniej robotówchodzi

Mniej robotów naraz to więcej rund nauki za ten sam budżet: 14 760 zamiast 3 690. Chodzić zaczyna koło rundy 4–6 tysięcy.

16 384 → 4096 robotów · 4 karty → 1 · budżet kroków bez zmian
machinekind.ai
Próba 4 · ten sam kod, 4× mniej robotów

Chodzi.

stopy 6–9 cm nad ziemią
obrót 340° z 360°
0 upadków
video
assets/v4-walk.mp4
roboto_walk_v4 · 3 h 48 min na jednej karcie · udaje się raz na trzy próby
machinekind.ai
Krok trzeci

Finetuning.

machinekind.ai
Finetuning

Chodzi, ale utyka.

video · assets/v4ext-walk.mp4
1 · trenujemy dłużejchodzi, ale dalej utyka
video · assets/v5-gate-walk.mp4
2 · od zera, z karą za nierówny krokstoi, nie robi ani kroku
video · assets/chain-income-walk.mp4
3 · ten, co chodzi + premia za równy krokchodzi równiej
Kara trafia w pierwsze niezdarne kroki, więc robot woli stać
machinekind.ai
Trzy osoby

Trzy drogi do stylu.

video · assets/marcin-locomotion-v1.mp4
Marcin Wysockinajpierw chodzenie, potem premia za równy krok
video · assets/przemek-v40-long.mp4
Przemek Nowak40 małych zmian pod rząd, każda zaczyna od poprzedniej
video · assets/warda-beh-warm-long.mp4
Michał Warda51 treningów, każdy oceniany w 16 miarach ludzkiego chodu
Wspólne: metronom kroku · symetria lewa–prawa
machinekind.ai
symulator się ładuje…
app.labqoat.com
machinekind.ai
Michał Pogoda · rzadka nagroda

A może jedna nagroda?

video · assets/pogoda-goal-1019.mp4
19 październikadochodzi do celu, ale na szeroko rozstawionych nogach
video · assets/pogoda-goal-1021.mp4
21 październikata sama trasa, nogi już blisko siebie
video · assets/pogoda-goal-1027.mp4
27 październikato samo na nierównej podłodze
Zielony walec to cel · punkt tylko wtedy, gdy robot do niego dojdzie i stoi prosto
machinekind.ai
A producent

RoboParty robi to inaczej.

RoboPartyMy
Pamięć10 ostatnich klatek1 klatka + zegar chodu
Rytm krokuwyłania się samzegar 1–2 Hz
Ludzki wyglądmocap, osobna politykasame nagrody
Tempo uczenia1e-3, adaptacyjne1e-4, stałe
github.com/Roboparty/roboto_origin · Isaac Lab + RSL-RL
machinekind.ai
Co dalej

Prawdziwy robot.

video
assets/roboto-real.mp4
30 października · nagranie Michała Pogody
machinekind.ai
01 / 18