Výzkumníci z University of Maryland představili rámec HumanEgo, který učí roboty manipulaci přímo z first-person videí lidí. Podle univerzity systém nepotřebuje robotické demonstrace, robotická trénovací data ani masivní předtrénování a může se učit z přibližně 30 minut lidského videa. To míří na dlouhodobý problém robotiky: lidské tělo a robotický mechanismus se pohybují jinak, takže pouhé kopírování lidské akce většinou nestačí. HumanEgo kombinuje převod mezi lidskou a robotickou perspektivou s generativní technikou flow matching, aby robot našel proveditelný způsob splnění úkolu. Pokud se výsledek potvrdí mimo laboratorní podmínky, může zlevnit sběr dat pro domácí a průmyslovou manipulaci.
Zdroj: University of Maryland Institute for Advanced Computer Studies
https://www.umiacs.umd.edu/news-events/news/umd-researchers-enable-robots-learn-human-experience