Вышла новая опенсорсная модель для роботов — Isaac 0.5 от PerceptronAI. Perceptron — стартап экс-исследователей Meta FAIR — показал Isaac 0.5, 36B sparse-модель для обучения роботов. Видеораспознание, embodied reasoning, пространственный grounding и генерация действий робота — на одной общей базе. Обучали на 35+ типах роботов и 1 млн часов обычного видео. Самое интересное — телеоперация (человек вручную водит роботом и пишет демонстрации) — самая дорогая часть в робототехнике. Perceptron показал, что чем больше обычного видео в предобучении, тем меньше её нужно: с 1000 часов видео на новую задачу требуется ~5900 часов телеоперации, с миллионом — 28. То есть месяцы работы команды операторов превращаются в несколько дней одного человека. Веса пока не еще выложены — на карточке стоит COMING SOON,. Техотчёт · Код #opensource #робототехника