роботы boston dynamics уже танцуют лучше меня
Роботы Boston Dynamics станцевали под музыку
Компания Boston Dynamics опубликовала ролик, в котором все ее роботы — два человекоподобных Atlas, четвероногий Spot и колесный Handle — танцуют под песню Do You Love Me группы The Contours, демонстрируя свои возможности.
Ходячие роботы существуют уже несколько десятков лет, но в последнее десятилетие они получили наибольшее развитие и наконец стали переходить в мелкосерийное производство. При этом усовершенствование аппаратной части и алгоритмов ходячих роботов происходит очень быстро, и этот прогресс весьма заметен. Для примера, еще несколько лет назад, в 2015 году, многие роботы, участвовавшие в соревновании разработчиков человекоподобных роботов, проводимом DARPA, нередко испытывали трудности даже с поддержанием баланса на месте или при медленной ходьбе:
Boston Dynamics, которая считается одним из лидеров в области ходячих роботов и любит демонстрировать возможности свои разработок необычным образом, например, паркуром или бускировкой грузовика упряжкой робособак. Теперь компания выпустила новогодний ролик, в котором можно увидеть, на что способны роботы разных типов на текущий момент и как ловко они двигаются:
Ранее компания уже показывала танец одного Spot, а в новом ролике четверо роботов станцевали под песню Do You Love Me, записанную в 1962 году группой The Contours. Роботы поочередно присоединялись к танцу и синхронно выполняли движения в ритм музыки, причем разные для каждого типа. Многие их движений очень сложны для роботов, тем более такого размера и веса. К примеру, 80-килограммовые Atlas во время танца перепрыгивали с ноги на ногу так, что во время прыжка обе ноги находились в воздухе.
Вероятно, во время записи роботы выполняли заранее запрограммрованные движения, хотя уже существуют алгоритмы, позволяющие ходячим роботам подстраивать танец под конкретную композицию.
В середине декабря южнокорейская компания Huyndai купила Boston Dynamics у японской Softbank. В заявлении после сделки новые владельцы отметили. что будут развивать роботов для складов и представят серийного робота для этой задачи в 2021 году (вероятно, на базе Handle), а также будут разрабатывать медицинских человекоподобных роботов для работы с пациентами.
Роботы из Boston Dynamics станцевали под хит 60-х
Роботы от Boston Dynamics могут делать многие вещи: бегать, делать сальто, мыть посуду и открывать двери. Теперь они умеют и танцевать, что можно увидеть в ролике, опубликованном производителем на видеохостинге YouTube, сообщает портал The Verge.
На видео представлена вся линейка роботов Boston Dynamics — человекоподобный Atlas, робопес Spot и механическая рука Handle. Они представили совместный танец под хит 60-х «Do You Love Me» из кинофильма «Грязные танцы».
Это уже не первый раз, когда Boston Dynamics демонстрирует танцевальные навыки своих роботов. Так, в 2018 году компания опубликовала ролик, где робот Spot выполняет движение «Бегущий человек» под песню Uptown Funk.
Однако новое видео демонстрирует, насколько улучшилась координация машин: количество движений увеличилось, и роботы стали выполнять танец более согласованно, ритмично и плавно.
Это натолкнуло некоторых пользователей на мысли о том, что ролик постановочный и создан с помощью CGI-эффектов.
За роботов неожиданно вступился глава Tesla и SpaceX Илон Маск, который утверждает, что в ролике не используется компьютерная графика.
«Собственники не смогли найти правильную бизнес-модель для реализации своих разработок на рынке. После этого у компании было два пути — заморозить разработки до тех пор, пока кто-то не купит патенты или пока технологии не станут востребованы, либо продолжать разработки, чтобы дойти до этапа покупки компании какой-то из крупнейших технологических компаний. Компании повезло — их начали «покупать», — говорит сооснователь и директор по развитию «Промобот» Олег Кивокурцев.
По словам эксперта, в робототехнике технологиях Boston Dynamics есть перспектива. Hyundai сейчас может использовать разработки Boston Dynamics для создания подвески, систем амортизации, технологических линий производства, манипуляторов и других вещей, которые будут полезны для производства их основных продуктов.
Однако это не означает, что роботы Boston Dynamics будут пользоваться спросом на рынке в том виде, в котором они сейчас представлены.
Аналитик «Фридом Финанс» Валерий Емельянов считает, что основная проблема роботов Boston Dynamics заключается в том, что их сложно запустить в массовое производство.
«Сама платформа собирается в ручном режиме, делая каждого робота уникальным. Но что еще хуже, для каждого заказчика нужна отдельная программа. Сотни профессий, каждая из которых требует рабочий софт для удобного управления. И если его не будет, то покупателю придется еще нанять инженера, который настроит робота и будет корректировать его задачи», — рассказывает Емельянов.
Первоначально компания была основана в 1992 году как дочернее предприятие Массачусетского технологического института — в первую очередь, для фундаментальных исследований в области робототехники. Основные задачи компании концентрировались не на получении доступных и понятных продуктов, а на получении научных результатов — в том числе технологий, которые в дальнейшем можно модернизировать и использовать в других направлениях, считает Кивокурцев. Именно поэтому пока мы не наблюдаем широкого распространения роботов Boston Dynamics.
«Сейчас есть четкое понимание, что те задачи, которые эти роботы могут выполнять, можно делать намного дешевле. Но если помечтать, то сфер применения для таких роботов очень много: начиная от логистики, заканчивая безопасностью и охраной.
Просто пока это не рентабельно.
Мир к таким решениям уже готов, но не готова технология — она пока слишком дорогая», — поделился своими мыслями Кивокурцев.
Как Boston Dynamics научили своих роботов танцевать
Перевод интервью с вице-президентом по разработке Boston Dynamics
В конце декабря компания Boston Dynamics опубликовала на своем Youtube-канале танец роботов Atlas, Spot и Handle под песню «Do you love me». На текущий момент видео набрало более 26 миллионов просмотров.
Строго говоря, роботы в этом видео не делают ничего такого, чего они не делали бы ранее. Тем не менее, это все равно выдающееся достижение робототехники. Уникальной является художественная составляющая видео, которая разрабатывалась совместно с хореографом Моникой Томас. Мы видели, как Atlas выполняет простые задания, занимается гимнастикой и паркуром, но танцы – это что-то новое для него. Чтобы узнать больше о том, как это было сделано, мы взяли интервью и Аарона Сондерса, вице-президента по разработке Boston Dynamics (VP of Engineering).
Сондерс начал работать в Boston Dynamics в 2003 году, то есть он принимал участие в разработке большей части роботов Boston Dynamics, даже тех, про которых все уже забыли (например, Little Dog). Сондерс участвовал в проекте Atlas с самого начала, и последние несколько лет занимался исключительно им. Он согласился ответить на наши вопросы о танцующих роботах.
Что вы можете сказать о реакции интернета на ваше видео?
От каждого видео, которые мы публикуем, мы ожидаем чего-то своего. В этом случаеречь шла в первую очередь о веселье. Мы получили рекордное количество отзывов на Youtube, писем и звонков от людей, которые выражали энтузиазм и делились идеями о том, что нам стоит сделать дальше, какую песню использовать, и так далее.
Мое любимое сообщение прислала 94-летняя бабушка. Она посмотрела видео на Youtube и попросила своих родственников спросить у нас, кто обучил роботов этим крутым движениям. Это видео охватило более широкую аудиторию благодаря сочетанию старой музыки и современных технологий.
Раньше Atlas не двигался таким образом. Можете рассказать немного о том, как это получилось?
Мы начали работать с танцорами и хореографом, чтобы создать набросок танца. Самым сложным было провести коррекцию движений танцоров-людей с тем, чтобы их могли повторить танцоры-роботы. Мы использовали симулятор и вместе с хореографом перебирали возможные движения, которые будут под силу Атласу и другим роботам. Это был итеративный процесс: танцоры показывали нам движения, инженеры переносили их в симуляции и говорили, насколько легко робот сможет их повторить. Мы постоянно обсуждали, пробовали симулировать разные вещи и делали мелкие поправки, чтобы получить набор движений, совместимых с роботами.
С развитием проекта длительность итераций становилась все меньше и меньше благодаря созданию специализированных инструментов под эту задачу. В конце концов, используя эти инструменты, мы создали полную хореографию для одного из роботов всего за один день перед началом съемок. Не совсем корректно называть движения роботов «вручную заскриптованными», каждое движение было создано танцором и перенесено на робота с помощью созданных инженерами инструментов.
Какие движения было тяжелее всего перенести с людей на робота? Были ли движения, с которыми Атлас справился лучше, чем танцор-человек?
Обороты вокруг своей оси и балетные движения были самыми сложными, потому что они больше всего отличались от бега и прыжков, с которыми у нас уже был опыт работы. Они стали испытанием как для роботов, так и для программного обеспечения. В начале мы недооценивали силу и гибкость танцоров, роботу очень сложно повторить движения элитных атлетов. Я думаю, что Атлас не обладает диапазоном движений и силы людей-атлетов. Но мы продолжаем разрабатывать наших роботов в этом направлении. Для того, чтобы использовать гуманоидных роботов на производстве и в домашних условиях, мы должны достичь такого уровня производительности.
Роботы лучше людей в одном: они могут повторять одно и то же действие много раз подряд с высокой точностью повторения. Поэтому после начального программирования роботы могли повторять танец снова и снова, а мы тем временем экспериментировали с объективами камер.
Я понимаю, как вы использовали людей для постановки танца Атласов, но что вы делали с роботами Spot и Handle?
Люди, с которыми мы работали, очень талантливы во всем, что касается самовыражения через движение. Наши роботы очень динамично движутся и хорошо балансируют. Танцоры отлично понимали, как движутся роботы, вне зависимости от того, сколько у них ног – две или четыре. Если у вас нет готового шаблона движения животного или поведения человека, вам нужно думать более тщательно над реализацией, это справедливо и для коммерческих решений.
Каким образом ваш опыт в обучении роботов танцам, гимнастике и паркуру влияет на ваш подход к коммерческой робототехнике?
Мы считаем, что навыки, лежащие в основе танца и гимнастики, такие как ловкость, баланс и восприятие, являются фундаментальными для широкого ряда задач робототехники. Рецепт робототехники от Boston Dynamics – смесь создания роботов с новыми возможностями и веселья. Например, обучая роботов новым динамичным движениям за короткий срок, всего за несколько дней, позволяют нам лучше изучить возможности нашего железа.
Благодаря тому, что мы запустили продажи Спота, он практически перестал нуждаться в поддержке. Теперь он может танцевать сутки напролет. И мы добились этого именно благодаря тому, что раньше казалось абсурдным и веселым. Для того, чтобы научиться новым вещам, нужно зайти на неизведанную территорию.
Просматривая видео на Ютубе, невозможно сказать, как много времени вам потребовалось, чтобы все заработало как надо, и соответствует ли показанное в видео полным возможностям роботов. Что вы можете сказать об этом?
Я отвечу в контексте видео «Do you love me», но это справедливо и для других видео, которые мы снимаем. Мы тяжело трудимся над каждым нашим творением. Большая часть контроллеров Атласа были разработаны в предыдущих проектах. Работая над паркуром для Атласа, мы создали контроллеры с предсказанием модели, которые брали во внимание динамику и баланс. Эти контроллеры использовались, чтобы выполнять движения танца, разработанные совместно с хореографом и танцорами. Мы потратили месяцы на постановку танца и итерации в симуляторе.
Для танца требовалась сила и скорость, нам даже пришлось обновить часть железа Атласа, чтобы усилить его. На текущий момент этот танец требовал больше всего усилий от наших роботов. Может показаться, что паркур требует больших усилий, но это не так. Нам также потребовалось много времени, чтобы сопоставить возможности машины с возможностями алгоритмов.
После того, как мы разработали финальную версию последовательности движений, мы потратили всего два дня на съемки. Мы потратили большую часть этого времени, чтобы проработать траекторию движения оператора с камерой между движущимися роботами так, чтобы все движения попали на видео. Мы сняли первые две минуты видео без склеек.
Железо несколько раз подводило нас, иногда роботы спотыкались и падали. То, что делают наши роботы, не является надежным на 100%, но мы стараемся не обманывать наших будущих клиентов и показывать действия, которые могут быть повторены с большой степенью надежности. Нужно проявлять честность, если заявляешь, что добился чего-то, это требование является важным для нас.
Вы упомянули, что Спот может танцевать целый день. А что насчет Атласа? Если включить его в розетку, он сможет танцевать целый день?
Атлас не такой надежный механизм, как Спот. Существует всего несколько Атласов, они сложно устроены, и надежность не является главным требованием на этом этапе. Время от времени наши Атласы ломаются. Но в контексте танца, который мы пытались исполнить, надежность железа была на высоком уровне. А без надежности мы вовсе не смогли бы снять подобное видео. В этом плане Атлас похож на вертолет: помимо выполнения основной функции, много времени требуется на техническую поддержку. Спот же в этом плане больше похож на автомобиль – вы можете использовать его довольно долго, прежде чем ему потребуется техническое обслуживание.
Когда вы обучаете Атласа новым трюкам, это похоже на обычное машинное обучение?
В нашей компании мы использовали много разных подходов, но Атлас в данный момент не использует обучающийся контроллер. Возможно, однажды этот день настанет. Во время танца Атлас использовал комбинацию следующих подходов: реакция на приложенные силы, онлайн и оффлайн оптимизация траектории, и контроллер с предсказанием модели. Мы используем эти подходы, потому что они надежные, позволяют добиться высокой производительности, и мы хорошо понимаем, как с ними работать. Мы все еще не раскрыли полный потенциал этих методов.
Мы планируем использовать алгоритмы машинного обучения для улучшения софта и железа наших роботов, но нам, как и всему остальному сообществу робототехников, еще предстоит найти оптимальный способ использования этих методик. Думаю, это будет естественной частью нашего прогресса.
Большая часть динамических движений Атласа в данный момент происходит из нижней части его тела. Паркур также использует силу и ловкость верхней части тела. Недавно мы видели картинки, на которых Атлас подтягивается. Расскажите нам об этом.
Люди и животные делают невероятные вещи с помощью своих ног, и еще более невероятные вещи, когда используют все тело целиком. Мне кажется, паркур – это идеальная задача, чтобы раскрыть полный потенциал мобильности тела робота. Ходьба и бег были только началом этого пути. Последние несколько лет мы работали над такими динамическими движениями, как прыжки и повороты. Следующий шаг – исследовать, как можно увеличить ловкость робота за счет использования рук.
Одна из задач, которые стоят перед командой разработчиков Атласа, это использование рук в той же степени, в которой мы используем ноги. Я с большим энтузиазмом ожидаю результатов, которые мы получим в ближайшие несколько лет. Это позволит нам делать еще больше интересных вещей с нашими роботами.
Поделитесь своим мнением об использовании гидравлических и электрических моторов в динамичных роботах.
За время моей карьеры в Boston Dynamics я часто предпочитал ту или иную технологию. Сейчас я пришел к пониманию того, что каждая технология должна использоваться по назначению. Выбор актуаторов зависит от размера робота, от задач, которые будут стоять перед роботом, и от множества других факторов. В идеале, у вас под рукой должны быть актуаторы обоих типов. Мы использовали оба типа в различных роботах с большим успехом.
Мне кажется, основное различие между электрическими и гидравлическими актуаторами заключается в масштабе. Очень сложно создать миниатюрный гидравлический актуатор, то же самое касается гигантских электрических моторов. Фактор масштаба является решающим в некоторых случаях при выборе между этими двумя технологиями.
Кроме ваших проектов в Boston Dynamics, какие еще роботехнические проекты вызывают в вас энтузиазм?
Для нашей компании, огромную важность играет прогресс в области сенсоров, компьютерного зрения, восприятия местности. Чем сильнее развиваются эти области, тем больше мы можем сделать. Лично я слежу за развитием в области манипуляторов, особенно в том, что касается сложных динамичных манипуляций с использованием трения, манипуляций с гибкими податливыми предметами, веревками и так далее.
На наших глазах происходит переход от простых манипуляций в формате «поднять – переместить – отпустить», к более осмысленному взаимодействию с окружающей средой. Эти исследования позволят раскрыть потенциал мобильных манипуляторов, и, как мне кажется, позволят роботам полноценно взаимодействовать с окружающим миром.
Что еще вы хотите сказать зрителям этого видео?
Лично я хотел бы, чтобы больше людей проводили больше времени с роботами, чтобы они лучше понимали возможности и ограничения современной робототехники. Мы получаем много мнений и идей от людей, которые смотрят наши видео. И мне кажется, если они проводили больше времени с роботами, у них повысился бы уровень понимания и они придумывали бы больше применений для роботов в повседневной жизни. Я считаю, что робототехника имеет огромный потенциал, и я хотел бы, чтобы как можно больше людей шли по этому пути.
Роботы Boston Dynamics научились танцевать (и получше, чем ты)
Баяны
181K постов 12K подписчика
Правила сообщества
Сообщество для постов, которые ранее были на Пикабу.
Вот так под танцы хомо сапиенс и запилят 🙂
Сейчас разработки за «$1000 млрд.» будут завершены и китайцы сделают такого же, только с двумя симками и фонариком. За 10 т. р.
Ну немого глючного, конечно. =)
поже нужно скопировать в буфер ссылку первоисточника и отписываться каждые 30 минут о баянистах
Boston Dynamic
Робопес Spot и творческие порывы
Американская компания роботехники Boston Dynamics существует с 1992 года. Сначала услугами бывших инженеров Массачусетского технологического университета пользовались в основном американские же военные.
Boston Dynamics, Spot 3.0
Есть их первый громоздкий прототип BigDog, финансируемый DARPA, пока он остается только опытным образцом. Его четырехногая шагающая конструкция предполагает схожие со строением собаки бионические элементы, заменяющие колеса или гусеницы, необходимые для устойчивого положения и движения.
Boston Dynamics, тесты WildCat, 2013
На разных этапах эволюции милой желтой собачки были резвая дикая кошка и ее неторопливый вариант LS3, приспособленный для переноски больших грузов, больше напоминающий покладистого мула.
Boston Dynamics, тесты LS3 (Legged Squad Support System), 2012
На стройплощадке аэропорта Сан-Франциско, пресс-служба американской компании HoloBuilder
В первую очередь это работяга, способный выполнять сложную и нудную работу, состоящую из однотипных многократно повторяющихся задач. Как например, подробные геодезические замеры для строительства аэропорта в Сан-Франциско.
Видео с камеры Spot (слава), тест на ориентирование в пространстве в лаборатории Boston Dynamics
Рабочие канадской компании Pomerleau с помощниками Спот
Еще пес используется на морских подстанциях, где необходимо регулярно проводить осмотр оборудования в опасных для человека условиях.
И с помощью удаленного оператора ищет утечки нефти на морской платформе в Норвежском море для скандинавского нефтегазового оператора Aker BP. В таких случаях задействуют Spot Enterprise с функцией самозарядки и передачи данных.
Его даже завели на техасском полигоне SpaceX в Бока-Чика: кому охота первым осматривать место аварии, особенно если в повалившемся набок топливном баке ракеты был жидкий азот.
Инженеры компании ласково называют механического компаньона Зевс и поставили ему будочку.
С началом пандемии женская больница Массачусетского технологического университета в качестве эксперимента проводит бесконтактное измерение жизненных показателей пациентов.
Когда-то нечаянный пиар на YouTube помог Boston Dynamics привлечь коммерческое внимание к своим разработкам. Пришлось немного подыграть, превратив Спота в фирменную фишку, мастера на все манипуляторы. Теперь их продукцию используют для рекламы себя.
По крайней мере у нас: Сбер не стал мелочиться и купил робопса за 5,4 млн рублей как только он появился в продаже зимой 2021 года. Пока четвероногий осваивается в просторных коридорах корпоративного университета банка.
Иногда раскладывает книги в архивах Российской государственной библиотеки.
Например, Go1 от китайской Unitree Robotics, которого можно купить от 2 700 долларов. Есть еще AlphaDog от Weilan за 2 400, но они пока выпущены ограниченным тиражом для тестирования.
А что же искусство?
На спине робота был установлен пейнтбольный маркер с краской. Через специальный сайт любой желающий методом лотереи мог на 2 минуты получить доступ к удаленному управлению механизмом и повеселиться вволю, раскрашивая все, что попадется под ногу.
Не будем расстраиваться, балет все-таки будет. Spot не только умеет открывать двери, собирать мелкие предметы в корзину на спине, сажать цветочки и рисовать мелками на асфальте. Он еще отличный танцор.
В конце 2020 года Boston Dynamics сделала всем отличный подарок: два гуманоидных робота Atlas, механический пес и складской трудоголик Handle зажгли под хит «Do You Love Me?» модной в 60-е группы Contours.
В июне 2021 контрольный пакет акций BD купил за 1,1 млд долларов азиатский гигант Hyundai Motor и сразу запустил для западных покупателей промо-кампанию экологичного гибрида Ioniq, который с прошлой весны рекламируют амбассадоры компании BTS.
Встречайте синхронный ансамбль пластичных четвероногих роботов под корейский k-pop «I m on it». Кстати, песиков в танце кружится столько же, сколько участников слащавой мальчуковой группы.