ИИ сделает самую грязную работу. TidyBot -робот помощник на основе больших языковых моделей

TidyBot - это разработанный учеными робот, который предназначен для помощи вам в уборке квартиры. Он оснащен функциональностью, позволяющей классифицировать предметы по цвету, перерабатывать пивные банки, укладывать вещи на свои места и собирать мусор.

Для того чтобы робот мог эффективно персонализировать физическую помощь, он должен научиться учитывать предпочтения пользователя, которые могут быть обобщены и использованы в будущих ситуациях. В данной работе мы исследуем персонализацию уборки в домашних условиях с помощью роботов, которые могут убирать комнаты, поднимая и укладывая предметы на свои места. Одной из главных проблем является определение правильного места для каждого предмета, так как предпочтения людей могут сильно отличаться в зависимости от личных вкусов или культурного контекста. Например, один человек может предпочитать хранить рубашки в ящике, в то время как другой предпочитает их на полке. Нашей целью является создание систем, способных изучать такие предпочтения на основе всего нескольких примеров с помощью предыдущих взаимодействий с конкретным человеком. Мы показываем, что роботы могут объединять планирование и восприятие на основе языка с возможностями краткосрочной обобщающей способности больших языковых моделей (LLM), чтобы выводить обобщенные предпочтения пользователя, которые широко применимы в будущих взаимодействиях. Такой подход обеспечивает быструю адаптацию и достигает точности 91,2% на незнакомых объектах в нашем наборе данных. Мы также демонстрируем наш подход на реальном мобильном манипуляторе под названием TidyBot, который успешно укладывает 85,0% объектов в условиях тестов в реальном мире.

Несмотря на все его преимущества, пока что TidyBot не доступен для продажи, и его появление на рынке ожидается в будущем. Тем не менее, его разработка является важным шагом в направлении автоматизации бытовых задач, которые могут помочь людям улучшить свою жизнь и освободить время для более важных дел.

Если вам было интересно, подпишитесь на канал в Телеграме, там еще больше полезной информации, и она там появляется быстрее.