Японская компания Preferred Networks создала робота, который сам убирает в комнате

Работам, которые умеют манипулировать предметами, находят применение во многих сферах человеческой жизни: например, на производстве и складах, в домашней работе. При этом одна из главных задач таких роботов – научиться правильно распознавать предметы для дальнейших действий: предмет может быть слишком хрупким, либо слишком скользким, или лежать так, что его невозможно поднять.

Особенно это актуально для роботов-уборщиков, ведь им нужно не только эффективно распознавать предметы и брать их, но также и класть их на место.

Заняться разработкой такого робота решили японские инженеры из Preferred Networks. Аппаратную часть работа они не делали сами, а выбрали в качестве робота-уборщика Human Support Robot от компании Toyota, который используется для помощи инвалидам. Вместо разработки самого робота инженеры решили сосредоточиться на программном обеспечении.

В основе системы компьютерного зрения – сверхточная нейросеть, которая училась на почти двух миллионах изображений. Благодаря этому система умеет эффективно распознавать предметы, после чего робот может идентифицировать их, понять, как именно нужно поднять конкретный предмет и куда его отнести.

Например, робот знает, что ручки должны лежать в стакане для канцелярских принадлежностей, а вещи, которые лежат на полу, должны оказаться в корзине для белья.

Кроме того, компьютерное зрение робота также используется для того, чтобы распознавать невербальные команды: система может отследить, куда показывает человек. Также робот умеет распознавать голосовые команды и, например, отнести мусор в ведро по просьбе пользователя.