Инструкции для роботов

[lankastersky]

Попался как-то во внутренней сети ролик, в котором демонстрировали робота-баристу. Говоришь ему словами, что ты хочешь, а он сам на кухне шурует - распознает предметы, хватает их, манипулирует как надо, кофе варит. Робот пока глуповат и может обращаться с ограниченным количеством предметов. Но т.к. многие предметы друг на друга похожи, то он, обучившись одному (например, открывать кран), может обучиться другому похожему (включать электрическую газовую плиту). Там в основе лежит нейросеть с распознаванием изображений и контролем жестов, она такие вещи хорошо переваривает.

И тут мне подумалось, что роботы могут учиться обращаться с вещами так же, как и люди, по инструкции. Не обязательно бумажной, правда, а в специальном формате и на своем, программногом языке. Собственно, концепция Internet of things давно к этому идет; разрабатываются общие протоколы, открытые интерфейсы. Но вот просто забавно, что ничего не мешает роботам осваивать и человеческие мануалы, у них все уже для этого есть: и текст распознают, и картинки друг с другом сопоставят. Например, надо собрать стол из икеи, показал роботу инструкцию и сидишь, наблюдаешь, как бы он не тот болт не вкрутил.