IEEE Access: Робот-повар осваивает рецепты, просматривая кулинарные видео

Используя нейронные связи, они заложили в систему робота коллекцию из нескольких рецептов приготовления пищи. После изучения видео, демонстрирующего приготовление одного из рецептов, робот применял специальное зрение для распознавания объектов, таких как посуда и продукты. Точно определяя компоненты и действия человека-повара, робот смог определить, какой рецепт готовится на видео. Он мог определить, что если человек держит нож в одной руке, а морковь в другой, это означает, что он собирается ее нарезать. Из просмотренных видеороликов в 90% случаев робот правильно определил, какое блюдо готовится.

Машина также заметила небольшие изменения в рецептах, например, приготовление двойных порций или ошибки человека, и поняла, что это просто вариации, а не новые блюда.