Нейросеть научили генерировать фото блюд по рецепту

Команда из Тель-Авивского университета разработала нейронную сеть, которая способна считывать рецепт блюда и генерировать изображение того, как будет выглядеть готовая еда.

Всё началось с того, как я попросил у бабушки рецепт её рыбных котлет с томатным соусом. Из-за преклонного возраста она не помнила точный рецепт. Мне стало интересно, можно ли построить систему, которая на основе изображения еды выводит рецепт. Но я пришёл к выводу, что слишком сложно выяснить реальные пропорции и «скрытые» ингредиенты вроде соли, перца или масла. Затем я подумал, могу ли я сделать наоборот.

Искусственный интеллект обучен на 52 000 наборах текстовых рецептов и фотографий конечных блюд.

Модель преуспела в создании изображений «похожей на кашу» пищи, например, макарон, риса, супов и салатов. Проблемы возникают при попытке генерации изображений еды, которая имеет отличительную форму вроде гамбургеров или курицы.