Наука

Нейросеть научилась создавать фотографии готовых блюд просто по рецепту

Нейросеть обучилась создавать фотографии готовых блюд всего лишь по рецептам. Разработкой уникального алгоритма занимались израильские ученые из Тель-Авивского университета.

Стоит отметить, что разработанная нейросеть умеет создавать фото не только по рецептам, это касается любых других текстовых описаний. Таким образом, алгоритм научили делать уникальные снимки буквально с нуля. Нейросеть при этом выполняет большой перечень задач. Программа связывает слова и соответствующие визуальные признаки. Важно при этом получение конкретных описаний, таких как, например, «зеленый огурец на желтой тарелке» и так далее. Впрочем, здесь имеется сложность, поскольку таких подробных выражений кулинарные рецепты обычно не содержат. Также создает проблему и то, что в таких текстах редко присутствует описание готового блюда, традиционно все заканчивается на последнем этапе приготовления.

Разработанная израильскими специалистами нейросеть берет за основу целостный рецепт, в котором имеется не только список необходимых продуктов, а и пошаговое описание процесса. Алгоритм изучает отдельно ингредиенты и способ приготовления, переводит их в определенные векторы, после чего происходит процедура совместного вложения, при которой формируется единый вектор, его нейросеть StackGAN-v2 и трансформирует в картинку готового блюда. Некоторые результаты работы алгоритма уже появились в Сети.

Создатели отмечают, что в процессе обучения лежит 52 000 пар рецептов и фотографий, его работу проверили еще на 24 000 парах. Оценивали работу, в том числе, и обычные люди, они поставили умению нейросети 3,72 баллов из 5 возможных. В ходе проверки учитывалась в первую очередь достоверность полученного изображения.

Общество с ограниченной ответственностью «ЛЮДИ», Бер Илья Леонидович, Антивоенное этническое движение «Новая Тыва» (New Tuva), Наки Майкл Сидней, Общество с ограниченной ответственностью «Процесс 2021», Региональная общественная организация помощи женщинам и детям, находящимся в кризисной ситуации «Информационно, Первый отдел признаны в РФ иностранными агентами.
Автор: Павлова Ольга

📅 11-01-2019, 21:11
Читайте также

Введите комментарий:

Последние новости
Популярное
Работа у нас