Створення рецепту на основі одного зображення страви вимагає досить складного пристрою алгоритмів. Вони повинні зрозуміти, які саме інгредієнти є на знімку, як їх обробили, змішали з іншими частинами страви і нарізали.
У системі розпізнавання зображень зараз знаходяться мільйони фото їжі, на основі яких штучний інтелект вже може припустити, з чого складається та чи інша страва.
Наш метод починається з попередньої підготовки кодера зображення і декодера інгредієнтів, який пророкує набір інгредієнтів, використовуючи візуальні особливості страви, витягнуті із зображення, а також спільне використання цих інгредієнтів. Потім ми навчаємо кодувальник інгредієнтів і декодер команд, які генерують заголовок та інструкції з приготування страви.
Facebook AI
Розробники зазначають, що сервіси розпізнавання їжі за фотографіями кидають виклик багатьом системам комп'ютерного зору через свою високу складність.
Крім того, що нейромережа повинна бути навчена багатьом речам, наприклад, що всередині круасана може бути масло або джем, хоча візуального це зрозуміти неможливо, штучний інтелект повинен розуміти, що під час приготування страв виникає деформація продуктів, а самі харчові компоненти можуть взаємодіяти один з одним.
Раніше стало відомо, що компанія Facebook займається розробкою штучного інтелекту з голосовим помічником, що спеціалізується на сфері віртуальної і доповненої реальності.
Нещодавно Університет Іннополіс розробив геоінформаційні сервіси для моніторингу лісових, сільськогосподарських і прибережних територій на основі даних, одержуваних з безпілотних апаратів і супутників.