Нейросеть готовит по фото содержимого холодильника

Быстрое развитие платформ искусственного интеллекта после ChatGPT поднимает вопросы о том, какое место они займут в нашей жизни. Будут ли они заменять людей? Другая точка зрения — это интеллектуальное сотрудничество в различных областях повседневной жизни. Ученые недавно разработали ИИ, который может создавать сложные рецепты из имеющихся ингредиентов, анализируя фотографию внутреннего пространства холодильника.

Быстрый прогресс в области искусственного интеллекта, включая обработку естественного языка, машинное обучение и глубокое обучение, порождает идею о том, что машины могут превзойти человека и сделать его бесполезным. Илон Маск высказывает предупреждение о возможности «захвата мира» сверхинтеллектуальной машиной. Это видение — или кошмар — конкуренции между людьми и искусственным интеллектом отвлекает нас от настоящего потенциала сотрудничества людей и машин при определённых условиях.

Два исследователя из компании PeopleTec из Алабамы разработали компьютерную модель, которая создаёт сложные рецепты из имеющихся ингредиентов, анализируя фотографии внутренней части холодильника. Модель использует большие языковые модели и детекторы изображений для генерации полных рецептов с инструкциями и размерами порций. .

Идея родилась из настольной игры!

В статье для TechXplore автор Дэвид Новер рассказывает, что идею зародили в 2020 году исследователи из компании PeopleTec во время настольной игры. Одна команда предложила список ингредиентов, а другая при помощи языковой модели разработала новый рецепт.

Язык и изображение — распространённый способ решения задач, например, составления подписей к картинкам или генерации изображений по описанию. Такая технология, как ИИ для создания изображений, вызывает споры о возможности распространения фейковых новостей. В данном случае ИИ призван помочь в готовке еды.

Несмотря на это, в 2020 году системы вроде ChatGPT не достигли такой производительности. Дэвид Новер указывает: «По мере усложнения компонентов рецепты становились всё хуже и хуже, в конце концов превращаясь в бессмысленный набор слов, например, «Рецепт венгерской обувной кожи на 2 человека на завтрак» – полный бред».

В новой платформе, созданной двумя исследователями, решена проблема последовательности. Основная цель их работы — продемонстрировать последние достижения в области ИИ практичным и полезным способом. Объединив передовые интерфейсы прикладного программирования (API) моделей анализа изображений с генератором текста на базе ChatGPT, удалось генерировать рецепты из изображений ингредиентов, сделав инструмент увлекательным и интуитивно понятным.

Индивидуальные меню

Продолжая работу, авторы стремились к тому, чтобы сгенерированные рецепты могли соответствовать нескольким критериям, исходя из индивидуальных пожеланий каждого пользователя, создавая реалистичный рецепт с названием, пропорциями и предполагаемыми действиями.

Объединение языковой модели и детектора изображений позволяет превратить любой список продуктов в полноценный рецепт с указанием порций и инструкций.

Авторы отмечают, что главная задача заключалась в учете большого количества факторов. К примеру, это может быть снижение цены блюда, изменение объема порции или учёт диетических потребностей.

Качество моделей искусственного интеллекта зависит от объема данных для обучения: чем больше данных, тем лучше и точнее модель. В ходе исследований использовался вычислительный подход, обученный более чем двадцати тысячами изображений открытых холодильников с разными ингредиентами. На основе этих изображений модель создала стостраничный сборник рецептов с интересными и уникальными блюдами, которые включают тридцать лучших ингредиентов, показанных на входных изображениях, в различных сочетаниях.

По словам авторов: «Работа отличалась постоянной адаптацией рецепта к различным ограничениям. Несмотря на миллиарды комбинаций даже для небольшого списка изображений ингредиентов, учет сезонной доступности, остатков, размера порции, стоимости и диетических ограничений существенно расширил проблему и ее решение. «.

Учёные стремятся внедрить разработанный ими метод в мобильное приложение или прочие программы, которые способны мотивировать как начинающих, так и профессиональных поваров.

Не исчезнет ли изобретательность человека, если мы будем полагаться только на идеи искусственных интеллектов? Такая же проблема возникает с художественным творчеством: живописью, литературой, музыкой и т.д. Неужели то, что делает нас особенными — наши уникальные идеи — можно свести к коду и набору инструкций? Будущее будет написано ИИ, но необходимы строгие правила их использования, чтобы сохранить человечество, как утверждают многие специалисты.