Израильские ученые разработали нейросети для поваров и археологов

18.01.2019     

Нейросети демонстрируют очередные достижения. В январе системы на базе машинного обучения научились «готовить» еду по рецептам и помогать археологам восстанавливать историю.

Выглядит аппетитно

Разработчики из университета в Тель-Авиве представили нейросеть, которая умеет генерировать изображение готового блюда по набору ингредиентов, необходимых для его приготовления. Повар может примерно оценить, что произойдет, если отойти от классического способа готовки – изменение хотя бы одного продукта в составе приводит к тому, что картинка будет отличаться от предыдущего варианта приготовления.

Исходный код нейросети доступен на GitHub под свободной лицензией, что позволяет без проблем использовать его для коммерческих целей.

Как нейросеть «готовит»

Для генерации рисунка по описанию блюда используется генеративно-состязательная сеть (GAN), которая обучается благодаря сопоставлению созданных образов с правильными изображениями. Такая система хорошо работает с текстовыми описаниями: программа способна принять в качестве входящих данных десятки строк.  

За основу израильские ученые взяли результаты другого научного исследования: в нем было собрано примерно 800 тыс. изображений блюд со списком ингредиентов для каждого. Нейросеть, обработав эту информацию, научилась самостоятельно генерировать внешний вид готовой еды из разных продуктов.

 

Сгенерированные нейросетью блюда

 

Главная проблема программы – неудачный выбор исходных данных. В исследовании были представлены лишь небольшие иллюстрации блюд размером 256×256 пикселей, которые при этом зачастую были плохого качества и с неправильным освещением. Из-за этого нейросеть гораздо лучше «рисует» еду из кашеобразных продуктов (крупы, макарон, салатов), а вот с созданием картинок более сложной формы (например, гамбургеров) у искусственного интеллекта есть проблемы.

В будущем ученые планируют обучить программу по более качественным иллюстрациям блюд.

На раскопки с нейросетью  

Одна из проблем, с которой приходится сталкиваться археологам – сбор фрагментов находок в цельную композицию. Исследователь, занимающийся подобной работой, может тратить от пары дней до нескольких лет на воссоздание исходного внешнего вида артефакта.  

Решить проблему снова помогли израильские ученые: на этот раз из Хайфского университета и института Технион. Совместными усилиями они создали нейросеть, которая способна самостоятельно складывать «паззлы» из обнаруженных обломков фресок, витражей, мозаик и других исторических изображений.

Разработка базируется на уже существующей программе, которая умеет собирать изображение из кусочков обычных картинок-головоломок. Она появилась еще в 1964 году и тогда умела обрабатывать не более 9 фрагментов. Современная версия может сложить паззл из тысяч деталей. Для определения правильного порядка элементов система находит близкие по цвету фрагменты и соединяет их. Израильские ученые взяли эту программу за основу.

Сложные мозаики

Создание специализированной археологической нейросети осложнялось тем, что исторические артефакты зачастую находятся в плохом состоянии: они выцвели, края их обломков затронуты эрозией и не всегда точно совпадают друг с другом. Кроме того, в отличие от обычных головоломок, в археологических «паззлах» нет заранее известного общего числа кусочков.

 

 

«Мы предлагаем новый алгоритм, который может справиться со всеми этими сложностями. Технология базируется на различных идеях. Во-первых, мы предлагаем виртуально восстановить каждый из найденных фрагментов. Это нивелирует проблему разрушенных краев. Во-вторых, мы используем метод обратной вероятности составного преобразования», – поясняют свою разработку исследователи.

Система в первую очередь дает ответ на вопрос «Как наилучшим образом сложить археологический паззл?». Получить ответ помогают различные критерии: расстояние между элементами, совпадение цветов, схожесть очертаний краев, размер фрагментов, сочетание элементов рисунка и т.п.

Технология уже прошла полевые испытания: нейросеть смогла успешно сложить в единое изображение фрагменты фресок из различных церквей мира.


Автор:
Александр Вашкевич Аналитик


Пользуетесь ли вы приложениями на базе нейросетей?


Да, для работы (18.18%, 2 голосов)
18.18%
Да, для развлечения (18.18%, 2 голосов)
18.18%
Нет, не пользуюсь (45.45%, 5 голосов)
45.45%
Не знаю (18.18%, 2 голосов)
18.18%

Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. echo77 1258 18.01.19 12:46 Сейчас в теме
Поиск изображения по текстовому описанию в Google photo работает на основе нейросети?
Оставьте свое сообщение

См. также

Microsoft присоединилась к Open Infrastructure Foundation для развития облаков

Новость ИТ-новость Новости компаний Облачные технологии

Microsoft стала платиновым членом организации Open Infrastructure Foundation. Компания будет представлять интересы своих телекоммуникационных клиентов в OpenStack.

вчера в 17:15    1983    VKuser24342747    0       

Microsoft разрешит устанавливать Windows 11 на старые компьютеры

Новость Windows ИТ-новость Новости компаний

Microsoft пересмотрела правила установки Windows 11, которые не позволяли использовать ОС на компьютерах, не соответствующих системным требованиям. Для инсталляции придется создать загрузочный диск.

14.09.2021    1866    VKuser24342747    0       

Оплата лицом заработает на всех станциях метро Москвы

Новость Искусственный интеллект ИТ-новость Цифровая экономика

В столичном метрополитене внедряют систему FacePay. С 15 октября оплатить проезд можно будет, не доставая смартфон, карту или жетоны из кармана.

14.09.2021    1510    user1015646    2       

«Яндекс» представил технологию автоматического перевода любых видео на русский язык

Новость ИТ-новость Яндекс

«Яндекс» сделал функцию автоматического закадрового перевода иностранных роликов доступной для почти любых видео в интернете. Функция встроена в фирменный браузер компании.

13.09.2021    1810    VKuser24342747    4       

Исследователи синтезировали выразительную устную речь

Новость Искусственный интеллект ИТ-новость

Синтетическое воспроизведение речи от голосовых помощников и автопереводчиков не передает эмоций и интонаций. Специалисты NVIDIA разработали систему искусственного интеллекта, которая решает эту проблему: ее речь сложно отличить от естественной.

10.09.2021    6120    user1015646    0       

GitHub выпустил веб-редактор кода: возможности, о которых вы могли не знать

Новость GitHub Автоматизация Интернет ИТ-новость

Начинающим программистам часто сложно настроить среду разработки и установить весь необходимый софт. Для них, а также для специалистов, которые работают в распределенных командах, GitHub запустил новый сервис github.dev.

10.09.2021    3451    user1015646    0       

Раскрыта дата релиза Windows 11

Новость Windows ИТ-новость Новости компаний

Microsoft официально объявила, когда станет доступна новая версия самой популярной десктопной ОС. Обновиться с Windows 10 до Windows 11 можно будет уже 5 октября 2021 года.

09.09.2021    5871    user1015646    0       

В Google научились увеличивать изображения в 16 раз с восстановлением деталей

Новость Искусственный интеллект ИТ-новость

Раньше увеличить видео с камер наблюдения в десятки раз получалось только у героев фильмов. Но теперь такая возможность существует и в реальной жизни – инженеры Google разработали прорывную технологию масштабирования изображений.

09.09.2021    3135    user1015646    3       

Эксперты подготовили рекомендации по использованию кириллицы в доменах и почте

Новость Интернет ИТ-новость

Рабочая группа представила стандарты внедрения, обработки, хранения, валидации и адаптации кириллических символов для программ, поддерживающих доменные имена и email-адреса.

07.09.2021    2570    VKuser24342747    0       

Госструктуры перейдут на российские системы видеоконференций

Новость Импортозамещение ИТ-новость Облачные технологии

Российских чиновников переводят на использование отечественного сервиса видеоконференций. Будут внедрять систему TrueConf на базе ОС Astra Linux и процессоров Baikal-M от «Байкал Электроникс».

03.09.2021    2964    user1015646    0       

Минэкономики раскритиковало требования к обновлению оборудования для суверенного Рунета

Новость Импортозамещение Интернет ИТ-новость Телекоммуникации

Минэкономики пришло к выводу, что требования Минцифры затормозят развитие связи в России. По мнению специалистов ведомства, возможным последствием может стать ухудшение интернет-услуг провайдеров.

03.09.2021    2333    VKuser24342747    0       

Разработчики назвали любимые языки программирования

Новость ИТ-новость Языки программирования

Крупнейший форум для разработчиков Stack Overflow составил рейтинг любимых языков программирования. Первую строчку списка занял молодой, но перспективный Rust.

02.09.2021    4920    user1015646    3       

Петербургские ученые обучили нейросеть находить вредоносных ботов в соцсетях

Новость Безопасность Искусственный интеллект ИТ-новость Соцсети

Сотрудники Санкт-Петербургского федерального исследовательского центра Российской академии наук (СПб ФИЦ РАН) создали решение для поиска ботов, размещающих спам и дезинформацию на любом языке.

02.09.2021    2019    VKuser24342747    1       

Windows Server исключается из эксперимента по поставке обновлений Microsoft WaaS

Новость Windows ИТ-новость Новости компаний Облачные технологии

По результатам четырехлетнего эксперимента Windows as a Service Microsoft решила, что больше не будет обновлять Windows Server несколько раз в год. Для серверной ОС было решено вернуться к практике обновления каждые 2-3 года.

01.09.2021    4242    SKravchenko    0       

Microsoft добавила в Power BI инструменты аналитики для Angular-приложений

Новость Аналитика ИТ-новость

Microsoft представила новый компонент для создания веб-сервисов аналитики данных. Он позволит интегрировать функции Power BI в Angular-приложения.

31.08.2021    3032    user1015646    0       

Windows 11 лишится нескольких функций предыдущей версии системы

Новость Windows ИТ-новость

Microsoft в бета-версии Windows 11 изменила привычные функции. Из ОС исчезло отображение секунд на часах и возможность быстро добавлять события в календарь, а кнопка «Пуск» переместилась в центр панели задач.

31.08.2021    4696    VKuser24342747    6       

GitHub в версии утилиты CLI 2.0 добавил поддержку расширений

Новость GitHub ИТ-новость Новости компаний

Разработчики GitHub представили вторую версию утилиты для управления проектами при помощи командной строки CLI. Приложение поддерживает несколько стандартных расширений и создание собственных.

27.08.2021    5736    VKuser24342747    0       

Круглая дата: ядру Linux исполнилось 30 лет

Новость Linux ИТ-новость Новости компаний

Ядро Linux отмечает юбилей. О создании новой ОС 21-летний Линус Торвальдс объявил 25 августа 1991 года.

27.08.2021    4365    user1015646    2       

Искусственный интеллект научился распознавать изображения лучше человека

Новость Искусственный интеллект ИТ-новость

Алгоритм компьютерного зрения впервые превзошел человека. В экспериментах людям и системе искусственного интеллекта предлагали определить, что изображено на фото, и ответить на вопросы. Результат ИИ оказался выше, чем у человека.

26.08.2021    2981    user1015646    5       

Facebook представил криптобиблиотеку для разработчиков – Winterfell

Новость ИТ-новость Новости компаний

Специалисты Facebook выпустили новую библиотеку Winterfell. Проект с открытым исходным кодом может генерировать доказательство вычислительной целостности STARK.

24.08.2021    4282    user1015646    3       

В GitHub добавлена поддержка цитирования из репозиториев

Новость GitHub ИТ-новость

GitHub позволил использовать файл CITATION.cff, в котором можно указать, как правильно ссылаться на содержимое репозитория при написании академических публикаций.

24.08.2021    4671    VKuser24342747    0       

GitHub официально представил новую версию «Обсуждений»

Новость GitHub ИТ-новость

GitHub заявил о завершении бета-тестирования обновленной версии раздела Discussions. Релизный вариант площадки для обсуждений репозиториев разрабатывался почти год при активном участии сообщества.

23.08.2021    3090    VKuser24342747    0       

Разработчик создал браузерную версию OpenAI Codex для управления веб-страницами

Новость Интернет Искусственный интеллект ИТ-новость

Программист Эндрю Кантино рассказал, что сделал расширение для модификации страниц в Google Chrome, работающее на основе ИИ-ассистента для разработки OpenAI Codex.

23.08.2021    5162    VKuser24342747    0       

Российский разработчик создал эмулятор для запуска приложений iOS на M1 Mac

Новость Mac OS ИТ-новость Мобильные приложения

Программа PlayCover позволяет запускать на компьютерах с операционной системой MacOS любые мобильные приложения для iOS, в том числе игры с поддержкой мыши и клавиатуры.

20.08.2021    5490    VKuser24342747    0       

Вместо директора Nvidia на презентации выступил его цифровой клон

Новость Искусственный интеллект ИТ-новость Новости компаний

Во время презентации Nvidia выступила точная цифровая копия генерального директора компании Дженсена Хуанга. Виртуальный аватар предпринимателя создан при помощи ИИ-технологий.

20.08.2021    3423    VKuser24342747    1