Отечественная разработка на базе нейросети поможет «видеть» незрячим

23.11.2018     

Российские инженеры представили систему, которая умеет подсказывать слепым людям, какие предметы их окружают. В основе разработки лежит нейросетевой анализ видео и звука.

Гаджет для помощи

СОМСИ – система мультиканальной обработки информации, созданная отечественной компанией «Бизнес Бюро». Устройство собирает, анализирует и представляет в удобной для восприятия человеком форме сведения об окружающих предметах, расстоянии до них, их цвете, форме и т.д. Инженеры рассчитывают, что разработка поможет людям с серьезными нарушениями зрения свободно ориентироваться в пространстве.

СОМСИ состоит из двух модулей. Первая, аппаратная часть системы оснащена широкоформатной камерой и микрофоном. Вторая представляет собой вычислительную платформу, обрабатывающую принимаемые сенсорами данные. По размеру гаджет примерно равен обычному плееру.

Как работает устройство

Принцип действия устройства следующий. Сначала СОМСИ принимает аудиовизуальную информацию со своих датчиков. Затем через интернет система отправляет их на удаленный сервер, где собранная информация обрабатывается нейросетью: распознаются звуковые сигналы, различные объекты. Расстояние до предметов определяется с помощью ультразвука, аналогично современным парковочным датчикам в автомобилях.

После этого пользователь аппарата может принять эти сведения в удобной для себя форме: в виде голосового сообщения, тактильного оповещения или визуального примитива. Последний способ вывода доступен в том случае, если человек пользуется «искусственным глазом» – имплантом, функционирующим подобно сетчатке благодаря нанесенным «пикселям» из фоточувствительного материала. Реалистичную картину такое устройство пока что создать не способно: окружающие объекты представлены схематично, в виде простых геометрических фигур.

Кроме того, СОМСИ способна распознавать звуки: сигналы тревоги, клаксоны автомобилей, звуковые оповещения светофоров. По этой причине гаджет может помочь также людям с нарушением слуха.

Без проблем не обошлось

Вице-президент Всероссийского общества слабовидящих Дмитрий Блюм напомнил, что без предварительного тестирования системы говорить о ее эффективности рано. Сейчас СОМСИ не внесена в утвержденный распоряжением правительства перечень технических средств реабилитации, поэтому далеко не все инвалиды смогут воспользоваться аппаратом. Организация планирует запросить у «Бизнес Бюро» несколько гаджетов для проверки возможностей нейросети.

Впрочем, некоторые недостатки устройства можно заметить уже сейчас. Необходимость постоянного интернет-подключения сильно ограничивает места, где можно использовать СОМСИ. Это негативно сказывается и на стоимости аппарата – чтобы полноценно применять его вне дома, придется приобрести мобильный интернет и смартфон, способный раздавать Wi-Fi. Разработчики в курсе этой проблемы и собираются в будущем модифицировать систему – она сможет проводить простую обработку данных при помощи собственного «железа», без необходимости подключаться к серверу.  

Также СОМСИ пока не способна точно распознавать объекты, если владелец устройства перемещается, уверен директор Культурно-спортивного реабилитационного комплекса общества слепых Владимир Баженов. Причина – слишком низкая скорость реагирования системы на быстро изменяющееся окружение. Разработчики, тем не менее, утверждают, что уже внедрили в гаджет функцию для корректной обработки изображения при быстрой ходьбе.

Пока устройство не обучено, точность распознавания объектов невелика. К примеру, сейчас СОМСИ успешно отличает человека от машины, но определить лицо собеседника или марку авто еще не способно. Авторы проекта уверяют, что по мере накопления данных эффективность нейросетевого зрения возрастет.  


Автор:
Александр Вашкевич Аналитик


Есть ли у вас проблемы со зрением?


Близорукость (53.85%, 7 голосов)
53.85%
Дальнозоркость (0%, 0 голосов)
0%
Астигматизм (7.69%, 1 голосов)
7.69%
Слепота (15.38%, 2 голосов)
15.38%
Другое заболевание (0%, 0 голосов)
0%
У меня идеальное зрение (23.08%, 3 голосов)
23.08%

Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. Hans 1 23.11.18 12:07 Сейчас в теме
Почему нет на инфостарте версии для слабовидящих?
Оставьте свое сообщение

См. также

JetBrains открыла ранний доступ к новой IDE для Data Science

Новость ИТ-новость Новости компаний

7 сентября JetBrains разместила в своем блоге статью с информацией о том, что новая IDE DataSpell, которая с марта 2021 года находилась в закрытом тестировании по программе раннего доступа (EAP), становится доступной для всех желающих.

24.09.2021    6805    capitan    1       

Microsoft предлагает отказаться от паролей в пользу сервиса Authentication

Новость Безопасность Интернет ИТ-новость Новости компаний

Microsoft видит проблему в стандартных паролях, которые зачастую повторяются и имеют низкую надежность. В компании убеждены, что альтернативные способы аутентификации более безопасны.

24.09.2021    1770    VKuser24342747    2       

Правительство утвердило разработку российского аналога GitHub

Новость ИТ-новость Цифровая экономика

Премьер-министр Михаил Мишустин на форуме Kazan Digital Week анонсировал создание отечественного репозитория, аналогичного GitHub. Проект реализуется в рамках второго пакета поддержки ИТ.

22.09.2021    6187    VKuser24342747    19       

Microsoft присоединилась к Open Infrastructure Foundation для развития облаков

Новость ИТ-новость Новости компаний Облачные технологии

Microsoft стала платиновым членом организации Open Infrastructure Foundation. Компания будет представлять интересы своих телекоммуникационных клиентов в OpenStack.

15.09.2021    4059    VKuser24342747    0       

Microsoft разрешит устанавливать Windows 11 на старые компьютеры

Новость Windows ИТ-новость Новости компаний

Microsoft пересмотрела правила установки Windows 11, которые не позволяли использовать ОС на компьютерах, не соответствующих системным требованиям. Для инсталляции придется создать загрузочный диск.

14.09.2021    3028    VKuser24342747    0       

Оплата лицом заработает на всех станциях метро Москвы

Новость Искусственный интеллект ИТ-новость Цифровая экономика

В столичном метрополитене внедряют систему FacePay. С 15 октября оплатить проезд можно будет, не доставая смартфон, карту или жетоны из кармана.

14.09.2021    2591    user1015646    2       

«Яндекс» представил технологию автоматического перевода любых видео на русский язык

Новость ИТ-новость Яндекс

«Яндекс» сделал функцию автоматического закадрового перевода иностранных роликов доступной для почти любых видео в интернете. Функция встроена в фирменный браузер компании.

13.09.2021    2707    VKuser24342747    4       

Исследователи синтезировали выразительную устную речь

Новость Искусственный интеллект ИТ-новость

Синтетическое воспроизведение речи от голосовых помощников и автопереводчиков не передает эмоций и интонаций. Специалисты NVIDIA разработали систему искусственного интеллекта, которая решает эту проблему: ее речь сложно отличить от естественной.

10.09.2021    9441    user1015646    0       

GitHub выпустил веб-редактор кода: возможности, о которых вы могли не знать

Новость GitHub Автоматизация Интернет ИТ-новость

Начинающим программистам часто сложно настроить среду разработки и установить весь необходимый софт. Для них, а также для специалистов, которые работают в распределенных командах, GitHub запустил новый сервис github.dev.

10.09.2021    5743    user1015646    0       

Раскрыта дата релиза Windows 11

Новость Windows ИТ-новость Новости компаний

Microsoft официально объявила, когда станет доступна новая версия самой популярной десктопной ОС. Обновиться с Windows 10 до Windows 11 можно будет уже 5 октября 2021 года.

09.09.2021    10154    user1015646    0       

В Google научились увеличивать изображения в 16 раз с восстановлением деталей

Новость Искусственный интеллект ИТ-новость

Раньше увеличить видео с камер наблюдения в десятки раз получалось только у героев фильмов. Но теперь такая возможность существует и в реальной жизни – инженеры Google разработали прорывную технологию масштабирования изображений.

09.09.2021    4485    user1015646    3       

Эксперты подготовили рекомендации по использованию кириллицы в доменах и почте

Новость Интернет ИТ-новость

Рабочая группа представила стандарты внедрения, обработки, хранения, валидации и адаптации кириллических символов для программ, поддерживающих доменные имена и email-адреса.

07.09.2021    2982    VKuser24342747    0       

Госструктуры перейдут на российские системы видеоконференций

Новость Импортозамещение ИТ-новость Облачные технологии

Российских чиновников переводят на использование отечественного сервиса видеоконференций. Будут внедрять систему TrueConf на базе ОС Astra Linux и процессоров Baikal-M от «Байкал Электроникс».

03.09.2021    3411    user1015646    0       

Минэкономики раскритиковало требования к обновлению оборудования для суверенного Рунета

Новость Импортозамещение Интернет ИТ-новость Телекоммуникации

Минэкономики пришло к выводу, что требования Минцифры затормозят развитие связи в России. По мнению специалистов ведомства, возможным последствием может стать ухудшение интернет-услуг провайдеров.

03.09.2021    2784    VKuser24342747    0       

Разработчики назвали любимые языки программирования

Новость ИТ-новость Языки программирования

Крупнейший форум для разработчиков Stack Overflow составил рейтинг любимых языков программирования. Первую строчку списка занял молодой, но перспективный Rust.

02.09.2021    5391    user1015646    3       

Петербургские ученые обучили нейросеть находить вредоносных ботов в соцсетях

Новость Безопасность Искусственный интеллект ИТ-новость Соцсети

Сотрудники Санкт-Петербургского федерального исследовательского центра Российской академии наук (СПб ФИЦ РАН) создали решение для поиска ботов, размещающих спам и дезинформацию на любом языке.

02.09.2021    2441    VKuser24342747    1       

Windows Server исключается из эксперимента по поставке обновлений Microsoft WaaS

Новость Windows ИТ-новость Новости компаний Облачные технологии

По результатам четырехлетнего эксперимента Windows as a Service Microsoft решила, что больше не будет обновлять Windows Server несколько раз в год. Для серверной ОС было решено вернуться к практике обновления каждые 2-3 года.

01.09.2021    5651    SKravchenko    0       

Microsoft добавила в Power BI инструменты аналитики для Angular-приложений

Новость Аналитика ИТ-новость

Microsoft представила новый компонент для создания веб-сервисов аналитики данных. Он позволит интегрировать функции Power BI в Angular-приложения.

31.08.2021    3461    user1015646    0       

Windows 11 лишится нескольких функций предыдущей версии системы

Новость Windows ИТ-новость

Microsoft в бета-версии Windows 11 изменила привычные функции. Из ОС исчезло отображение секунд на часах и возможность быстро добавлять события в календарь, а кнопка «Пуск» переместилась в центр панели задач.

31.08.2021    5062    VKuser24342747    6       

GitHub в версии утилиты CLI 2.0 добавил поддержку расширений

Новость GitHub ИТ-новость Новости компаний

Разработчики GitHub представили вторую версию утилиты для управления проектами при помощи командной строки CLI. Приложение поддерживает несколько стандартных расширений и создание собственных.

27.08.2021    6567    VKuser24342747    0       

Круглая дата: ядру Linux исполнилось 30 лет

Новость Linux ИТ-новость Новости компаний

Ядро Linux отмечает юбилей. О создании новой ОС 21-летний Линус Торвальдс объявил 25 августа 1991 года.

27.08.2021    4979    user1015646    2       

Искусственный интеллект научился распознавать изображения лучше человека

Новость Искусственный интеллект ИТ-новость

Алгоритм компьютерного зрения впервые превзошел человека. В экспериментах людям и системе искусственного интеллекта предлагали определить, что изображено на фото, и ответить на вопросы. Результат ИИ оказался выше, чем у человека.

26.08.2021    3806    user1015646    5       

Facebook представил криптобиблиотеку для разработчиков – Winterfell

Новость ИТ-новость Новости компаний

Специалисты Facebook выпустили новую библиотеку Winterfell. Проект с открытым исходным кодом может генерировать доказательство вычислительной целостности STARK.

24.08.2021    5527    user1015646    3       

В GitHub добавлена поддержка цитирования из репозиториев

Новость GitHub ИТ-новость

GitHub позволил использовать файл CITATION.cff, в котором можно указать, как правильно ссылаться на содержимое репозитория при написании академических публикаций.

24.08.2021    5453    VKuser24342747    0       

GitHub официально представил новую версию «Обсуждений»

Новость GitHub ИТ-новость

GitHub заявил о завершении бета-тестирования обновленной версии раздела Discussions. Релизный вариант площадки для обсуждений репозиториев разрабатывался почти год при активном участии сообщества.

23.08.2021    3457    VKuser24342747    0