В Android появилась поддержка слуховых аппаратов

ОС Android обзавелась встроенной поддержкой слуховых аппаратов. Новая спецификация, ориентированная на слабослышащих граждан, получила наименование ASHA.

Apple работает над умной одеждой для инвалидов

Время от времени компания Apple пополняет свое патентное портфолио совсем необычными разработками. Например, некоторое время назад стало известно о заявке на патент, в которой описана специальная одежда для людей с ограниченными возможностями. Она должна помочь им передвигаться по городу.

Microsoft потратит $25 млн на создание технологий, помогающих инвалидам

Президент компании Брэд Смит заявил, что такие люди обладают «огромным потенциалом», и новейшие технологии могут помочь им «достичь еще большего».

В России запустили производство речевых процессоров. На фото - генеральный директор ГК «Исток-Аудио» Иван Климачёв

В Московской области на производственной площадке Группы компаний «Исток-Аудио» стартовало первое в России производство звуковых процессоров систем кохлеарной имплантации. Над этим проектом совместно работали две компании — российский «Отопром» (ГК «Исток-Аудио») и мировой производитель имплантируемых слуховых систем Oticon Medical (Дания).

Томские учёные разрабатывают программу для глухих людей

Группа молодых ученых Томского политехнического университета (ТПУ) работает над мобильным приложением, которое сможет переводить русскую речь на язык жестов.

Стодолларовая перчатка переведет язык жестов в текст

Инженеры из Калифорнийского университета в Сан-Диего разработали перчатку, которая распознает язык жестов и переводит его в цифровой текст. Перчатка может подключаться к смартфону или компьютеру по Bluetooth и передавать на них текст в режиме реального времени. Интересно, что суммарная стоимость компонентов устройства не превышает 100 долларов. В будущем авторы планируют также превратить перчатку в контроллер для виртуальной реальности. Работа, посвященная устройству, опубликована в журнале PLoS One, также о разработке сообщает издание Motherboard.

Умная заколка Ontenna поможет глухим людям чувствовать звук

Одним из перспективных направлений развития носимой электроники, помимо отслеживания биометрических показателей, является создания альтернативных способов взаимодействия с окружающим миром. Во-первых, это может расширить человеческие возможности. Во-вторых, позволит множеству людей жить обычной жизнью. Например, людям, утратившим способность воспринимать звуки.

Искуственный интеллект читает по губам лучше человека

Чтение по губам нельзя назвать точной научной дисциплиной. Однако благодаря возможностям современных компьютеров, а в частности нейросетям, можно разработать искусственный интеллект, который справится с чтением по губам намного лучше человека. Watch, Attend and Spell (WAS) – это новая система программного обеспечения с искусственным интеллектом, разработанная учеными из Оксфорда в сотрудничестве с компанией DeepMind, Google. Система WAS использует компьютерное зрение и методы машинного обучения, чтобы научиться читать по губам, смотря телевизионные передачи длительностью более 5000 часов.

Исследовательская группа сравнивала способности машины и человека-эксперта разбираться в том, что говорилось в видео, сосредоточившись лишь на движениях губ людей в кадре. В результате ученые обнаружили, что новое программное обеспечение было более точным по сравнению с профессионалом. Человек правильно распознавал лишь 12 процентов слов, в то время как искусственный интеллект WAS был способен распознать более 50 процентов слов. Ошибки машины заключались только в потере буквы «с» на концах слов.

Новое программное обеспечение может повлиять на ряд новейших разработок, в том числе помочь слабослышащим и глухим в ориентации в пространстве. Также в будущем подобную систему можно будет использовать для создания субтитров к видео в реальном времени. Кроме того, подобные технологии могут повысить точность и скорость преобразования речи в текст, особенно в шумных местах, где микрофоны просто не слышат пользователя.

Источник: Naced-Science

Parke Pleasants представил Bone Case — небольшое устройство, которое крепится на смартфон и позволяет людям, у которых есть проблемы со слухом, разговаривать по телефону.

Устройство работает благодаря специальной технологии, которая позволяет использовать костную проводимость для того, чтобы исключить необходимость использовать слуховой канал для приема звуковых волн.


Bone Case начинает работать при совершении звонка и передает звуковые волны непосредственно в кости внутреннего уха, что позволяет людям с поврежденной ушной мембраной разговаривать по телефону.

Источник: Fainaidea
В России увеличивается количество социальных изобретений

В России производят все больше оборудования для инвалидов. Оно помогает сделать жизнь людей с ограничениями по здоровью более комфортной.

В этой комнате собрано самое современное оборудование для инвалидов. Люди с ограничением по слуху и зрению здесь могут научиться пользоваться более чем 70 изобретениями.

Проект «Полигон» работает в московском фонде поддержки слепоглухих «Соединение» почти год. Российские компании привозят сюда свои изобретения бесплатно. Для них это возможность узнать мнение тех, кому они предназначены. Техникой можно научиться пользоваться в центре, или даже ненадолго забрать домой, а после решить, стоит ли покупать.

Иван Бирюков, генеральный директор Центра поддержки социальных инноваций «Технологии Возможностей»: «Мы помогаем им научиться, а в том случае, когда им необходимо это приобрести, либо фонд помогает, в том числе покупает, потому что у фонда есть такая программа поддержки слепо-глухих в части закупки технических средств реабилитации для них, либо рекомендуем включить это в индивидуальный план реабилитации».

Здесь есть измеритель уровня жидкости. Он пищит и вибрирует, когда стакан наполняется водой. Вибрирующая трость помогает понять, что рядом препятствие, не прикасаясь к нему. А по вибрирующим часам можно узнать время на ощупь. Нужно только провести рукой по циферблату. Одна вибрация - человек поставил палец на верный час, а две указывают на минуты. Есть даже приложение для телефонов и планшетов - связь с сурдопереводчиком в режиме реального времени.

Игорь Гусев, разработчик сервиса для глухих людей: «Система сейчас ищет переводчика, ближайшего свободного переводчика с языка жестов, сурдопереводчика. Вот она нашла его, сейчас происходит соединение. Мария Середа – наш переводчик, в данный момент она работает из Петрозаводска».

Сертифицированных сурдопереводчиков на всю Россию 900 человек. И специалиста проще найти в интернете, чем в своем городе. Приложение может войти в список технических средств реабилитации инвалидов.

Количество приборов постоянно увеличивается. Скоро здесь может проявиться новинка – нейрокоммуникатор. Прибор с помощью электродов может буквально читать мысли и переводить их в текст.


Источник: ОТР
Нейросеть научилась читать по губам лучше человека

Разработчики из Оксфордского университета создали первую в мире программу, которая распознает речь по губам на уровне целых предложений и делает это намного лучше человека. Ее работа основана на использовании нейросетей и методов глубинного обучения. Научная статья исследователей, которая была подготовлена к конференции ICLR 2017, опубликована в открытом доступе.

Автоматические системы распознавания речи на основе мимики человека имеют большой практический потенциал: они могут быть использованы для создания слуховых аппаратов нового поколения, биометрической идентификации или расследования преступлений. Поэтому ученые уже много лет пытаются разработать программу для «чтения» по губам, но до сих пор им не удавалось добиться успеха. Современные системы распознавания речи на основе мимики хорошо «считывали» отдельные слова и словосочетания, однако они не могли справиться с целыми предложениями.

Авторы нового исследования преодолели это ограничение с помощью программы LipNet, в основе которой лежит использование LSTM-нейросети. Эта нейросеть представляет собой подвид рекуррентных нейросетей, для которых характерно наличие обратной связи. Ее главная особенность заключается в том, что она способна обучаться долговременным зависимостям. На практике это означает, что LSTM-нейросеть по умолчанию хранит информацию в течение продолжительного периода времени и способна работать с контекстом в длинных предложениях (подробнее о LSTM и рекуррентных нейросетях вы можете прочитать в материале). Кроме того, исследователи также использовали специальную сверточную нейросеть (STCNN), которая хорошо справляется с задачей анализа видео, и обучение методом нейросетевой темпоральной классификации (Connectionist Temporal Classification, CTC).


В качестве исходного материала авторы работы взяли базу данных Grid, в которой было собрано более 32 тысяч видеозаписей. На них 13 человек произносили на английском языке предложения, построенные по одинаковому принципу: команда (4) + цвет (4) + предлог (4) + буква (25) + число (10) + наречие (4). В скобках указано количество вариантов слов для каждой из шести словесных категорий. Разнообразие вариантов обуславливается тем, что разные звуки (например, [p], [b], [m]) во время произношения выглядят почти одинаково, то есть имеют общую визему. Всего каждое предложение имело по 64 тысячи вариантов.

В ходе тренировки LipNet училась следить за губами говорящего на видео, и на основе этого понимать, что он сказал. Программу обучали на 88 процентах выборки, оставшиеся 12 процентов были использованы для проверки ее работы.

 

Сравнение работы LipNet с работой других программ, которые распознают буквы, слова или словосочетания  
 
Результаты тестирования показали, что LipNet может правильно распознавать речь по губам в 93,4 процентах случаев. Таким образом, системе удалось не только обойти другие программы, но и специально обученных людей (их точность распознавания речи достигает 52,3 процентов). Тем не менее, сами авторы работы отмечают, что условия проверки работы LipNet были весьма «тепличными», при распознавании произвольной человеческой речи результат может быть значительно хуже.

Ранее компания Microsoft усовершенствовала систему распознавания устной речи, работа которой также основана на использовании сверточных и LSTM-нейросетей. Теперь система, которую планируется использовать в в голосовом помощнике Cortana, игровой приставке Xbox One и других программах, делает меньше ошибок, чем профессиональный специалист по набору текста.

Источник: N+1
Новый прибор поможет глухим слышать

Мы привыкли к тому, что человек принимает информацию через глаза и уши. Однако ученые говорят, что человек — это приемник информации в целом, и даже глухие могут услышать, а слепые увидеть, вопрос только в том каким именно образом это будет происходить.

Нейробиолог Дэвид Иглман работал в команде со Скоттом Новичем над созданием прибора, который помог бы слышать и видеть при помощи кожи.

«У нас есть этот гигантский входной канал, который называется нашей кожей», – говорит изобретатель, – и мы не используем его».


Ученые создали жилет, в котором находится 32 крошечных моторчика, преобразующих звуковые волны в вибрацию со стороны спины. Таким образом, глухой человек понимает, что к нему обращаются или слышит какой-то сигнал. Жилет работает в комплекте со смартфоном, так как именно он преобразует звуковые волны в понятные для человека сигналы, которые передают те самые моторчики. Сначала не совсем понятно, что именно имеют ввиду смартфон и жилет, но со временем все становится интуитивно понятным.

В конечном счете нейробиолог мечтает научить глухих слышать слова через жилет.
Источник: Faina Idea