Китайские студентки создали приложение для общения с глухонемыми

Две студентки из пекинского университета Бейхай разработали приложение, способное помочь глухим людям в Китае. Приложение получило название Shouyin, что дословно значит “голос рук”. Оно позволяет в режиме реального времени переводить знаки языка глухонемых в речь.

Приложение работает совместно со смарт-браслетом и на данный момент может распознать более 200 знаков, каждый знак был записан тысячу раз с разных людей, чтобы повысить аккуратность перевода. Сейчас процент распознавания составляет 95%.

Юная Нана Ван, являющаяся одним из разработчиков, рассказала, что ее вдохновила глухонемая подруга, с которой она могла общаться только через сообщения на мобильном телефоне. В Китае примерно 5% населения или 70 млн человек являются глухими. Несомненно, приложение будет пользоваться большим успехом. Официальный выход приложения намечен на конец мая. В других странах мира уже существуют схожие программы. Например Uni от MotionSavvy и переводчик языка глухонемых от Google Chats.

Технологии сегодня развиваются стремительными темпами, в том числе в социальных сферах и в медицине. Они помогают не только справляться с различного рода недугами, но и лучше понимать ближнего своего, даже если его восприятие мира отличается от вашего. Поговорить с глухонемым человеком вам поможет специальное приложение, в то время как VR-технологии могут помочь, к примеру, с пониманием аутизма, а значит сблизить вас с теми, кто страдает от этого заболевания.

Различные исследования показали, что более 99% людей слышали об аутизме, но лишь 16% действительно понимает, что означает это психическое состояние. А по результатам опроса, проведённого в Великобритании, более 25% людей, страдающих аутизмом, когда-нибудь просили уйти из таких публичных мест, как ресторан или магазин, когда видели симптомы их недуга.

Чтобы справиться с этой проблемой дезинформации, британское «National Autistic Society» решило создать VR-фильм , который помог бы всем людям узнать, каково это – жить с подобным диагнозом. Gmbox писал об этом .

Этот виртуальный ролик перенесёт вас в тело юного мальчика, страдающего аутизмом, и покажет мир его глазами. В фильме вы зайдёте в торговый центр и ощутите на себе ту огромную сенсорную нагрузку, которую он ощущает, когда ходит по этому многолюдному месту. Шум, обилие различных предметов, цветов, мельтешение людей, их голоса – всё это вызывает у мальчика панику, с которой ему очень сложно справиться.

Другое сообщество, изучающее болезнь Альцгеймера, также выпустило VR-фильм, позволяющий вам побывать на месте человека, страдающего деменцией. Фильм «A Walk Through Dementia» позволит вам понять, как некоторые простые повседневные дела, вроде заваривания себе чашки чая, могут стать настоящей проблемой для обладателя этой болезни.

Материал, прежде всего, подготовлен для родителей, которые столкнулись с глухотой своего ребенка. К сожалению, по нашему опыту, а обучать и развивать малыша необходимо – никакая школа не сможет полноценно заменить маму и папу искренне желающего помочь своему чаду.

Сегодня общение лицом к лицу для глухого человека с теми, кто не владеет , достаточно затруднительно. Переводчиков жестового языка не хватает и не всегда есть возможность оперативно получить их помощь. Использовать ручку и бумагу – не удобно: процесс медленный и не у всех нас разборчивый почерк.

Одно из решений задачи общения между глухим и слышащим в России предложил Киряков Василий (отец глухого ребенка Миши) .

Василий разработал программу (комплекс) "Дуэт(Н) - система для глухих", состоящую из двух устройств (смартфона и смартфона или смартфона и планшета) на базе операционной системы Android или iOS. Система для глухих обеспечивает обмен текстовыми сообщениями между устройствами с помощью Bluetooth соединения. При этом на устройстве для слышащего есть возможность набора сообщений голосом (перевод речи в текст) , а глухой человек может очень быстро набирать сообщения с помощью современных клавиатур телефона, что делает общение глухого и слышащего человека удобным. Система не зависит от сетей сотовой связи и мобильного интернета только на Android версии. Для распознавания речи в iOS версии мобильный интернет нужен.

Программа "Дуэт(Н)" предназначена для широкого круга пользователей. Во-первых, это родители глухих детей, которые хотят сформировать знание письменной речи своего ребенка, чтобы впоследствии дать ему возможность развиваться интеллектуально, читать, общаться со слышащими, получать образование и делать карьеру. Во-вторых, для взрослых глухих для общения со слышащими, в случаях отсутствия переводчика жестового языка. "Дуэт(Н)" можно использовать при посещении больниц, магазинов, банков и других необходимых мест. В-третьих, программа полезна для глухих студентов ВУЗов, колледжей и академий, чтобы уточнять у преподавателей непонятные моменты. При помощи программы можно общаться со слышащими коллегами; представителями органов государственной власти; запрашивать и получать необходимую информацию.

В настоящее время по всему миру уже тысячи глухих людей используют систему Кирякова, особенно популярен комплекс в США (обзор). Глухие американцы уже используют прорамму при общении с врачами, социальными службами, на работе, в кафе, при учебе. Комплекс рекомендуют к применению американские службы реабилитации инвалидов по слуху. Многие глухие смогли устроиться на работу и общаются со своими слышащими коллегами. География распространения на сегодняшний день насчитывает более 20 стран, это Великобритания, Германия, Франция, Италия, Австралия и др.

Система эффективна, способствует развития письменной речи у глухого ребенка. Сыну Василия Кирякова 10 лет мальчик закончил третий класс (Центр "Эхо" в Екатеринбурге) .

"Занимаемся мы с помощью телефона и планшета, чтобы развивать навыки письменной речи. Результаты превосходные, учится в школе очень хорошо. Общается с помощью этой же программы со слышащими родственниками. Огромный словарный запас, полностью ориентируется во времени" – рассказывает об успехах своего сына Василий.

"Идеально было бы, если что-то подобное внедряли в наших школах для глухих, потому что когда ребенок печатает слова он их очень хорошо запоминает и потом использует" – считает создатель программы Василий Киряков.

Программа Device-H запатентована в России. Запустили Android версию в 2012 году. Версию для iOS запустили в 2013. Ссылка на версию для iOS. Русских пользователей IOS версии замечено не было, американцы наоборот очень активно ей пользуются.

При относительно высокой цене в 9 долларов для Android версии и 6 долларов для IOS версии спрос стабильно хороший. Развитие приложения – непрерывный процесс, выходят новые модели, необходимо адаптировать программу.

Василий создал для русскоязычных пользователей бесплатную версию для Android .

Бесплатную версия для русскоязычных пользователей iOS

Данный материал носит сугубо ознакомительный характер.

ВОГинфо.ру

«Обмен электронными, текстовыми и мгновенными сообщениями намного упростили для меня общение с теми, кто слышит», - говорит Дон Грушкин (Don Grushkin), профессор отделения для глухих в Государственном университете Калифорнии. - Во многих отношениях мобильные технологии оказались очень полезны для сообщества глухих и слабослышащих, но, с другой стороны, они пока все еще достаточно ограничены по сравнению с теми возможностями, которые дает полноценный компьютер – ПК или ноутбук».

Сегодня смартфоны, планшетные ПК и приложения для них помогают глухим и слабослышащим делать почти все то, что могут люди без нарушений слуха: например, заказать пиццу или вызвать такси. С помощью новых технологий они находят кинотеатры, где показывают фильмы с субтитрами, а специальный софт оповещает слабослышащих о том, что кто-то звонит в дверь. В экстренных случаях софт даже может прислать уведомление о звуке пожарной сирены.

Популярные приложения для общения в Сети (например, Facetime и Skype) помогают глухонемым общаться при помощи привычного для них языка жестов и применять технику чтения по губам. «Крайне важно иметь возможность «читать речь», то есть видеть выражения лица и язык тела, - говорит Синтия Комптон-Конли (Cynthia Compton-Conley) из Американской ассоциации для потерявших слух (Hearing Loss Association of America). - Мобильные телефоны открыли нам эту возможность».

Создание коротких видеороликов с помощью таких приложений, как Instagram, Tout и Glide, - это еще один удобный способ обмена короткими сообщениями на языке глухонемых, поскольку их можно отправлять адресату напрямую или размещать в Интернете.

Еще одним важным преимуществом мобильных технологий стала возможность добавлять субтитры, получающая все большее распространение, утверждает Зейнаб Алкебси (Zainab Alkebsi) из Национальной ассоциации глухих. «Раньше субтитры были доступны только на традиционных платформах, но теперь они появляются и на мобильных телефонах благодаря таким службам, как Netflix, Hulu и YouTube… конечно, при условии, что к содержимому вообще нужны субтитры» . Впрочем, здесь еще есть простор для улучшений, так как автоматизированные программы выдают искаженный или просто не очень понятный текст. Но и удачные примеры реализации этой функции тоже существуют.