Для глухих планшетник або блокнот для спілкування. Мобільні програми, які потрібні глухим людям
Такі прості дії, як телефонна розмова, спуск сходами або навіть визначення терміну придатності молока, можуть стати складними для людей з обмеженими можливостями. Тим не менш, з деякими з цих проблем можна успішно впоратися за допомогою смартфона.
Представляємо добірку мобільних програм, які роблять життя людей з обмеженими можливостями простіше.
Програми, які розпізнають мову
«Яндекс.Розмова»
Нещодавно компанія Яндекс випустила додаток, який допомагає глухим і слабким слухати спілкуватися зі знайомими і незнайомими людьми завдяки тому, що перекладає усне мовлення в текст і назад.
Програма вміє слухати та розпізнавати мову – все, що вам кажуть, відображається на екрані смартфона у вигляді тексту, а також вимовляти вголос надруковані слова.
Додаток було придумано та розроблено групою студентів МФТІ та працює на технології розпізнавання мови Yandex SpeechKit.
RogerVoice
RogerVoice – це програма, за допомогою якої глухі люди можуть розмовляти зі своїми співрозмовниками по телефону. Додаток використовує технологію розпізнавання мови для того, щоб конвертувати голос у текст, тому глухі люди зможуть читати, що каже співрозмовник.
Додаток з'явився завдякиуспішної кампанії на Kickstarter – зараз доступна бета-версія програми, яку можна завантажити на сайті RogerVoice.
Додаток, який допомагає чути
HearYouNow
За допомогою цієї програми користувачі з порушеннями слуху можуть регулювати звук залежно від ситуації, в якій вони знаходяться, громадському місці, на зустрічі і т.д. Для цього до смартфону підключаються навушники, через які подається звук із відповідними налаштуваннями для оптимізації фону або переднього плану.
Програма розроблена ExSilent, голландським виробником слухових апаратів, і розрахована на людей, які можуть використовувати слухові апаратиале поки не готові до цього.
Доброго дня!
"Хліб живить тіло, а книга живить розум" ...
Книги – одне з найцінніших багатств сучасної людини. З'явилися книги ще за давніх часів і коштували дуже дорого (одну книгу можна було поміняти на череду корів!). У сучасному світі - книги доступні всім! Читаючи їх, ми стаємо грамотнішими, розвивається кругозір, кмітливість. Та й взагалі, поки що не вигадали досконалішого джерела знань для передачі один одному!
З розвитком комп'ютерних технологій(Особливо в останні 10 років) - стала можливо не тільки читати книги, а й слухати їх (тобто читати їх вам буде спеціальна програма, чоловічим чи жіночим голосом). Я хотів би розповісти вам про програмні інструменти для озвучення тексту.
Можливі проблеми під час запису
Перш ніж перейти до списку програм, хотілося б зупинитися на поширеній проблемі та розглянути випадки, коли програма не може прочитати текст.
Справа в тому, що є голосові движки, вони можуть бути різних стандартів: SAPI 4, SAPI 5 або Microsoft Speech Platform (у більшості програм для відтворення тексту є вибір цього інструмента). Так ось, логічно, що крім програми для читання голосом - потрібен двигун (від нього залежатиме, якою мовою вам будуть читати, яким голосом: чоловічим або жіночим тощо).
Мовні двигуни
Двигуни можуть бути безкоштовними та комерційними (природно, що найкраща якість відтворення звуку забезпечують комерційні двигуни).
SAPI 4. Застарілі версії інструментів. Для сучасних ПК не рекомендується використовувати застарілі версії. Краще придивитися до SAPI 5 або Microsoft Speech Platform.
SAPI 5. Сучасні мовні движки є як безкоштовні, так і платні. В інтернеті можна знайти десятки мовних движків SAPI 5 (і з жіночим і чоловічим голосом).
Одна з самих найкращих програмдля озвучення тексту. Дозволяє вашому ПК читати не тільки прості файлиу форматі txt, але й новини, RSS, будь-які веб-сторінки в інтернеті, електронну поштута ін.
Крім того, дозволяє перетворити текст на mp3 файл (який ви потім можете завантажити на будь-який телефон або mp3 плеєр і слухати в дорозі, наприклад). Тобто. Ви можете самостійно створювати аудіо-книги!
Голоси програми IVONA дуже схожі на реальні, досить хороша вимова, не зачіпаються. До речі, програма може бути корисною для тих, хто вивчає іноземну мову. Завдяки ній можна слухати правильну вимову тих чи інших слів, оборотів.
Підтримує SAPI5, плюс до цього добре кооперується із зовнішніми додатками (наприклад, Apple Itunes, Skype).
Приклад (запис однієї моєї недавньої статті)
З мінусів: деякі незнайомі слова читає з неправильним наголосом та інтонацією. В цілому ж вельми непогано, щоб прослухати, наприклад, параграф із книги з історії, поки йдеш на лекцію/заняття – навіть більш ніж!
Балаболка
Відмінна програма для роботи з книгами: читання, каталогізація, пошук потрібної та ін. , FB2-TXT і т.д.) ICE Book Reader підтримує файли форматів: .LIT, .CHM та .ePub.
До того ж ICE Book Reader дозволяє не тільки читати, а й чудову настільну бібліотеку:
- дозволяє зберігати, обробляти, каталогізувати книги (до 250 000 тисяч екземплярів!);
- автоматичне впорядкування вашої колекції;
- швидкий пошук книги з вашої «звалища» (особливо актуально, якщо у вас багато каталогізованої літератури);
- ядро бази даних ICE Book Reader перевершує більшість подібних програм.
Також програма дає змогу озвучувати тексти голосом.
Для цього потрібно зайти в налаштування програми та налаштувати дві вкладки: «Режим» (вибрати читання голосом) та «Режим синтезу мови» (вибрати безпосередньо сам мовний движок).
Говорилка
За допомогою Sakrament Talker можна перетворити свій комп'ютер на «розмовляючу» аудіо книгу! Програма Sakrament Talker підтримує формати RTF і TXT, може автоматично розпізнавати кодування файлу (напевно, іноді помічали, що деякі програми відкривають файл із «крякозабрами» замість тексту, так ось у Sakrament Talker таке неможливо!).
Крім того, Sakrament Talker дозволяє відтворювати досить великі файли, швидко знаходити ті чи інші файли. Озвучений текст можна не тільки прослухати на комп'ютері, але й зберегти в mp3 файл (який згодом можна скопіювати на будь-який плеєр або телефон і прослуховувати далеко від ПК).
В цілому досить хороша програма, яка підтримує всі популярні голосові движки.
На цьому сьогодні все. Незважаючи на те, що сьогоднішні програми ще не можуть повною мірою (якісно на 100%) читати текст так, щоб людина не могла визначити хто це читає: програма чи людина… Але вважаю, що до цього колись програми дійдуть: потужності комп'ютерів зростають, движки зростають в обсязі (включаючи все нові і нові навіть найскладніші мовні звороти) - а значить, досить скоро звук від програми буде не відрізнити від звичайної мови людини?!
Дві студентки з пекінського університету Бейхай розробили додаток, здатний допомогти глухим людям у Китаї. Додаток отримав назву Shouyin, що буквально означає "голос рук". Воно дозволяє в режимі реального часу перекладати знаки мови глухонімих у мову.
Додаток працює спільно зі смарт-браслетом та на Наразіможе розпізнати понад 200 знаків, кожен знак був записаний тисячу разів із різних людей, щоб підвищити акуратність перекладу. Наразі відсоток розпізнавання становить 95%.
Юна Нана Ван, яка є одним із розробників, розповіла, що її надихнула глухоніма подруга, з якою вона могла спілкуватися лише через повідомлення на мобільному телефоні. У Китаї приблизно 5% населення чи 70 млн осіб є глухими. Безперечно, додаток буде мати великий успіх. Офіційний вихід програми намічено на кінець травня. В інших країнах світу вже існують подібні програми. Наприклад Uni від MotionSavvy та перекладач мови глухонімих від Google Chats.
Технології сьогодні розвиваються стрімкими темпами, у тому числі у соціальних сферах та в медицині. Вони допомагають не тільки справлятися з різними недугами, але й краще розуміти ближнього свого, навіть якщо його сприйняття світу відрізняється від вашого. Поговорити з глухонімою людиною вам допоможе спеціальна програма, тоді як VR-технології можуть допомогти, наприклад, з розумінням аутизму, а значить зблизити вас з тими, хто страждає від цього захворювання.
Різні дослідження показали, що більше 99% людей чули про аутизм, але лише 16% дійсно розуміють, що означає цей психічний стан. А за результатами опитування, проведеного у Великій Британії, понад 25% людей, які страждають на аутизм, коли-небудь просили піти з таких публічних місць, як ресторан або магазин, коли бачили симптоми їх недуги.
Щоб упоратися з цією проблемою дезінформації, британське National Autistic Society вирішило створити VR-фільм, який би допоміг усім людям дізнатися, як це – жити з подібним діагнозом. Gmbox писав про це.
Цей віртуальний ролик перенесе вас у тіло юного хлопчика, який страждає на аутизм, і покаже світ його очима. У фільмі ви зайдете в торговий центр і відчуєте на собі те величезне сенсорне навантаження, яке він відчуває, коли ходить цим багатолюдним місцем. Шум, розмаїття різних предметів, кольорів, миготіння людей, їх голоси – все це викликає у хлопчика паніку, з якою йому дуже складно впоратися.
Інше співтовариство, що вивчає хворобу Альцгеймера, також випустило VR-фільм, що дозволяє вам побувати на місці людини, яка страждає на деменцію. Фільм A Walk Through Dementia дозволить вам зрозуміти, як деякі прості повсякденні справи, на кшталт заварювання собі чашки чаю, можуть стати справжньою проблемою для власника цієї хвороби.
Ідея
Вітання! Мене звуть Віталій, я розробник та співзасновник стартапу BeWarned. З дитинства у мене дуже слабка чутка, а моя дружина не чує зовсім, я довгий час хотів зайнятися розробкою додатків і програмного забезпеченнядля тих, хто не чує і слабо чує. Всі проблеми, з якими вони стикаються, мені знайомі.
Я та моя дружина Наталія
Раніше я займався розробкою програмного забезпечення для цивільних авіаліній України, створив програму доповненої реальності SIMO. Мені завжди було цікаво все, що пов'язане із технологіями. А кілька років тому я познайомився із Сергієм Малюковим, нині нашим CEO через викладача Київського політехнічного інституту, у якого я колись навчався.
Ідея створення додатка для глухих і людей, які погано чують, прийшла до Сергія в 2013 році. Якось він прогулювався ввечері вулицею, і йому в спину почав сигналити автомобіль, Сергій швидко відскочив убік, але пара, що гуляла поруч, не зрушила з місця. Він крикнув їм услід, щоб вони відійшли, але вони залишилися на тому самому місці, де й стояли. Невдовзі Сергій зрозумів, що то була пара глухих, вони спілкувалися між собою мовою жестів. Сергій був упевнений, що є додатки, які допомагають розпізнавати небезпечні звуки. Проаналізувавши існуючі додатки та гаджети для глухих людей і не знайшовши жодного рішення, яке допомагає розпізнавати небезпечні звуки, він поставив за мету зробити таку програму. У процесі роботи до нього приєдналося кілька партнерів і зараз BeWarned знаходиться на самоінвестуванні творців стартапу.
Як тільки я почув про проект і побачив напрацювання, миттєво захопився ідеєю і незабаром став співзасновником. На даний момент я займаюся технічним розвитком стартапу.
Реалізація
У 2014 році був випущений перший прототип BeWarned з функцією Sound Monitor, яка дозволяла розпізнавати небезпечні звуки в режимі реального часу. То був перший маленький успіх. Але це був лише початок.
З дитинства мені подобалися технології, часто збирав чи розбирав щось, хотілося подивитися, що з цього вийде
За сотнями листів та відгуків було зрозуміло, що глухим людям потрібно щось більше, ніж програма, яка розпізнає небезпечні звуки. У глухих було тисячу невирішених питань, які можна вирішити. На основі цих листів та відгуків була створена платформа BeWarned, яка об'єднала 4 технічні помічники для глухих: Sound Monitor, Connect, Emergency Call і Dance.
Sound Monitor вирішує проблему безпеки, визначаючи небезпечні звуки (крик, звук клаксону автомобіля, гавкіт собаки, сирена). У разі небезпеки програма попереджає користувача вібрацією та миготінням спалаху на смартфоні. Connect допомагає тим, хто не чує у спілкуванні з оточуючими - він конвертує текст у мову і навпаки. Dance дозволяє відчути музичні треки завдяки конвертації їх у вібрацію, світлові сигнали та пульсацію візуального еквалайзера. Emergency Call допомагає користувачеві викликати тих, хто чує близьких на допомогу, коли він знаходиться в небезпечній ситуації.
Більше відео можете знайти на нашому каналі
Влітку 2016 року ми провели бета-тестування платформи у США. В результаті 88,9% користувачів повідомили, що порекомендували б додаток друзям.
Найскладнішою частиною розробки BeWarned був Sound Monitor, на розробку якого ми витратили кілька років. Програма розпізнавання небезпечних звуків виходить з нейронних мережах. Ми випробували два види нейронних мереж: класичний багатошаровий персептрон і згорткову. нейронну мережу. Але потім вирішили спробувати приховану марківську модель, вона найкраще підійшла для наших завдань.
Для того, щоб створити базу даних, на якій буде грунтуватися алгоритм, ми самі записували безліч варіантів одного виду небезпечного звуку, наприклад, сигналу автомобіля, на основі яких алгоритм розпізнаватиме звуки, що надходять, і визначати їх як відносяться до певного виду. Втім, в ході роботи у нас виникла проблема, що полягає в тому, що алгоритм розпізнавання відносив всі звуки, що надходять, тільки до існуючих категорій: сигналу автомобіля, крику, звуку поліцейської сирени і гавкання собаки. Наприклад, якщо хтось сміявся, то програма розпізнавала це як той, що відноситься до якоїсь із цих категорій. Щоб вирішити цю проблему, нам довелося сегментувати звуки, наприклад, за частотами та іншими характеристиками. Що у результаті дозволило запровадити додатковий невизначений вид звуку.
Через деякий час після випуску платформи BeWarned ми вирішили піти на важливі зміни для того, щоб покращити юзабіліті: ми всі кардинально спростили та адаптували під сприйняття глухих людей. Саме тому ми перевипустили програми окремо.
У грудні вийшов BW Dance (Android, iOS), який з функції платформи BeWarned перетворився на самостійну програму. BW Dance дозволяє людям, які не чують і погано чують, танцювати під улюблені пісні. Користувач додає улюблені пісні в плейлист, а програма перетворює музику на вібрації, спалахи та анімації на екрані. Користувач також може відчути музику за допомогою візуального плеєра. BW Dance позитивно сприйняли користувачі як в Україні, так і за кордоном.
Після цього ми випустили Connect by Bewarned (Android , iOS), додаток дозволяє спілкуватися глухим і людей, що слабо чують зі слухачами. Для того, щоб почати спілкуватися з одним або декількома людьми в додатку, потрібно лише натиснути на кнопку START і дати співрозмовнику говорити, після цього додаток перетворює мовлення в текстове повідомлення, яке зможе прочитати глуха людина Додаток також перетворює текст на мову, глухій людині потрібно написати те, що вона хоче сказати. Крім того, ми розробили набір шаблонів, які моделюють прості ситуації, що часто повторюються, наприклад, замовлення кави в кав'ярні. За допомогою цих шаблонів людина, яка не чує, може швидко повідомити щось, хто чує. Ми також передбачили можливість створення додаткових шаблонівдля персональних цілей кожної людини, яка не чує.
Результати
В Україні нам почали активно писати журналісти, про нас зняли сюжети СТБ, 1+1, 5 канал та інші. Ми побачили, що людям небайдужі нечуючі, а також переконалися в тому, що турбота про простоту та юзабіліті була кроком у правильний бік. Ми зрозуміли, що на правильній дорозі.
Я та моя дружина спілкуємося з журналістами 5 каналу
Ми запустили Connect by Bewarned на Product Hunt 30 січня і увійшли до ТОП-5 днів, а також потрапили в офіційну розсилку. У коментарях до нашого продукту на Product Hunt ми отримали пропозиції щодо допомоги у розробці локалізацій французькою та навіть фарсі. Разом із вже існуючими чотирма локалізаціями - іспанською, російською, українською та англійською, ми зможемо наблизитися до нашої глобальної мети: полегшення життя нечуючих людей.
Я переконаний, що айтішники повинні використовувати дані їм уміння на благо інших людей. Наш невеликий, але успішний досвід показує, що нові програми можуть суттєво змінити життя інших людей. Саме тому ми збираємося продовжувати працювати над ідеєю, втіленою в Connect by Bewarned: подолання бар'єрів у комунікації тих, хто не чує і чує, у світі їх близько 400 мільйонів.
Команда BeWarned ліворуч: Я, Євген, Євгенія, Іван, Юля, Сергій, Андрій, Ілона, Іра, Антон, Андрій (зараз нас ще більше, ніж на цьому фото:))
У таких людей, як я, часто виникають проблеми, коли їм потрібно поспілкуватися з людиною, що чує: поліцейським, лікарем, банкіром. Законодавчо нам гарантовані рівні права та доступ до сервісів та послуг нарівні з чуючими. Але насправді наші можливості суттєво обмежені. Саме тому ми вирішили взятися за справді глобальне завдання: створення світової електронної інфраструктури, яка полегшить доступ людей, які не чують, до всіх сервісів і послуг, які доступні людям, які чують: банкам, лікарням, таксі і т.д. На даний момент ми працюємо саме над цим завданням.
Основна проблема подібних додатків у тому, що ця ніша недостатньо розвинена. Займаючись пошуком, я переглянув понад 30 програм, і практично всі вони були розраховані на англомовну аудиторію або людей, які проживають у Європі чи США. Однак шість додатків, які представлені нижче, стали винятком і, я сподіваюся, зможуть комусь стати в нагоді.
Miracle Modus
Miracle Modus - це програма, створена розробником-аутистом. Судячи з його слів і відгуків у Play Market, додаток дійсно працює. Принцип роботи простий і складний одночасно: Miracle Modus малює різні лінії та патерни та відтворює розслаблюючі звуки, які надають заспокійливий ефект на людей, хворих на аутизм.
Diabetes Log Book
Додаток, який допомагає людям, хворим на діабет першого і другого ступеня. Сюди можна заносити всю інформацію про їжу, яку ви з'їли протягом дня. Повний звіт можна експортувати в Excel, щоб показати своєму лікарю.
Migraine Buddy
Дозволяє людям, які страждають на мігрень, аналізувати свій спосіб життя і розуміти, які фактори призводять до головного болю. Додаток також відстежує ваш сон, щоб ви бачили кореляцію між мігрень та якістю сну.
Bumps
Bumps допомагає сліпим людям вивчити Брайля шрифт. Додаток підтримує тільки англійська мова, Тому підійде лише тим, хто хоче навчитися читати не тільки російською. Крім вивчення алфавіту, Bumps можна вводити різні слова і дивитися, як вони пишуться шрифтом Брайля.
Для Android є подібна програма - Braile Guide.
Spread Signs
У Spread Signs величезна бібліотека жестів, які допомагають спілкуватися глухонімим людям. База програми налічує більше десятка мов, включаючи російську, українську та англійську. Можна вивчати як жести, що позначають окремі літери, і цілі слова.
