31.01.2010 Apple продает приложение для iPhone? способное «переводить» плач маленького ребенка.

Независимо от национальности и языка, на котором разговаривают родители, плачущие малыши во всем мире издают одинаковые по частоте и силе звуки. При этом существует 5 универсальных причин, по которым маленькие дети могут начать кричать (голод, раздражение, усталость, потрясение, скука). Каждый вид детского плача уникален и отличается от других характером звучания.

Испанские ученые-педиатры разработали программу, которая расшифровывает принимаемые через телефонный микрофон звуки, а затем выдает на экран результаты анализа. Точность такого «перевода» - 96%.

25.02.2010

Томомаса Нагасима (Муроранский технологический институт в Японии) разработал алгоритм, распознающий в тембре детского плача характерные "ноты", и позволяющий понять его причину. Использован статистический метод анализа, основанный на распознавании виртуальных образов тех или иных криков младенцев, построенных на основе набора частот и интенсивностей звуков, содержащихся в детском плаче.

Томомаса Нагасима: Мы сумели сопоставить различные образы записанных звуков детского плача с их эмоциональным состоянием, информацию о котором получили от их родителей. С помощью подобных устройств родители всегда будут точно знать, хочет ли их ребенок отдохнуть, есть, нужно ли ему поменять пеленки или он испытывает боль.

20.04.2010 Однако, дети плачут на разных языках!

Группа Катлин Вермке (Kathleen Wermke, prof. Universität Würzburg) записывала плач французских и немецких детей в возрасте от 2 до 5 дней. Для всех криков были измерены: частота основного тона и интенсивность. Оказалось, что уже 2-5-дневные младенцы плачут по-разному: у французских детей тон к концу крика поднимается, а у немецких – падает.

Катлин Вермке: Считалось, что способности ребенка к восприятию звучащей речи зависят от того, какой язык он слышал в течение последних трех месяцев до рождения. При этом плод способен воспринимать только просодические свойства языка – тон, распределение громкости, ритм и т.д. Именно они позволяют новорожденным узнавать голос матери и отличать родной язык от других. Мы предполагаем, что младенцы усваивают основные черты родного языка еще до рождения. Если бы свойства крика зависели только от дыхательного цикла, то для них был бы всегда характерен только падающий контур. Поэтому вопли младенцев оказываются в результате сложной и хорошо скоординированной работой дыхательного тракта и гортани – фактически, первой демонстрацией владения родным языком.

17.07.2013

Группа исследователей из Университета Брауна (Провиденс, США) создала прибор, который может анализировать младенческий плач, для выявления проблем в здоровье и развитии ребенка. Незаметные для человеческого уха отличия в криках ребенка могут помочь максимально рано обратить внимание на потенциальную проблему.

Ученые рассчитывают, что компьютерная программа, проводящая акустический анализ, сможет диагностировать неврологические отклонения и задержки в развитии. Прибор стал результатом двухлетнего сотрудничества Инженерной школы Университета Брауна (Brown University School of Engineering) и входящей в состав университета больницы (Women & Infants Hospital of Rhode Island). Описание разработанного устройства опубликовано в Journal of Speech, Language and Hearing Research.

В процессе работы программа делит запись младенческого плача на фрагменты продолжительностью 12,5 миллисекунд. Анализируются акустические параметры каждого фрагмента. Затем программа рассматривает более продолжительные фрагменты записи, включая соотношения криков и пауз между ними. В итоге определяется около 80 различных параметров.

Барри Лестер (Barry Lester, соавтор): Впервые звуки плача как материал для диагностики начали использовать в 1960-х годах. Тогда одно из заболеваний, обусловленных генетическим дефектом, даже получило название «синдром кошачьего крика» (Cri du chat syndrome) из-за особого плача младенца, вызванного аномалией в строении гортани. Именно тогда мы задались вопросом: не могут ли акустические характеристики плача свидетельствовать о других проблемах в здоровье ребенка.

15.03.2011 Fingual - система перевода жестов языка глухонемых в символы (разработана в университетах Осаки и Шиншу, Япония).

Fingual состоит из компьютера со специализированным программным обеспечением и особой перчатки с постоянными магнитами, закрепленными на кончике каждого пальца. Изменения магнитного поля, возникающие при жестикуляции, регистрируются магнитными датчиками и отправляются на обработку в компьютер. Полученная информация анализируется и преобразовывается в символы.

Точность распознавания жестов Fingual составляет 80–90% (для постороннего человека) и превышает 90% при настройке под конкретного пользователя.

23.07.2013 В Китае разработана система на базе Microsoft Kinect, которая в реальном времени переводит китайский язык жестов в написной текст.

Жуобин Ву6: Мы надеемся, что данная разработка поможет в повседневной жизни взаимодействовать разным людям, облегчая коммуникационный процесс для людей с ограниченными возможностями. Сейчас многие глухие люди не владеют языком жестов, еще меньше людей с нормальным слухом, кто бы мог использовать язык жестов. Именно поэтому подобные разработки помогают наладить процесс общения.

Шотландская компания Techabling ведет похожую разработку (используется любая Web-камера и специальное программное обеспечение), но здесь пока разработки еще не завершены.