Это значит, что задействовать возможности мозга можно, даже если они раньше не были доступными. Сурдопедагог – это специалист, который занимается обучением чтению по губам.
Если пойти учиться к нему не получается, можно воспользоваться различными рекомендациями, а главное, тренироваться.
Научиться вдвоем читать по губам гораздо проще. Найдите компаньона, который будет читать текст с книги или журнала, пока вы смотрите на него. Пробуйте разобрать, что говорит человек. Главное, чтобы и он произносил слова четко, не издавая при этом звуков. Многие правильно задействуют губы только в процессе производства речи, а вот при имитации этого процесса допускают ошибки. Есть простое решение – возьмите наушники, наденьте их, а ваш напарник пусть читает текст шепотом.
К каждому есть свое домашнее задание, которое заключается в самостоятельном чтении текста. Нужно не просто выговаривать слова, но и учиться быстро улавливать то, как вы это делаете губами. Идеальный вариант – поставить перед собой крупное зеркало, в котором вы сможете повторять текст, видя движение губ и мимику, а также воспринимая смысл, а также техническую составляющую слов.
Как самостоятельно научиться читать по губам
- Проговаривайте алфавит перед зеркалом. Это должны быть буквы то в прямой последовательности, по алфавиту, то в виде слов и предложений.
- Если не получается читать по словам, но вы понимаете, что буквы уже в состоянии различить, перейдите к промежуточному уроку – проговаривайте у зеркала слоги.
- Вспомните, какой фильм или сериал вы уже смотрели, но он вам настолько понравился, что повторный просмотр вас только порадовал бы. Прекрасно, включите запись, сначала со звуком, потом отключите и его. Пробуйте читать по губам. Зная, какой смысл вложен в слова, вам будет проще понимать их. А движение губ в данном случае станет подсказкой, что также полезно в процессе обучения, пока вы полноценно не умеете воспринимать точную информацию из уст.
- Учитывайте эмоции. Если не всегда речь понятна только по губам, то в комплексе с мимикой легко определить хотя бы то, в каком русле говорит человек, негативное это или позитивное, реальная история или юмор, какие ощущения он испытывает.
Ежедневно тренируясь хотя бы по полчаса-часу, вы научитесь читать по губам примерно за месяц-два.
Командир Дэйв Боумен и второй пилот Фрэнк Пул, не доверяя компьютеру, решили отключить его от управления кораблём. Для этого они совещаются в звукоизолированной комнате, но HAL 9000 читает их разговор по губам. Кадр из фильма «Космическая одиссея 2001 года»
Чтение по губам играет важную роль в общении. Ещё эксперименты 1976 года показали, что люди «слышат» совершенно другие фонемы, если наложить неправильный звук на движение губ (см. "Hearing lips and seeing voices" , Nature 264, 746-748, 23 December 1976, doi: 10.1038/264746a0).
С практической точки зрения чтение по губам - важный и полезный навык. Можно понимать собеседника не выключая музыку в наушниках, читать разговоры всех людей в поле зрения (например, всех пассажиров в зале ожидания), прослушивать людей в бинокль или подзорную трубу. Область применения навыка очень широка. Освоивший его профессионал без труда найдёт высокооплачиваемую работу. Например, в сфере безопасности или конкурентной разведке.
У автоматических систем чтения по губам тоже богатый практический потенциал. Это медицинские слуховые аппараты нового поколения с распознаванием речи, системы для беззвучных лекций в публичных местах, биометрическая идентификация, системы скрытой передачи информации для шпионажа, распознавание речи по видеоряду с камер наблюдения и т.д. В конце концов, компьютеры будущего тоже будут читать по губам, как HAL 9000 .
Поэтому учёные уже много лет пытаются разработать системы автоматического чтения по губам, но без особого успеха. Даже для относительно простого английского языка, в котором количество фонем гораздо меньше, чем в русском языке, точность распознавания невысока.
Понимать речь на основании мимики человека - сложнейшая задача. Освоившие этот навык люди пытаются распознавать десятки согласных фонем, многие из которых очень похожи внешне. Неподготовленному человеку оcобенно трудно различить пять категорий визуальных фонем (то есть визем) английского языка. Другими словами, различить по губам произношение некоторых согласных звуков практически невозможно. Неудивительно, что люди очень плохо справляются с точным чтением по губам. Даже самые лучшие среди инвалидов по слуху демонстрируют точность всего лишь 17±12% из 30 односложных слов или 21±11% из многосложных слов (здесь и далее результаты для английского языка).
Автоматическое чтение по губам - одна из задач машинного зрения, которая сводится к покадровой обработке видеоряда. Задача сильно усложняется низким качеством большинства практических видеоматериалов, которые не позволяют точно считывать спатиотемпоральные, то есть пространственно-временные характеристики лица во время разговора. Лица двигаются и поворачиваются в разные стороны. Последние разработки в области машинного зрения пытаются отслеживать движение лица в кадре, чтобы решить эту проблему. Несмотря на успехи, до последнего времени они были способны распознавать только отдельные слова, но не предложения.
Значительного прорыва в данной области добились разработчики из Оксфордского университета. Обученная ими нейросеть LipNet стала первой в мире, которая успешно распознаёт по губам речь на уровне целых предложений, обрабатывая видеоряд.
Покадровые карты салиентности для английских слов "please" (вверху) и "lay" (внизу) при обработке нейросетью, которая читает по губам, выделяя наиболее привлекающие внимание (салиентные) признаки
LipNet - рекуррентная нейросеть типа LSTM (long short-term memory). Архитектура показана на иллюстрации. Нейросеть обучали с использованием метода нейросетевой темпоральной классификации (Connectionist Temporal Classification, CTC), который широко используется в современных системах распознавания речи, поскольку с ним отпадает необходимость обучения на наборе входных данных, синхронизированным с правильным результатом.
Архитектура нейросети LipNet. На входе подаётся последовательность кадров T, которые затем обрабатываются тремя слоями пространственно-временной (спатиотемпоральной) свёрточной нейросети (STCNN), каждый из которых сопровождается слоем пространственной выборки. Для извлечённых признаков повышается частота дискретизации по временной шкале (апсемплинг), а затем они обрабатываются двойной LTSM. Каждый временной шаг на выходе LTSM обрабатывается двухслойной сетью прямого распространения и последним слоем SoftMax
На особом корпусе предложений GRID нейросеть показывает точность распознавания 93,4%. Это не только превышает точность распознавания других программных разработок (которые указаны в таблице ниже), но и превосходит эффективность чтения по губам специально обученных людей.
Особый корпус GRID составлен по следующему шаблону:
command(4) + color(4) + preposition(4) + letter(25) + digit(10) + adverb(4),
Где цифра соответствует количеству вариантов слов для каждой из шести словесных категорий.
Другими словами, точность 93,4% - это всё-таки результат, полученный в тепличных лабораторных условиях. Разумеется, при распознавании произвольной человеческой речи результат будет гораздо хуже. Не говоря уже об анализе данных с реальной видеосъёмки, где лицо человека не снимают крупным планом в отличном освещении и с высоким разрешением.
Работа нейросети LipNet показана на демонстрационном видео.
Еще очень давно секретные агенты практиковали чтение по губам, чтобы уметь понимать речь противника даже если его плохо слышно. В настоящее время обладать подобным умениям разрешено не только шпионам. Человек может использовать такую возможность в каких-либо собственных целях: подражать понравившемуся актеру из фильма или понимать собеседника без слов.
Чтобы обладать навыками считывания с губ, следует уметь концентрировать свое внимание и вовремя сосредотачиваться, уметь понимать артикуляцию звуков и иметь желание, терпение и усидчивость.
Для чего человеку нужно восприятие артикуляции звука
Что такое артикуляция? Это своеобразное расположение органов, которые участвуют при образовании какого-то конкретного звука. Если вы хотите научиться читать по губам, то вы должны знать шаги этой самой артикуляции:
- Подготовка к выходу звука.
- Произношение звука.
- Окончание произношения – переход к появлению следующего звука.
Подобная информация пригодится в том случае, когда вам понадобится отличать движение губ при разговоре.
Как самостоятельно научиться читать по губам
В наше время многие ученые и специалисты стремятся модернизировать программы, дающие возможность глухим людям понимать речь человека глазами. Возможно, такое умение для здорового человека останется лишь кратковременным увлечением, а возможно и поможет в какой-либо жизненной ситуации или после потери слуха.
Существует несколько методов обучения, которые можно практиковать в любом месте. Стоит рассмотреть их более подробно.
- Практические занятия с сурдопедагогом. Несмотря на то, что эти специалисты обучают детей, записаться на консультацию может каждый желающий. На уроках получится читать звуки с губ и научиться сурдопереводу.
- Наблюдение за поведением людей. Этот вариант актуален в парке, кафе, университете, на лавочке у подъезда. Стоит лишь определиться на конкретном объекте «слежки» и, не подавая вида, следить за его губами при разговоре.
- Просмотр телевизора. Попробуйте поставить очень знакомый вам фильм и просмотреть его без звука. Наблюдайте за губами актеров и понимайте, о чем они ведут речь. Изначально вам помогут запомнившиеся ранее фразы. Затем включите незнакомое кино и снова выключите звук. Старайтесь вникать в смысл фильма и понимать, о чем разговаривают герои. Здесь подсказками могут служить субтитры.
- Использование зеркала. Осваивать новые знания возможно и при помощи зеркального отражения. Вам нужно стать перед зеркалом и проговаривать отдельные слова, а уже после целые предложения. Очень важно обращать внимание на свой рот, и запоминать движения губ при произношении конкретных букв.
- Работа с партнером. Этот вариант предусматривает помощь супруга или друга. Помощь человека быстрее всего может обучить чтению по губам, если он будет губами беззвучно говорить слова, которые вы должны прочесть. Если вы чувствуете, что у вас это получается, то переходите на произношение предложений.
В чем отличие видимых звуков от невидимых
Звуки, при выходе которых губы вычерчивают определенное движение, называются видимыми. К невидимым же относятся те звуки, которые невозможно понять с одного раза, ибо они представлены практически идентичным положением губ.
Идеально овладеть чтением по губам получится только тогда, когда вы будете ежедневно прилагать для этого усилия, ведь никто не говорит, что будет легко. Первым делом тренируйтесь на знакомых и родных людях, а уже потом оттачивайте умения на прохожих и соседях по креслам в метро.
Но стоит помнить о том, что все люди разные и не каждый сможет научиться тому, что другому дается с легкостью.
Видео: учимся читать по губам
У каждого человека есть способности, которыми он в обычной жизни не пользуется, так как они ему не нужны. Например, чтение речи по губам – этой способностью, в той или иной степени, обладают все люди, но пользуются единицы, так как слух делает этот навык, по мнению большинства, ненужным. Люди, лишенные слуха с рождения или в результате несчастного случая, эту способность развивают и оттачивают, так как для них это жизненно необходимо. Однако чтению по губам могут найти применение и обычные люди, например, при общении в шумном, людном месте или на экзамене, когда разговаривать нельзя.
Способы как научиться читать по губам
Простейший способ научиться чтению по губам – это взять несколько уроков у сурдопедагога, который на уроках поможет вам освоить это искусство.
Также, обучиться читать по губам можно и дома, для этого вам понадобиться, перед зеркалом, четко проговорить алфавит. В процессе урока отмечайте буквы, которые легко читаются – это Б, М, П и т.д., и те, которые читаются довольно сложно. После того как вы проработаете алфавит, переходите к проговариванию и запоминанию сочетаний букв. Слоги, которые легко читаются по губам: ФА, ФО, ФЫ, ФУ, ПА, ПО, ПЫ, ПУ, ША, ШИ, ШО, ШУ.
После того, как вы научитесь читать слова перед зеркалом, то приступайте к следующему упражнению: освоить науку как читать по губам поможет просмотр хорошо знакомого фильма без звука. Для упрощения упражнения можете вначале включить запись с субтитрами. Кроме простого чтения по губам, постарайтесь отточить умение читать по лицу, так как на лице всегда отражаются эмоции, которые в данный момент испытывает говорящий. Комплексное чтение по губам и по лицу поможет вам лучше понимать смысл сказанного.
В освоении искусства чтения по губам вам могут помочь домашние и друзья. Попросите кого-нибудь из них каждый день, недолго, заниматься с вами: четко произносить одними губами словосочетания и предложения, а вы тем временем будете стараться понять смысл сказанного.
Учиться чтению по губам можно в любом месте и в любое время – на улице, на работе, в столовой, кафе, метро - просто наблюдая за находящимися в поле вашего зрения людьми: следите за движениями их губ, за выражением лица и пытайтесь «прочитать» то, о чем они говорят.
В качестве тренажера «чтения по губам» можете использовать компьютерную программу ReadmyQuips, которая состоит из аудио и видео уроков.
adminВсе мы пользуемся возможностями собственного мозга только на несколько процентов. На деле же у нас немало возможностей, что никак не применяются. Умением читать по губам обладает каждый из нас, его требуется развивать. Таким образом, люди, что плохо слышат или вовсе не слышат, наделены данным умением с рождения. Если проблема со слухом возникает не сразу, а с возрастом, то это умение развивают, поскольку оно играет серьезную роль в сфере взаимодействия с людьми.
Помимо этого, подобное умение может немало пригодиться в жизни не только слабослышащим людям. Потому попробуем разобраться, как его развивать.
Как изучить азы
Итак, попробуем понять, как изучить азы навыка чтения по губам. Наиболее подходящий способ – это обучение у сурдопедагога. Подобные уроки помогают овладеть подобной техникой целиком.
Когда возможности обратиться к специалисту нет, то подобные навыки возможно получить самостоятельно. Все звуки делят на невидимые и видимые. К последним относятся те, в ходе произношения которых, губы становятся в четкое положение. К невидимым относят те, что сложно понять сразу:
станьте перед зеркалом. Шевелите губами и четко произносите буквы. Здесь важно обозначить те, чье звучание похоже;
когда вы научитесь их различать, переходите к проговариванию слогов и их запоминанию. Существуют такие, что сложно различить: «пу», «фа», «шу», «фо», «ша», «па». Именно их произношение требуется запоминать;
затем, после освоения слогов и букв, переходите к новому этапу – учитесь читать по губам других людей. Для этого подойдет запись известного кино или передачи. Смотрите ее без звука, уделяя внимание движениям рта. Чтобы упростить задачу, можно сначала включать субтитры.
Тренировки перед зеркалом – это один из этапов обучения. Самым простым способом станет обращение к сурдопедагогу. Но если возможности нет, то занимайтесь самостоятельно.
При подобном чтении требуется обращать внимание на движения лица, поскольку на нем показывается немало информации. Это поможет воспринимать данные. Брови выражают удивление и ужас и т.п.
Как быстро освоить навык
Чтобы быстрее освоить навык, обратитесь за помощью к друзьям и близким. Требуется, чтобы люди произносили перед вами выразительные фразы и слова без звука, а вы пытайтесь определить, что вам говорят.
К слову, просить кого-то о помощи не обязательно. Осваивать подобное умение можно в любом месте: в кафе, метро, в офисе, на прогулке наблюдайте за движением рта других людей, старайтесь понять, что они говорят.
Человек, который бегло читает по губам, должен легко понимать, о чем рассказывают герои кино, если смотрит их без звука. Итак, краткая инструкция, для скорого запоминания:
дабы научиться чтению по губам, проводите занятия с телевизором. Выключайте звук и наблюдайте за лицами героев. Обращайте внимание, что определенные звуки легко прослеживаются. Среди них: «М», «Б» и «П»;
теперь включайте субтитры, пробуйте читать по губам, периодически сверяясь с текстом;
Смотрите без звука знакомые фильмы и телепередачи. Это наиболее простой способ изучить мимику.
Артикуляция звуков
Под понятием артикуляция звуков понимается положение органов, которые требуются для создания каждого отдельного звука. Человек, который хочет научиться чтению по губам, должен уметь различать этап артикуляции: подготовка к звуку, его произношение и завершение. Последний этап – это еще и переход к новому звуку. Это требуется потому, что в ходе практики проще различить расположении губ.
Скорее всего, при взгляде на глухонемых людей, вы всегда не могли понять, как же они читают слова. Даже, если вы находитесь в наушниках, вы запросто поймете некоторые фразы, произносимые людьми. Примером может стать даже просьба снять наушники.
Если постоянно заниматься собой, каждый день уделять время занятиям перед зеркалом, то уже скоро вы запросто отличите «ля» от «фа». Уровень понимания чтения зависит от нескольких элементов:
в первую очередь – грамотное владение речью. Без этого невозможно научиться чтению по губам. Если вы не знаете слов, то как вы их прочитаете;
другое важное условие – это догадка. Она поможет распознать слова, когда сложно понять что-то по губам. Если человек не слышит, то из 5 слов он понимает 2-3, но остальные он распознает по контексту, смысловой связи, теме беседы;
каждый человек шевелит губами по-своему. Кто-то говорит, почти не открывая рот, потому понять его непросто. Лучше, если человек активно артикулирует, а его мимика выражает эмоции. Примером хорошей артикуляции служит разговор людей, которые стараются перекричать шум. Это активная артикуляция, она важна для восприятия данных;
Этапы артикуляции важно распознавать. Они помогут определить звуки и слоги по губам.
распознать речь помешают даже усы.
Обычно, даже хорошо обученные люди, обладающие опытом в этом, не способны долго читать по губам. К примеру, лекция спустя 15 минут уже не воспринимается, как положено, утрачивается смысловая цепочка, тяжело удержать уровень восприятия речи, потому снижается производительность.
Даже среди слабослышащих личностей мало людей, что умеют читать по губам в совершенстве. Только некоторые способны читать в любом месте и в любое время, вне зависимости от артикуляции человека. Обычно, глухие люди понимают разговор в пределах 20-50%. Но данное умение полезно и слабослышащим, а также тем, кто желает освоить его для развития личности и получения дополнительных навыков.
Напоследок, выделим основные советы в ходе овладения данным навыком:
сначала вам будет сложно понимать предложения, ведь многие слова напоминают друг друга. Вам важно понять слово, основываясь на смысле предложения;
если вы смотрите ТВ, то смотрите на реальных людей, а не мультфильмы, потому что у них нет реалистичных движений мимики;
, которые смотрели раньше, но теперь без звука. Старайтесь повторить слова актеров, глядя на их губы. Помните, что если вы текст знаете наизусть, то просмотр такого видео без звука не поможет в освоении навыка;
если люди кричат, то сложно понять, что они говорят, т.к. меняется артикуляция;
при просмотре видео на ПК, периодически отключайте звук, чтобы постараться разобрать слова;
тренируйтесь на знакомых и незнакомых людях. Обращайте внимание на артикуляцию звуком людьми в транспорте, на улице и т.д.;
не опускайте руки. Для овладения умением потребуется время;
попробуйте найти распечатку слов из передачи или кино, что собираетесь посмотреть. Так вы проследите за текстом, в случае, когда не разберете слова.