Особенности использования систем компьютерного сурдоперевода в инклюзивном образовании лиц с нарушением слуха

Министерство образования и науки Российской Федерации 

НОВОСИБИРСКИЙ ГОСУДАРСТВЕННЫЙ ТЕХНИЧЕСКИЙ УНИВЕРСИТЕТ 

 
 
 
 
 
 
 
 
ОСОБЕННОСТИ ИСПОЛЬЗОВАНИЯ 
СИСТЕМ КОМПЬЮТЕРНОГО 
СУРДОПЕРЕВОДА  
В ИНКЛЮЗИВНОМ ОБРАЗОВАНИИ 
ЛИЦ С НАРУШЕНИЕМ СЛУХА 
 
 
 
 
Утверждено  
Редакционно-издательским советом университета  
в качестве учебного пособия 
 
 
 
 
 
 
 
 
 
 
 
НОВОСИБИРСК 
2014 

УДК 004.822(075.8) 
   О-754 
 
Коллектив авторов: 
М.Г. Гриф, О.О. Королькова,  
Г.С. Птушкин, Е.В. Траулько 
 
 
Рецензенты: 
канд. техн. наук, доц. В.С. Поздняков 
канд. пед. наук, доц. О.Е. Рощенко 
 
 
Работа подготовлена на кафедре  
общих и естественно-научных дисциплин института  
социальной реабилитации НГТУ для студентов всех специальностей 
среднего и высшего профессионального образования 
 
 
О-754  
Особенности использования систем компьютерного сурдоперевода в инклюзивном образовании лиц с нарушением 
слуха : учеб. пособие / М.Г. Гриф, О.О. Королькова, Г.С. Птушкин, Е.В. Траулько. – Новосибирск: Изд-во НГТУ, 2014. – 71 с.  

ISBN 978-5-7782-2579-4 

Пособие раскрывает методические, педагогические и другие необходимые 
условия организации инклюзивного образования лиц с ограниченными возможностями здоровья по слуху с использованием систем компьютерного сурдоперевода. 
Адресовано студентам, обучающимся по направлениям 09.03.01 «Информатика и вычислительная техника», 09.02.01 «Программирование в компьютерных 
системах», а также специалистам, связанным с использованием технических 
средств в реабилитационно-образовательном процессе лиц с нарушением слуха. 
 
 
УДК 004.822(075.8) 
 
 
 
ISBN 978-5-7782-2579-4 
 Гриф М.Г., Королькова О.О., 
 
    Птушкин Г.С., Траулько Е.В., 2014 
 
 Новосибирский государственный 
 
     технический университет, 2014  

 
 
 
 
 
 
ОГЛАВЛЕНИЕ 
 

Введение ................................................................................................................... 4 

1. Особенности обучения лиц с ограниченными возможностями  
здоровья по слуху ................................................................................................ 6 

2. Подходы к инклюзивному обучению ............................................................... 19 

3. Применение систем компьютерного сурдоперевода  
в реабилитационно-образовательном процессе .............................................. 28 

3.1. Перевод русской речи (текста) на русский жестовый язык ................... 32 
3.2. Сравнительный анализ программно-аппаратных средств  
распознавания жестовой речи ................................................................. 48 
3.3. Лексические основы формирования базы жестов систем  
компьютерного сурдоперевода ............................................................... 52 

Библиографический список .................................................................................. 65 

 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

ВВЕДЕНИЕ 

В настоящее время большое внимание уделяется программноаппаратным средствам поддержки инклюзивного образования лиц с 
ограниченными возможностями здоровья по слуху. К таким средствам 
относятся и системы компьютерного сурдоперевода, которые уже в 
ближайшей перспективе позволят успешно преодолевать существующие барьеры в коммуникации между глухими и слышащими гражданами (студентами), а также ослабить проблему нехватки переводчиков 
русского жестового языка (РЖЯ).  
Актуальность данных задач определена Федеральным законом от 
30 декабря 2012 г. № 296-ФЗ «О внесении изменений в статьи 14 и 19 
Федерального закона "О социальной защите инвалидов в Российской 
Федерации"», в котором сказано: «Внести в Федеральный закон от 24 
ноября 1995 года № 181-ФЗ «О социальной защите инвалидов в Российской Федерации» (Собрание законодательства Российской Федерации, 1995, № 48, ст. 4563; 2004, № 35, ст. 3607; 2007, № 49, ст. 6070; 
2011, № 47, ст. 6608) следующие изменения: 1) в статье 14: а) часть 
вторую изложить в следующей редакции: «Русский жестовый язык 
признается языком общения при наличии нарушений слуха и (или) речи, в том числе в сферах устного использования государственного 
языка Российской Федерации. Вводится система субтитрирования или 
сурдоперевода телевизионных программ, кино- и видеофильмов. Перевод русского жестового языка (сурдоперевод, тифлосурдоперевод) 
осуществляют переводчики русского жестового языка (сурдопереводчики, тифлосурдопереводчики), имеющие соответствующие образование и квалификацию. Порядок предоставления услуг по переводу  
русского жестового языка (сурдопереводу, тифлосурдопереводу) определяется Правительством Российской Федерации»; б) в части третьей 
слова «услуг по сурдопереводу» заменить словами «услуг по сурдопереводу, тифлосурдопереводу»; в) дополнить частью четвертой следующего содержания: «Органы государственной власти и органы  
местного самоуправления создают условия в подведомственных  

учреждениях для получения инвалидами по слуху услуг по переводу с 
использованием русского жестового языка»; г) дополнить частью пятой следующего содержания: «Обеспечиваются подготовка, повышение квалификации и профессиональная переподготовка преподавателей и переводчиков русского жестового языка, развитие русского 
жестового языка» [1]. 
С целью корректного внедрения в реабилитационно-образовательный процесс систем компьютерного сурдоперевода в настоящем учебном пособии даются необходимые теоретические основы построения 
образовательного процесса для данной категории обучающихся с учетом индивидуальных психолого-педагогических особенностей и создания особой образовательной среды, которая включает в себя широкий спектр условий, нормативов, обязательств, технических средств, 
архитектурной и технической доступности и т. п.; освещаются подходы к инклюзивному обучению; рассматриваются формы и способы 
применения систем компьютерного сурдоперевода. Кроме того, данный вопрос недостаточно освещен в имеющейся учебной литературе. 
Авторы в значительной части привлекают новые результаты, в частности, технологии распознавания жестовой речи и перевода русского 
текста на РЖЯ. Рассматриваемые подходы к применению систем компьютерного сурдоперевода в инклюзивном образовании будут полезны 
как студентам, так и специалистам, связанным с использованием технических средств в реабилитационно-образовательном процессе лиц с 
нарушением слуха. 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

1. ОСОБЕННОСТИ ОБУЧЕНИЯ ЛИЦ  
С ОГРАНИЧЕННЫМИ ВОЗМОЖНОСТЯМИ  
ЗДОРОВЬЯ ПО СЛУХУ  

Основной задачей, стоящей перед российским профессиональным 
образованием, является «подготовка квалифицированного работника 
соответствующего уровня и профиля, конкурентоспособного на рынке 
труда, компетентного, ответственного, свободно владеющего своей 
профессией и ориентированного в смежных областях деятельности, 
способного к эффективной работе по специальности на уровне мировых стандартов, готового к постоянному профессиональному росту, 
социальной и профессиональной мобильности». Решение этой задачи в 
полной мере относится к профессиональной подготовке лиц из числа 
инвалидов, в том числе инвалидов по слуху. 
Многочисленные научные исследования специалистов института 
социальной реабилитации НГТУ по проблемам, связанным с профессиональной подготовкой студентов из числа инвалидов и лиц с ограниченными возможностями здоровья по слуху, выполненные в рамках 
таких проектов, как «Исследование теоретических основ и разработка 
систем организации и управления реабилитационно-образовательным 
процессом в условиях государственного образовательного учреждения 
(для инвалидов)», «Разработка нормативно-правовых и модельных 
средств поддержки специального непрерывного многоуровневого 
профессионального образования для инвалидов», «Разработка научнометодического и программного обеспечения профессионального образования ЛОВ», «Научное и научно-методическое обеспечение функционирования и развития системы образования», «Разработка научнометодического обеспечения комплекса непрерывного образования и 
реабилитации лиц с ограниченными возможностями здоровья», «Построение региональной системы профессионального образования инвалидов в условиях Сибирского Федерального Округа», а также мно

голетний опыт работы, подтверждают необходимость построения образовательного процесса для данной категории обучающихся с учетом 
индивидуальных психолого-педагогических особенностей и создания 
особой образовательной среды, которая включает в себя широкий 
спектр условий, нормативов, обязательств, технических средств, архитектурной и технической доступности и т. п. Это обусловлено особенностями психического и психофизиологического развития лиц с нарушениями слуха, основными из которых являются следующие:  
– из-за поражения слуха объем внешних воздействий на глухого 
сужен, общение с окружающими значительно ограничено. Поэтому 
компоненты психики у глухих и слабослышащих студентов развиваются в иных, по сравнению со слышащими, пропорциях. Наблюдается 
несоразмерность в развитии наглядно-образного и словесно-логического мышления, письменная речь в обеих формах (импрессивной и 
экспрессивной) приобретает большую роль по сравнению с устной; 
импрессивная форма речи превалирует над экспрессивной; 
– наблюдается отличие в темпах психического развития у лиц с 
нарушенным слухом по сравнению с нормально слышащими. Поэтому 
необходимо создание специальных условий для обучения и воспитания глухих и слабослышащих на всех этапах образовательного процесса, в том числе и на этапе профессиональной подготовки. В то же время теория сурдопедагогики утверждает, что молодые люди, имеющие 
нарушения слуха, в результате коррекционного воздействия в специальной школе к юношескому возрасту преодолевают все вторичные 
дефекты и становятся вровень в своем развитии со слышащими  
сверстниками. Точка зрения практически о неограниченных возможностях развития глухих и слабослышащих прослеживается в исследованиях ученых на протяжении всей истории существования сурдопедагогики и сурдопсихологии [2–4].  
Но исследования потенциальных возможностей глухих и слабослышащих подчеркивают необходимость поиска и разработки обходных коррекционно-компенсаторных путей в обучении лиц со слуховой депривацией [5, 6]. Анализ знаний, умений, навыков и 
компетенций выпускников школ первого и второго вида, проводимый 
специалистами ИСР НГТУ на протяжении всех лет обучения, показывает, что их уровень развития часто не соответствует требованиям 
профессионального образования. У абитуриентов, выпускников специальных (коррекционных) школ для глухих и слабослышащих детей 

наблюдаются значительные трудности в формировании учебной деятельности, ее основных компонентов: 
– учебно-познавательные мотивы не занимают ведущего места в 
системе мотивации учебной деятельности; 
– наблюдаются трудности в формировании учебных действий; 
– отмечаются затруднения в использовании теоретических знаний 
при решении практических задач, при переносе учебных действий в 
новые условия;  
– прослеживается несформированность действий контроля в учебной деятельности.  
Несомненно, одним из важных аспектов успешного обучения является сформированность у выпускников специальных школ общеучебных умений и навыков. Комплексное психолого-педагогическое обследование, проводимое специалистами ИСР НГТУ, показывает, что у 
38 % первокурсников недостаточно развиты навыки самостоятельной 
работы, 29 % не умеют планировать предстоящую работу и осуществлять ее контроль, 33 % не владеют приемами логического мышления 
(сравнением, классификацией, обобщением, приемами доказательств, 
абстрагированием). Из числа студентов, имеющих нарушения слуха, 
70 % затрудняются при конспектировании учебного материала на лекциях и во время самостоятельной работы, 30 % слабо владеют умениями и навыками работы с учебной и научной литературой. 
В связи с этим возникают педагогические и психологические трудности при обучении студентов с нарушением слуха: 
– студенты не могут одновременно воспринимать и фиксировать 
предлагаемый преподавателями материал; 
– у них отсутствуют навыки записей теоретического материала; 
– восприятие и понимание учебного материала неполное,  
– не развито умение работать с текстом, вычленять главное в прочитанном; 
– плохо развито восприятие непривычных формулировок,  
– имеются затруднения в формулировании вопросов и ответов; 
– недостаточно навыков чтения художественной и технической литературы. 
Наибольшие трудности в обучении глухих студентов вызывают 
теоретические разделы дисциплин с большим количеством понятий, 
условий, абстрактных представлений, выражений, технической терминологии. Все это доказывает необходимость дифференцированного 
подхода в организации учебного процесса в образовательных организациях системы профессионального образования.  

Неслышащие студенты испытывают трудности в обучении, связанные с их коммуникативными особенностями и навыками слухозрительного восприятия. Поэтому в учебные планы образовательных программ включены специальные коррекционные занятия по развитию 
речи. В процессе преподавания используются специальные технологии 
обучения, предполагающие индивидуальный подход к обучающимся в 
зависимости от их особенностей.  
Чрезвычайно значима для процесса обучения студентов с нарушенным слухом проблема организации педагогического общения. 
Установлено, что для успешной учебной деятельности студентовинвалидов наиболее важен прямой контакт с преподавателем. В связи 
с этим необходимо обучать педагогический состав такому взаимодействию. Так, для общения с глухими и слабослышащими студентами 
преподаватель должен изучить основы сурдопедагогики, дактильную 
речь и жестовый русский язык. Общение преподавателя и студентов с 
нарушениями слуха на начальных этапах обучения может быть крайне 
затруднительно, в том числе и из-за наличия у них психологических 
барьеров. Поэтому необходима посредническая помощь, которую может оказать тьютор. Глухие, слабослышащие могут обращаться к тьютору по вопросам устранения затруднений в усвоении профессиональных знаний по различным учебным дисциплинам. 
Необходимыми формами поддержки профессионального обучения 
студентов с ограниченными возможностями здоровья являются дополнительные индивидуальные консультации или дополнительные занятия небольшими группами. В ходе таких встреч преподавателями оказывается помощь в овладении учебным материалом. При этом 
используются различные методы, методические материалы, наглядные 
пособия и технологии обучения специальной педагогики. 
Одной из проблем профессионального образования глухих и слабослышащих является потеря информации в процессе учебной  
деятельности. Эти потери необходимо свести к минимуму. Здесь достаточно серьезной является задача организации сурдоперевода. Значительное различие между сурдопереводом на бытовом уровне и сурдопереводом в процессе профессионального образования связано, вопервых, с высоким уровнем сложности профессионального языка, используемого преподавателями, во-вторых, многообразием преподаваемых дисциплин (от технических до гуманитарных), в-третьих, отсутствием достаточного количества ставок переводчиков русского 
жестового языка в образовательных организациях. Эта проблема решается путем обучения преподавателей русскому жестовому языку, при

влечением высококвалифицированных переводчиков русского жестового языка, использованием современных средств обучения и информационно- коммуникационных технологий. 
В образовательном процессе для неслышащих студентов обязательными условиями являются: 
– прямой и обратный сурдоперевод; 
– использование опорных конспектов; 
– использование современных информационных методов обучения 
с включением компьютерных и мультимедиатехнологий; 
– развитие дистанционной формы обучения на основе сети Интернет. 
Практика применения информационных технологий в обучении 
студентов-инвалидов незаменима при решении таких сложных задач, 
как развитие алгоритмического мышления и аналитических способностей студентов, активизации самостоятельной деятельности, повышения уровня мотивации. Необходимы дальнейшие разработки по  
совершенствованию структуры и технологии проектирования электронных учебников. 
Организация образовательного процесса и специфика общения с 
людьми, имеющими нарушения развития разной этиологии, выдвигают особые требования к преподавателям, психологам, социальным педагогам, воспитателям, работающим с подобной категорией студентов. 
Образовательный процесс должен осуществляться специалистами в 
области коррекционной педагогики и специальной психологии, а также преподавателями, психологами, социальными педагогами, воспитателями, медицинскими работниками и другими специалистами,  
прошедшими соответствующую профессиональную переподготовку. 
Оптимизация процесса обучения лиц с ограниченными возможностями 
здоровья должна предусматривать построение рациональной системы 
управления и координации коррекционно-педагогической деятельности всех специалистов.  
В процессе специального профессионального образования должны 
создаваться комфортные условия обучения лиц с ограниченными  
возможностями здоровья. Предельная наполняемость групп в специальных (коррекционных) школах определена Типовым положением о 
специальном (коррекционном) образовательном учреждении для обучающихся, воспитанников с отклонениями в развитии, утвержденным 
постановлением Правительства РФ от 12 марта 1997 года № 288.  
В специальных (коррекционных) школах для глухих детей – 6 человек, 

слабослышащих детей – до 8 человек, в школах для слабовидящих и 
незрячих – до 8 человек, для детей с нарушениями опорно-двигательного аппарата – до 10 человек.  
На уровнях среднего и высшего профессионального образования не 
было нормативов наполняемости учебных групп в зависимости от 
уровней, специальностей (профессий), видов занятий и т.д. Постановление Правительства РФ от 18.07.2008 № 543 «Об утверждении Типового положения об образовательном учреждении среднего профессионального образования (среднем специальном учебном заведении)» 
устанавливает: «Численность студентов в учебной группе в средних 
специальных учебных заведениях при финансировании подготовки за 
счет бюджетных ассигнований по очной форме получения образования 
устанавливается 25–30 человек» (п. 25). Порядок организации и осуществления образовательной деятельности по образовательным программам среднего профессионального образования, утвержденный 
приказом Министерства образования и науки Российской Федерации 
от 14 июня 2013 г. № 464 предписывает: «Численность обучающихся в 
учебной группе составляет не более 25 человек» (п. 29). «…Образование обучающихся с ограниченными возможностями здоровья может быть организовано как совместно с другими обучающимися, так и 
в отдельных классах, группах или в отдельных образовательных организациях. Численность обучающихся с ограниченными возможностями здоровья в учебной группе устанавливается до 15 человек» (п. 43). 
(Об утверждении порядка организации и осуществления образовательной деятельности по образовательным программам среднего профессионального образования. Приказ Министерства образования и науки 
Российской Федерации от 14 июня 2013 г. № 464 Зарегистрировано Министерством юстиции Российской Федерации 30 июля 2013 г. 
Регистрационный № 29200). 
В декабре 2013 года Министерством образования и науки РФ были 
подготовлены документы, предписывающие организацию профессиональной подготовки студентов при наполняемости группы не менее  
15 человек по программам СПО и не мене 10 человек по программам 
высшего образования [7, 8]. Однако двадцатилетний опыт работы ряда 
вузов и техникумов, в том числе НГТУ – Федерального головного центра по непрерывному профессиональному образованию инвалидов, 
имеющих нарушения развития разной этиологии, подтверждает, что 
это условие ограничивает право инвалидов на получение качественной 
профессиональной подготовки в связи с большими потерями учебной 
информации. Мы полагаем, что на теоретических занятиях (в случаях