助听器对听障学生唇读汉字语音识别的作用

助听器对听障学生唇读汉字语音识别的作用 助听器对听障学生唇读汉字语音识别的作 用 1442心理科学PsychologicalScience2006.29(6):1442—1443 助听器对听障学生唇读汉字语音识别的作用 雷江华?甘琳琳.方俊明 (华中师范大学教育科学学院.武汉,430079)(南京师范大学教育科学学院.南 京.210024) (华东师范大学特殊教育研究所.上海,200062) 摘要本研究探讨了听觉障碍学生唇读语音识别中助听器和音素可见性的影响.结 果表明.助听器与音索可见性之交互作 用在正确率上表现显着,在反应时上不显着.音素可见性在唇读语音识别过程中作 用明显,助听器明显作用于单韵母,复韵母的 语音识别过程: 关键词:听障学生唇读语音识别助听器 1引言 唇读是指"聋人利用视觉信息,感知言语的一种特殊方 式和技能.看话人通过观察说话人的口唇发音动作,肌肉活 动及面部表情,形成连续的视知觉,并与头脑中储存的词语 表象相比较和联系,进而理解说话者的内容"….研究发现, 聋人通过唇读进行语音识别的效果受到音素的可见性程度 之限制2J.Berstein等人(1998)研究发现,听力辅助设备使 用的频率与唇读技能显着相关,表明越是经常使用听觉辅助 设备就越具有较好的唇读能力].本实验试图通过实验研 究来探讨助听器与音素可见性对听觉障碍学生唇读语音识 别的影响. 2方法 2.1被试 选取武汉两所聋校和湖北省康复中心115名听觉障碍 学生为实验被试.其中,配戴助听器学生55人,未配戴助听 器学生6O人.配戴助听器组包括男生23人,女生32人;听 力损失程度平均为87.29分贝,标准差为14.43;配戴助听器 的平均时间为9.27年,标准差为4.O5;被试平均年龄为 l3,59岁,标准差为4.36.未配戴助听器组包括男生28人, 女生32人;听力损失程度平均为93.87分贝,标准差为 16_87,被试的平均年龄为l4.79岁,标准差为3.45. 2.2实验设计与材料 采用2×3两因素混合实验设计.被试问变量为被试类 型,有两个水平:配戴助听器与未配戴助听器的听觉障碍学 生;被试内变量为音紊水平:声母,单韵母,复韵母. 实验材料中的全部汉字选白全日制九年义务教育全国 统编教材小学语文课本第1—2册和聋校第1—2册教材. 实验材料分为三组:声母测试组,单韵母测试组,复韵母测试 组,每组包括6个目标识别音索,每个目标识别音素提供8 个单字识别口形.在目标音素中,目标声母中分别含有/b/, /z/,h/,/eh/,/q/,/k/,目标单韵母中分别含有/a/,/o/, /e/,/,/u/,/fi/,目标复韵母中分别台有/ai/,/uo/,/ie/, /an/,/ong/,/ao/.实验材料的口形由一名普通话水平达到 国家普通话甲级标准的女性教师通过朗读提供,经由索尼摄 像机录制并剪辑而成. 2.3实验程序 实验在586计算机上进行,实验程序采用 AUTHORWARE软件编制而成. . 实验开始前,主试帮助被试打开测试软件,并帮助被试 填写显示器中央窗口要求被试填写的个人信息个人信息 填写完整并且正确,点击"确定"按钮,进入测试阶段. 测试过程中测试材料以随机的方式呈现并施测.每组 测试之前首先分别提供了指导语与示例操作,被试认真阅读 指导语并确定已经掌握了操作规则后,实验正式开始.例 如,声母测试组的指导语为:请你注意看屏幕上左边讲话者 所读汉字的口形,然后回答这个口形是否包含屏幕上右边声 母的发音,如果含有这个声母的发音,就用鼠标点击按钮 "有",如果没有这个声母的发音,就用鼠标点击按钮"无" 例如,现在给出的第一个汉字"普"的口形,其中含有声母"/ p/''的发音,用鼠标点击按钮"有"即可;屏幕上显示的第二个 汉字"不"的口形,其中不含有声母"/p/"口形,用鼠标点击按 钮"无"即可.依此类推. 测试结束后,计算机软件程序自动记录声母,单韵母,复 韵母识别的平均正确率与平均反应时,运用SPSS12.0软件 系统进行统计. 3结果 表1呈现了配戴助听器与未配戴助听器听觉障碍学生 唇读汉字口形识别声母,单韵母,复韵母的正确率,反应时的 平均数与标准差. 3.1两类被试唇读语音识别正确率结果分析 配戴助听器与未配戴助听器听觉障碍学生在不同音紊 水平上正确率的多元方差分析显示,音素水平与助听器之间 的交互作用最着(F(2,226)=16.384,声:0.000)(见图1). 配戴助听器与未配戴助听器之间的主效应显着(F(1,113)= 19.610,P=0.000);音紊水平之间的主效应显着(F(2,226) =107.915,P=0.000),通过事后检验分析发现,声母与复韵 母之间的差异显着(F(1,113)=66.566,声=0.000),单韵母 ?本文是国家"十五"一般课题(项目号为BBA010053)"和上海市哲学社会科学"十 五"规划课题(项目号为OlAJYOO4)"研究成果之一,得 到了华中师范大学"丹桂计划"项目资助. ??通讯作者:霄江华,男.E.mail:huajianglei@mhu.com 雷江华等:助听器对听障学生唇读汉字语音识别的作用l443 衰1两类被试唇读语音识别的正确率与反应时{s) 与复韵母之间的差异显着(F(1,113):56.344,P=0.000), 声母与单韵母之间的差异显着(F(1,113)=172.974,P= 0.000). 语 上 【J 识 别 正 确 童 声母单韵母复韵母 图1配戴助昕器与未配戴助听器听障学生唇读汉字语音识别比较 为了获得更细致的研究结果,控制音素的不同水平进行 简单效应分析发现,配戴助听器与未配戴助听器听障学生在 唇读声母识别上效应不显着(F(1,113)=2.775,P=0.099), 而在单韵母识别水平,复韵母识别水平上效应显着(F(1, 113)=22.545,P=0.000;F(1,113)=21.517,P=0.000). 3.2两类被试唇读语音识别反应时结果分析 两类被试唇读语音识别反应时的方差分析表明:音素水 平与助听器之间交互作用不显着(F(2,226)=0.021,P= 0.979).配戴助听器与未配戴助听器之间的主效应不显着(F (1,113)=0.899,P=0.345);音素水平之间的主效应显着(F (2,226)=28.658,P:0.000),通过进一步分析发现,声母与复 韵母之间的差异显着(F(1,113)=25.699,P=0.000),单韵母 与复韵母之问的差异不显着(F(1,113)=3.242,P=0.074), 声母与单韵母之间的差异显着(F(1,113)=36.933,P= 0.000). 4讨论 4.1音素的可见性在唇读语音识别中的作用 听觉障碍学生在不同音素水平之间的唇读效果存在极 其显着的差异,识别正确率从高到低依次为单韵母,复韵母, 声母,识别反应速度从快到慢依次为单韵母,复韵母,声母. 这说明音素的可见性在听障学生唇读语音识别过程中发挥 很强的作用.在唇读语音识别中,单韵母与声母识别正确率 与反应时差异显着源于由元音构成的单韵母可见性程度高, 而由辅音构成的声母可见性程度低,导致了单韵母识别既快 又准确;复韵母与声母识别正确率与反应时差异显着源于声 母的可见性程度低,而复韵母前元音的可见性发挥了较强作 用,导致声母识别既慢又容易出错;复韵母与单韵母之间正 确率差异显着而反应时差异不显着,说明了由元音与元音, 元音与鼻音组合而成的复韵母因发音的延长在一定程度上 增加了唇读语音加工的难度,但对速度的影响不大.可见, 听障学生唇读语音识别的难点在声母,因此,提高听障学生 唇读的效果需要着眼于唇读声母的训练,鉴于声母的可见性 程度低,可考虑构建唇读声母训练的辅助支持策略,如视觉 上的手指语辅助,听觉上的助听器辅助,触觉上的触觉辅助 器等[,引. 4,2助听器在唇读语音识别中的作用 实验结果发现,助听器的使用对听觉障碍学生唇读语音 识别的影响是存在的,但这种影响显着表现在单韵母,复韵 母的识别上.这说明,助听器的使用对听觉障碍学生唇渎语 音识别的影响受到音素可见性与语音清晰度的制约.配戴 助听器听觉障碍学生识别单韵母,复韵母的正确率显着优于 未配戴助听器的听觉障碍学生,主要源于配戴助听器的学生 利用了从听觉通道获得的元音信息支持了唇读单韵母,复韵 母识别过程,因为通过助听器,听觉障碍者,特别是在l000 赫兹甚至更高频段上听力损失急剧下降的听觉障碍学生, "元音能被精确地听到,其次是浊辅音,清辅音可能根本就听 不到"】.尽管配戴助听器听觉障碍学生与未配戴助听器的 听觉障碍学生识别声母的正确率不存在显着差异,但是配戴 助听器听觉障碍学生识别的正确率低于未配戴助听器听觉 障碍学生,其中的原因可能是"大多数助听器并不能精确地 发出高频音(如s,sh,f,th,P,k,t),且许多助听器因功能 所限甚至不能识别浊辅音(如d,z,g,b等)"_5],听觉信息的 受阻或不清晰不但未能支持唇读声母识别,而且可能干扰了 声母识别过程.正如有研究者所指出的,"所有的助听器有 一 定的物理局限性.就是配戴最好的助听器,他也不可能精 确地感知所有的辅音"】. 5结论 助听器与音素可见性共同交互作用于听觉障碍学生唇 读语音识别过程: 5.1音素的可见性在听觉障碍学生唇读语音识别过程中发 挥了很大的作用,表现为配戴助听器与未配戴助听器的听觉 障碍学生识别单韵母的正确率显着高于复韵母,识别复韵母 的正确率显着高于声母,而识别反应时速度从快到慢依次为 单韵母,复韵母,声母. 5.2助听器辅助唇读语音的作用在单韵母,复韵母识别过 程中得到了明显的体现,表现为配戴助听器的听觉障碍学生 识别单韵母,复韵母的正确率显着高于未配戴助听器的听觉 障碍学生,而在声母识别中作用不显着. 6参考文献 1朴永馨.特殊教育辞典.北京:华夏出版社.1996:188 2雷江华,张凤琴,方俊明.字词条件下聋生唇读汉字语音 识别的实验研究.中国特殊教育,2004,53(11):37—39 3雷江华,王庭照,方俊明.聋生唇读语音识别中熟悉效应的 实验研究.心理科学,2005,5:1119—1121 (下转第1463页) 卿素兰等:4—7岁儿童对人的目的指向行为的归因研究l463 743 intentkma[aclionChildDevelopment.1978.49:736— i0Shukz)[alninghantanmovementsandactions:Childrens mders'.andmg0ftheLimitsofpsychologicalexplanation.Cognition. 1797,62:29l一324 11CsibraG,&Oergely.G.Theteleologicaloriginsofmentalistic actionexplanations:adevelopmentalhypothcsi*.Developmental ienre.1998.1:255—259 1Wellman,HMI'hechild'stheoryofmindCambridge,MA: MITPress.1990 13卿索兰,罗杰,方富熹.儿童核心领域朴索"理论"的研究进展.心 理科学.2005.28(2) 14FryeD.Theoryofmind,domainspecificityandreasoning.In:Peter Mitchell,RiggsKJ.(Eds.).Children'sreasoningandthemind. PsychologyPress.2000:149—168 15WeUman.TheEmerginenceofCoreDomainsofThought;Children's ReasoningAboutphysical,PsychologicalandBiologicalPhenomena. In:HenryM.Wellman&KayokoInagaki(Eds.).New DireetionsforchildDevelopment.No.75.SanFrancisc0.1997 AnInvestigationof4—7-Year-OldChildren'sAttribution 0fHumanGoa1.directedAction QingSulan,FangFuxi. (ChineseNationalInstituteforEducationalScience,Beijing.100088) (InstituteofPsychology,ChineseAcademyofScience,Beijing,100101) AbstractThisarticleprobes4-7一 yearsoldchildren'scauseattributionofhumanbeings'goal-directedactionwiththreekindsof cart(xon8eltingsshownonthecomputer,basichumanbiologicalneedsofeating,drinkingandsleeping.Theresultsshow(1)the presch~*:}lershavenonpsychologicalattr~butionofhumangoa1.directedactionofbiologicalneeds,thereisafastperiodduringfrom4一 year—okisto5-year— olds;(2)therearedifferencesinchildren'scauseattribution;socialfactorswillinfluencesuchbiologicalneedsas " eating"and"sleeping",butdrinkingisapurebiologicalneedandisnotinfluencedbysocialfactors;(3)thepreschoolersexplain humanbie~logicalneedactionbyflexiblemuhiplecauseattribution. Keywords:children.goal— directedaction.naivepsychology.naivebiology.cognitiondevelopment (上接第l443页) 4RuthCampbel1.BarbaraI~odd,&DenisBurnham.Hearingbyeye 11:,,fi,aueesinthePsychologyofSpeeehreadingandAuditory—visual TheEffectofHearing PhoneticIdentificati0n0f Speecb.EastSussex:Psychologies1Press.1998:217 5JanetJeffers.Margaret.[~rrleySpeechreading.Si~ringfield BannerstoneHouge.1976:8一l2 AidontheLipreading HearingImpairedStudents .『iangkua一,(jLlngling,fangJunming (CollegeofEducationalScience.HuaZhongNormalUniversityWuhan.430079) (OAlegeofE小"?ational~'ience,NanjingNormalUniversity,Nanjing,210024) (SIecialEducationalInstitute,EastChinaNormalUniversity,Shanghai.200062) AbstractOurexplorationofthehearingaideffectandthevisemeeffectontbedeafinlipreadingphoneticidentificationobtainedthe followingresults:Theinteractionofthedegreeofhearingaidandthedifferenceofphonemesissignificantincorrectness,butnotin responsetime.Thevisibilityplaysanimportantroleinphoneticidentification,whilethehearingaidhasasignificantfunctioninthe identificationofsinglevowelsandcompoundvowels. Keywords:bearing—impairedstudents.1ipreading.phoneticidentification,hearingajd