【プレスリリース】耳を澄ませて声を「聴く」日本人 相手の口を注視する英米人との違い明らかに－視線や脳波からみた言語・文化の影響 | 日本の研究.com
https://research-er.jp/articles/view/51199


（概要説明）

熊本大学文学部認知心理学研究室の積山薫教授、久永聡子研究員と、同大学院先端科学研究部医用福祉工学分野の伊賀崎伴彦准教授、村山伸樹名誉教授の研究チームは、目の前の相手の話を聞く際、日本人は声を聴くことに集中しており、まず相手の口を見てから声の聞き取りへと進む英米人とは、情報処様式が大きく異なることを明らかにしました。日本人の特徴を示す世界的にユニークな研究に、視線パターンや脳波による新たな知見が加わりました。


（説明）

対面で人の話し声を聞き取る際、口の動きについての視覚情報が音声の聞こえに影響を及ぼすことが知られています。自然な会話なら、例えば騒音下ではの動きが見えるほうが聞き取り成績は良くなるし、逆に、ムービーの吹き替えで声とは矛盾する口の動きの動画を同期させると、「マガーク効果」という錯聴現象（矛盾する口の動きに引きずられ音声トラックの音とは違う音に聞こえる現象）が生じます。ところが、日本人の場合には、視覚情報の影響（マガーク効果）が英語圏で報告されているほどは強くないことが、積山教授らの先行研究で分かっていました。しかし、脳の情報処理のどの段階でそような日本人の「聴覚重視」が生じるのかは、わかっていませんでした。

そこで、この点を明らかにするために、熊本大学の研究チームが、熊本大学の学生（日本語母語者）と留学生（英語母語者）を対象に、それぞれの群で20名程度ずつ、視線パターン、脳波、音声判断速度などを調べました。その結果、まず、声と口の動きが一致している自然な音声の場合、英語母語者では音が始まる前から視線が話者の口に集中しているのに対して、日本語母語者では視線が分散しており、口への集中は見られませんでした。そして、英語母語者では、音声のみの聴覚条件よりも口の動きが伴う視聴覚条件の方が音声判断が速くできたのに対して、日本語母語者では逆に、視聴覚条件で遅くなる結果が得られました。脳波の推移を1000分の1秒単位で観察して音声判断中の脳の働きを調べても、同様の結果が得られ、英語母語者では声と一致する口の動きがあると声だけよりも処理が促進されるのに対して、日本語母語者では逆に口の動きがあると処理に負荷がかかりました。

続きはソースで