【研究領域課題番号】20H01265 (KAKENデータベースで見る）

【研究キーワード】

リアルタイムMRI / データベース / 調音運動 / 日本語 / 音声学 / 調音音声学 / モンゴル語

【研究成果の概要】

研究計画に沿ってリアルタイムMRI動画の収録を開始した。2020年7月22日, 8月21日, 9月11日, 10月1日, 11月20日, 12月28日, 2021年1月8日に話者各1名の収録を実施したが、COVID-19による外出規制の影響、およびATR-Promotionsにおける発話実験に関する規制によって、当初計画よりも低いペースでの収録となった。収録３回分に要する旅費を翌年度に繰り越すこととし、計画通りに実施した。
収録したMRI画像データ（DCM形式）と音声(WAV形式）からMP4動画を構成し、MP4動画に対して発話の開始・終了時刻を付与すると同時に、調音上の問題に関するタグを付与する発話切り出し作業を実施した。2021年3月の時点でこの作業が終了した話者10名分のデータを簡単な検索系とともにウェブ上で試験公開した（URLはhttps://rtmridb.ninjal.ac.jp ただしこのURLは2022年4月1日以降は本公開版Version 1のために利用している）。
以上のデータ収集・公開作業と並行して、機械学習によって、MRI画像から調音器官の輪郭を自動抽出する研究を実施した。輪郭は、上唇・下唇と下顎・舌・硬口蓋と軟口蓋・咽頭壁の５部位に分けて実施した。特定個人については高い精度での抽出が可能であることを確認した後、少人数の学習データから多数の話者のデータを精度よく処理する手法についても検討をおこなった。
さらに、MRI動画からの音声合成の可能性、以前に収録したモンゴル語のデータを用いた母音調和の研究、MP4動画のブラウジング・アノテーション環境の開発なども実施した。
国内の学会で研究発表を行ったほか、日本語撥音の調音運動に関する論文と日本語無声摩擦音の生成メカニズムに関する論文をいずれも国際学術誌に投稿した。

【研究種目】基盤研究(B)

【研究期間】2020-04-01 - 2024-03-31

【配分額】17,420千円 (直接経費: 13,400千円、間接経費: 4,020千円)

【研究分野】日本語学

【研究領域課題番号】16202006 (KAKENデータベースで見る）

【研究キーワード】

国語学 / 音声学 / 言語学 / 日本語教育 / 国語教育 / 音声言語 / 調音動態撮像 / 自然会話 / 日本語 / 調音動態 / 韻律 / コミュニケーション / 感情音声 / 音声情報処理 / 教育

【研究成果の概要】

「音声言語」教育の基礎資料を作成するという本研究の目的を果たすために、基礎資料の全体的デザインを検討し、検討結果を反映させる形で調音映像資料と、会話音声資料の作成をおこなった。
調音映像資料については45回を越える実験を通して「母音」「rとl」「有声音・無声音」「口蓋化」「促音」「無声化」「早口言葉」「りきみ」「空気すすり」等の映像資料を元にした。その中心は日本語であるが、比較対照のために英語・中国語の実験もおこない、調音映像の資料を作った。
会話音声資料については、基礎資料作成のための材料として、大学生対話や低年齢層話者も含めた家庭内会話、社会人会話など100時間にせまる会話の映像と音声を記録・観察した。これらの作業の過程で、たとえばりきみや空気すすりのように、これまで軽視されていた行動が、大きな役割を果たすことを明らかにした。
また、調音動態と会話分析の双方を収容する包括的な枠組みとして「文法」(音声文法)の必要性を明らかにした。以上の作業を通して得られた知見は、その都度「基礎資料の全体的デザイン」の再検討に反映した。得られた知見の学会発表や論文集出版、パネルディスカッション企画、24回の打ち合わせを通して、音声文法の若手研究人材の育成につとめた。
これらの知見を日本語教育や国語教育に真に役立てるために、日本語教育や国語教育の関連学会大会でのデモや発表をおこない、「日本語音声コミュニケーション教育研究会」「日本語音声コミュニケーション研究会」を立ち上げ、成果を問うた。それとともに、インターネット上に基礎資料のサンプルを一部英語版も含めてアップし、国際的な規模で、教育現場の意見のフィードバックをおこなった。
また、われわれの活動を広報するために、学会講演や一般書の出版、国際ワークショップ開催や新聞インタビュー、広報誌でPRするとともに、インターネット上にホームヘージを開設した。

【研究種目】基盤研究(A)

【研究期間】2004 - 2006

【配分額】35,750千円 (直接経費: 27,500千円、間接経費: 8,250千円)