基於多模態人機互動的聽障者無障礙技術研究

基於多模態人機互動的聽障者無障礙技術研究

《基於多模態人機互動的聽障者無障礙技術研究》是科學出版社出版的圖書,作者是趙劍,史麗娟,王麗榮。

基本介紹

  • 中文名:基於多模態人機互動的聽障者無障礙技術研究
  • 作者:趙劍,史麗娟,王麗榮
  • 出版社:科學出版社
  • ISBN:9787030612908
內容簡介,圖書目錄,

內容簡介

本書主要研究利用先進的信息技術和手段,消除殘障者在言語康復、教育學習、生活及交流中所遇到的各種障礙,將可視語音等多模態技術引入康復領域,結合現代信息技術中的人工智慧、物聯網、群智計算等將無障礙技術擴展到融合教育、生活無障礙、交流無障礙等領域。本書研究內容主要包括:套用可視語音及虛擬現實技術解決聽障兒童言語康復難題;套用多模態互動技術研究聽障學生高等教育課堂教學輔助裝置,解決聽障學生融入正常課堂無障礙學習難題;套用群智計算技術與多模態技術解決聽障者與健聽者無障礙交流難題。

圖書目錄

第0篇 基礎篇
第1章 緒論
1.1 基於多模態人機互動的聽障者無障礙技術研究背景
1.1.1 社會背景
1.1.2 套用背景
1.2 多模態人機互動技術研究現狀
1.2.1 多模態人機互動技術國外發展現狀
1.2.2 多模態人機互動技術國內發展現狀
1.3 無障礙技術研究現狀
1.3.1 言語康復無障礙技術研究現狀
1.3.2 融合教育無障礙技術研究現狀
1.3.3 生活無障礙技術研究現狀
1.4 本書主要研究內容及章節安排
參考文獻
第1篇 基於多模態人機互動的言語康復無障礙技術研究
第2章 基於可視語音的言語康復無障礙方法研究
2.1 基於三維掃描數據的三維可視語音人臉建模
2.2 三維掃描數據獲取及預處理
2.2.1 三維雷射掃描技術的基本原理
2.2.2 人臉點雲數據獲取的採集環境設定
2.3 三維點雲數據預處理
2.4 三維掃描數據與通用人臉模型的匹配
2.4.1 人臉模型特徵點提取
2.4.2 人臉模型幾何變形
2.4.3 人臉模型紋理映射
2.5 三維人臉動態特徵提取
2.5.1 系統框架
2.5.2 基於人臉運動捕捉技術的面部及唇部信息提取
2.5.3 面向聽障兒童言語康復訓練的人臉特徵點標記排布方式
2.5.4 人臉模型驅動方法研究
2.6 基於漢語三維可視語音庫的聽障兒童發音康複方法
2.6.1 漢語三維可視語音庫建立
2.6.2 基於漢語三維可視語音庫的發音康復過程
2.7 語音康復標準
2.8 本章小結
參考文獻
第3章 基於不可視語音的多模態言語康復無障礙方法研究
3.1 不可視語音概念
3.2 人舌齶三維建模方法
3.2.1 基於生理結構的三維舌部建模
3.2.2 人舌肌肉模型的幾何描述
3.2.3 舌部模型控制
3.3 基於動態齶位的舌部發音運動
3.3.1 基於動態齶位的舌部數據採集
3.3.2 建立EPG對應音素的發音樣本
3.4 聽障兒童言語康復中基於動態齶位的人舌模型驅動方法研究
3.4.1 面向聽障兒童多模態言語康復的動態齶位樣本資料庫的建立
3.4.2 改進的齶位參數描述
3.4.3 參數設定
3.4.4 舌部模型驅動動作合成
3.4.5 實驗及結果分析
3.5 本章小結
參考文獻
第4章 基於多模態人機互動的言語康復呼吸訓練無障礙技術研究
4.1 多模態呼吸訓練方法
4.1.1 傳統的呼吸訓練方法
4.1.2 PC端和移動智慧型終端訓練方法
4.1.3 計算流體力學訓練方法
4.1.4 VR沉浸式呼吸訓練方法
……
第2篇 基於多模太人機互動聽障學生融合教育無障礙支撐體系
第3篇基於多模態人機互動的聽障者生活無障礙技術研究

相關詞條

熱門詞條

聯絡我們