《數據標註實用教程》是 2020年電子工業出版社出版的圖書。作者是劉欣亮。本書系統介紹了數據標註的發展、分類、規範及常用的數據標註工具的使用方法。
基本介紹
- 中文名：數據標註實用教程
- 作者：劉欣亮
- 出版社： 電子工業出版社
- ISBN：9787121397622
內容簡介,圖書目錄,作者簡介,
內容簡介
本書以數據標註崗位需求為導向，由高校教師和多家一線數據標註企業的工程師聯合編寫。本書系統介紹了數據標註的發展、分類、規範及常用的數據標註工具的使用方法。本書對初學者了解數據標註行業的操作規範及未來數據標註人才培養要求起到積極的作用。本書內容從實際數據標註工作出發，採用“項目引導、實戰驅動”的理念編寫。本書包含配套教學視頻、教學課件，讀者可登錄華信教育資源網（www.hxedu.com.cn）免費下載。本書還提供配套數據標註實戰平台，可供有需要的讀者使用。本書可作為大學本科和高職高專院校大數據技術與套用專業相關課程的配套教材，也可作為各類計算機培訓機構的培訓教材或相關愛好者的自學教材。
圖書目錄
第1章 數據標註概述 1
1.1 數據標註發展簡史 1
1.1.1 數據標註行業的發展 1
1.1.2 國內數據標註行業的發展現狀 5
1.2 數據標註定義及分類 6
1.2.1 數據標註的定義 6
1.2.2 數據標註的工作特點 7
1.2.3 數據標註的基本流程 7
1.2．4 數據標註的分類 8
1.3 數據標註的套用領域 9
1.4 數據標註行業的運行模式 10
1.4.1 數據標註的特點 10
1.4.2 數據標註在人工智慧中的地位 11
1.4.3 數據標註的運行模式 11
1.5 數據標註行業未來發展趨勢及挑戰 12
1.5.1 數據標註行業競爭加劇 12
1.5.2 政策的有力支持 12
1.5.3 面臨的問題和挑戰 13
1.5.4 數據標註行業的前景與發展 15
習題 15
第2章 數據的來龍去脈 16
2.1 認識數據 16
2.1.1 數和數據的區別 16
2.1.2 通信中數據的分類 16
2.1.3 計算機中數據的編碼 17
2.1.4 數據檔案 17
2.2 數據採集 17
2.2.1 數據採集渠道 18
2.2.2 數據採集的注意事項 19
2.2.3 標註數據的採集案例 19
2.2.4 數據質量 21
2.3 Python安裝與爬蟲採集數據案例 21
2.3.1 Python安裝與環境配置 21
2.3.2 網路爬蟲採集數據案例 25
2.4 數據預處理 28
2.4.1 數據清洗 28
2.4.2 數據集成 35
2.4.3 數據歸約 36
2.4.4 數據變換 38
2.4.5 數據預處理案例 38
2.5 標註數據 42
2.5.1 標註數據的用途 42
2.5.2 使用標註數據訓練算法的流程 43
2.6 數據分析與套用 47
2.6.1 數據分析方法 47
2.6.2 數據可視化 48
2.6.3 數據分析與可視化案例 51
習題 58
第3章 數據標註基礎知識 60
3.1 計算機中數據的存儲方式 60
3.1.1 檔案名稱 60
3.1.2 數據標註類型 61
3.1.3 檔案的存儲方式 63
3.2 數據的編碼方式 63
3.2.1 字元編碼方式 64
3.2.2 二進制編碼方式 68
3.2.3 字元編碼方式和二進制編碼方式的比較 70
3.3 數據標註必須了解的知識 70
3.3.1 文本標註需要掌握的基礎知識 70
3.3.2 文本標註需要注意的問題 74
3.3.3 常用的文本處理工具 75
3.3.4 語音標註需要掌握的基礎知識 78
3.3.5 常用的語音處理工具 81
3.3.6 圖像標註需要掌握的基礎知識 84
3.3.7 常用的圖像處理工具 88
3.3.8 視頻標註需要掌握的基礎知識 90
3.3.9 常用的視頻處理工具 94
3.4 常用的數據標註工具 97
3.4.1 labelImg圖像標註工具 97
3.4.2 labelme圖像標註工具 99
3.4.3 支持多種類型的精靈標註助手 101
3.4.4 其他標註工具介紹 104
3.5 常見的數據標註結果檔案格式 106
3.5.1 CSV檔案格式 106
3.5.2 XML檔案格式 107
3.5.3 JSON檔案格式 110
3.5.4 數據標註的輔助工具 111
習題 113
第4章 數據標註員的職業素養 115
4.1 數據標註團隊的管理 115
4.1.1 數據標註團隊的基礎架構 115
4.1.2 數據標註團隊的培訓體系 117
4.1.3 數據標註團隊的管理 119
4.2 數據標註規則的重要性 120
4.2.1 數據標註規則 120
4.2.2 數據標註規則的特點 121
4.2.3 數據標註規則需要雙方溝通 125
4.2.4 數據標註規則需要數據標註員不斷學習 125
4.3 數據標註的質檢 126
4.3.1 數據標註質檢的重要性 126
4.3.2 常用的數據標註標準分類 127
4.4 數據標註員需要具備的職業素養 129
4.4.1 數據標註員的職業素養 130
4.4.2 持續的學習力是數據標註工作的基礎 131
4.4.3 細心是做好數據標註工作的保障 132
4.4.4 有耐心才能堅持工作在數據標註行業 132
4.4.5 擁有責任心才能換位思考做好數據標註工作 132
4.4.6 較強專注力可提高工作效率 133
4.4.7 團隊協作是一個數據標註團隊生存的保障 133
4.4.8 良好的溝通表達力能更為有效地進行數據標註工作 133
4.5 數據標註所需職業素養的培養 134
4.5.1 學習力的培養 134
4.5.2 細心的培養 135
4.5.3 耐心的培養 135
4.5.4 責任心的培養 136
4.5.5 專注力的培養 137
4.5.6 團隊合作鍛鍊 138
4.5.7 鍛鍊溝通表達能力 139
習題 140
第5章 數據標註實戰 143
5.1 如何成為合格的數據標註員 143
5.1.1 實戰一 團隊拓展小遊戲 144
5.1.2 實戰二 熟悉數據標註規則 145
5.2 文本標註 149
5.2.1 實戰三 文本實體標註 150
5.2.2 實戰四 文本分類標註 152
5.3 語音標註 153
5.3.1 實戰五 語音數據轉寫標註 154
5.3.2 實戰六 語音數據情緒標註 157
5.4 圖像標註 159
5.4.1 實戰七 人臉拉框圖像標註 160
5.4.2 實戰八 人體框圖像標註 161
5.4.3 實戰九 手勢圖像標註 164
5.4.4 實戰十 人臉精確打點標註 167
5.4.5 實戰十一 道路場景語義分割標註 171
5.4.6 實戰十二 OCR轉寫標註 174
附錄A Python語法簡介 176
附錄B Anaconda安裝 180
附錄C labelImg安裝 184
附錄D labelme安裝 187
參考文獻 191
作者簡介
劉欣亮，河南科技大學信息工程學院、軟體學院副院長，河南科技大學優秀教師，河南省精品課程負責人，曾獲河南省科技攻關二等獎，河南省教改項目一等獎。出版過多部圖書。
