第1章 數(shù)據(jù)標(biāo)注概述 1
1.1 數(shù)據(jù)標(biāo)注發(fā)展簡(jiǎn)史 1
1.1.1 數(shù)據(jù)標(biāo)注行業(yè)的發(fā)展 1
1.1.2 國(guó)內(nèi)數(shù)據(jù)標(biāo)注行業(yè)的發(fā)展現(xiàn)狀 5
1.2 數(shù)據(jù)標(biāo)注定義及分類 6
1.2.1 數(shù)據(jù)標(biāo)注的定義 6
1.2.2 數(shù)據(jù)標(biāo)注的工作特點(diǎn) 7
1.2.3 數(shù)據(jù)標(biāo)注的基本流程 7
1.2.4 數(shù)據(jù)標(biāo)注的分類 8
1.3 數(shù)據(jù)標(biāo)注的應(yīng)用領(lǐng)域 9
1.4 數(shù)據(jù)標(biāo)注行業(yè)的運(yùn)行模式 10
1.4.1 數(shù)據(jù)標(biāo)注的特點(diǎn) 10
1.4.2 數(shù)據(jù)標(biāo)注在人工智能中的地位 11
1.4.3 數(shù)據(jù)標(biāo)注的運(yùn)行模式 11
1.5 數(shù)據(jù)標(biāo)注行業(yè)未來(lái)發(fā)展趨勢(shì)及挑戰(zhàn) 12
1.5.1 數(shù)據(jù)標(biāo)注行業(yè)競(jìng)爭(zhēng)加劇 12
1.5.2 政策的有力支持 12
1.5.3 面臨的問(wèn)題和挑戰(zhàn) 13
1.5.4 數(shù)據(jù)標(biāo)注行業(yè)的前景與發(fā)展 15
習(xí)題 15
第2章 數(shù)據(jù)的來(lái)龍去脈 16
2.1 認(rèn)識(shí)數(shù)據(jù) 16
2.1.1 數(shù)和數(shù)據(jù)的區(qū)別 16
2.1.2 通信中數(shù)據(jù)的分類 16
2.1.3 計(jì)算機(jī)中數(shù)據(jù)的編碼 17
2.1.4 數(shù)據(jù)文件 17
2.2 數(shù)據(jù)采集 17
2.2.1 數(shù)據(jù)采集渠道 18
2.2.2 數(shù)據(jù)采集的注意事項(xiàng) 19
2.2.3 標(biāo)注數(shù)據(jù)的采集案例 19
2.2.4 數(shù)據(jù)質(zhì)量 21
2.3 Python安裝與爬蟲采集數(shù)據(jù)案例 21
2.3.1 Python安裝與環(huán)境配置 21
2.3.2 網(wǎng)絡(luò)爬蟲采集數(shù)據(jù)案例 25
2.4 數(shù)據(jù)預(yù)處理 28
2.4.1 數(shù)據(jù)清洗 28
2.4.2 數(shù)據(jù)集成 35
2.4.3 數(shù)據(jù)歸約 36
2.4.4 數(shù)據(jù)變換 38
2.4.5 數(shù)據(jù)預(yù)處理案例 38
2.5 標(biāo)注數(shù)據(jù) 42
2.5.1 標(biāo)注數(shù)據(jù)的用途 42
2.5.2 使用標(biāo)注數(shù)據(jù)訓(xùn)練算法的流程 43
2.6 數(shù)據(jù)分析與應(yīng)用 47
2.6.1 數(shù)據(jù)分析方法 47
2.6.2 數(shù)據(jù)可視化 48
2.6.3 數(shù)據(jù)分析與可視化案例 51
習(xí)題 58
第3章 數(shù)據(jù)標(biāo)注基礎(chǔ)知識(shí) 60
3.1 計(jì)算機(jī)中數(shù)據(jù)的存儲(chǔ)方式 60
3.1.1 文件名 60
3.1.2 數(shù)據(jù)標(biāo)注類型 61
3.1.3 文件的存儲(chǔ)方式 63
3.2 數(shù)據(jù)的編碼方式 63
3.2.1 字符編碼方式 64
3.2.2 二進(jìn)制編碼方式 68
3.2.3 字符編碼方式和二進(jìn)制編碼方式的比較 70
3.3 數(shù)據(jù)標(biāo)注必須了解的知識(shí) 70
3.3.1 文本標(biāo)注需要掌握的基礎(chǔ)知識(shí) 70
3.3.2 文本標(biāo)注需要注意的問(wèn)題 74
3.3.3 常用的文本處理工具 75
3.3.4 語(yǔ)音標(biāo)注需要掌握的基礎(chǔ)知識(shí) 78
3.3.5 常用的語(yǔ)音處理工具 81
3.3.6 圖像標(biāo)注需要掌握的基礎(chǔ)知識(shí) 84
3.3.7 常用的圖像處理工具 88
3.3.8 視頻標(biāo)注需要掌握的基礎(chǔ)知識(shí) 90
3.3.9 常用的視頻處理工具 94
3.4 常用的數(shù)據(jù)標(biāo)注工具 97
3.4.1 labelImg圖像標(biāo)注工具 97
3.4.2 labelme圖像標(biāo)注工具 99
3.4.3 支持多種類型的精靈標(biāo)注助手 101
3.4.4 其他標(biāo)注工具介紹 104
3.5 常見(jiàn)的數(shù)據(jù)標(biāo)注結(jié)果文件格式 106
3.5.1 CSV文件格式 106
3.5.2 XML文件格式 107
3.5.3 JSON文件格式 110
3.5.4 數(shù)據(jù)標(biāo)注的輔助工具 111
習(xí)題 113
第4章 數(shù)據(jù)標(biāo)注員的職業(yè)素養(yǎng) 115
4.1 數(shù)據(jù)標(biāo)注團(tuán)隊(duì)的管理 115
4.1.1 數(shù)據(jù)標(biāo)注團(tuán)隊(duì)的基礎(chǔ)架構(gòu) 115
4.1.2 數(shù)據(jù)標(biāo)注團(tuán)隊(duì)的培訓(xùn)體系 117
4.1.3 數(shù)據(jù)標(biāo)注團(tuán)隊(duì)的管理 119
4.2 數(shù)據(jù)標(biāo)注規(guī)則的重要性 120
4.2.1 數(shù)據(jù)標(biāo)注規(guī)則 120
4.2.2 數(shù)據(jù)標(biāo)注規(guī)則的特點(diǎn) 121
4.2.3 數(shù)據(jù)標(biāo)注規(guī)則需要雙方溝通 125
4.2.4 數(shù)據(jù)標(biāo)注規(guī)則需要數(shù)據(jù)標(biāo)注員不斷學(xué)習(xí) 125
4.3 數(shù)據(jù)標(biāo)注的質(zhì)檢 126
4.3.1 數(shù)據(jù)標(biāo)注質(zhì)檢的重要性 126
4.3.2 常用的數(shù)據(jù)標(biāo)注標(biāo)準(zhǔn)分類 127
4.4 數(shù)據(jù)標(biāo)注員需要具備的職業(yè)素養(yǎng) 129
4.4.1 數(shù)據(jù)標(biāo)注員的職業(yè)素養(yǎng) 130
4.4.2 持續(xù)的學(xué)習(xí)力是數(shù)據(jù)標(biāo)注工作的基礎(chǔ) 131
4.4.3 細(xì)心是做好數(shù)據(jù)標(biāo)注工作的保障 132
4.4.4 有耐心才能堅(jiān)持工作在數(shù)據(jù)標(biāo)注行業(yè) 132
4.4.5 擁有責(zé)任心才能換位思考做好數(shù)據(jù)標(biāo)注工作 132
4.4.6 較強(qiáng)專注力可提高工作效率 133
4.4.7 團(tuán)隊(duì)協(xié)作是一個(gè)數(shù)據(jù)標(biāo)注團(tuán)隊(duì)生存的保障 133
4.4.8 良好的溝通表達(dá)力能更為有效地進(jìn)行數(shù)據(jù)標(biāo)注工作 133
4.5 數(shù)據(jù)標(biāo)注所需職業(yè)素養(yǎng)的培養(yǎng) 134
4.5.1 學(xué)習(xí)力的培養(yǎng) 134
4.5.2 細(xì)心的培養(yǎng) 135
4.5.3 耐心的培養(yǎng) 135
4.5.4 責(zé)任心的培養(yǎng) 136
4.5.5 專注力的培養(yǎng) 137
4.5.6 團(tuán)隊(duì)合作鍛煉 138
4.5.7 鍛煉溝通表達(dá)能力 139
習(xí)題 140
第5章 數(shù)據(jù)標(biāo)注實(shí)戰(zhàn) 143
5.1 如何成為合格的數(shù)據(jù)標(biāo)注員 143
5.1.1 實(shí)戰(zhàn)一　團(tuán)隊(duì)拓展小游戲 144
5.1.2 實(shí)戰(zhàn)二　熟悉數(shù)據(jù)標(biāo)注規(guī)則 145
5.2 文本標(biāo)注 149
5.2.1 實(shí)戰(zhàn)三　文本實(shí)體標(biāo)注 150
5.2.2 實(shí)戰(zhàn)四　文本分類標(biāo)注 152
5.3 語(yǔ)音標(biāo)注 153
5.3.1 實(shí)戰(zhàn)五　語(yǔ)音數(shù)據(jù)轉(zhuǎn)寫標(biāo)注 154
5.3.2 實(shí)戰(zhàn)六　語(yǔ)音數(shù)據(jù)情緒標(biāo)注 157
5.4 圖像標(biāo)注 159
5.4.1 實(shí)戰(zhàn)七　人臉拉框圖像標(biāo)注 160
5.4.2 實(shí)戰(zhàn)八　人體框圖像標(biāo)注 161
5.4.3 實(shí)戰(zhàn)九　手勢(shì)圖像標(biāo)注 164
5.4.4 實(shí)戰(zhàn)十　人臉精確打點(diǎn)標(biāo)注 167
5.4.5 實(shí)戰(zhàn)十一　道路場(chǎng)景語(yǔ)義分割標(biāo)注 171
5.4.6 實(shí)戰(zhàn)十二　OCR轉(zhuǎn)寫標(biāo)注 174
附錄A Python語(yǔ)法簡(jiǎn)介 176
附錄B Anaconda安裝 180
附錄C labelImg安裝 184
附錄D labelme安裝 187
參考文獻(xiàn) 191