第 1 章 數(shù)據(jù)標注基礎 ..................................................................................................................... 1
1.1 數(shù)據(jù)標注定義 .................................................................................................................... 3
1.1.1 任務分類 ................................................................................................................. 3
1.1.2 數(shù)據(jù)標注項目的工作流程 ..................................................................................... 4
1.2 計算機視覺標注相關基礎概念 ........................................................................................ 4
1.2.1 圖像 ......................................................................................................................... 5
1.2.2 視頻 ......................................................................................................................... 8
1.3 自然語言處理標注相關基礎概念 .................................................................................. 10
1.3.1 文件格式 ............................................................................................................... 10
1.3.2 字符編碼 ............................................................................................................... 13
1.4 語音標注相關基礎概念 .................................................................................................. 14
1.4.1 聲音信號 ............................................................................................................... 14
1.4.2 數(shù)字聲音 ............................................................................................................... 15
1.4.3 音頻格式 ............................................................................................................... 16
1.5 標注環(huán)境安裝和配置 ...................................................................................................... 16
1.5.1 MiniConda 的安裝和配置 .................................................................................... 16
1.5.2 Label Studio 的安裝和配置 .................................................................................. 17
1.5.3 Label Studio 的基本使用方法 .............................................................................. 18
1.6 數(shù)據(jù)標注項目和質(zhì)量控制 .............................................................................................. 23
1.6.1 標注項目需求 ....................................................................................................... 23
1.6.2 團隊組建 ............................................................................................................... 23
1.6.3 質(zhì)量控制 ............................................................................................................... 24
1.6.4 標注員職業(yè)素養(yǎng) ................................................................................................... 26
1.7 動手實踐 .......................................................................................................................... 26
小結 ........................................................................................................................................... 27
課后習題 ................................................................................................................................... 27
第 2 章 圖像標注項目 ................................................................................................................... 29
2.1 圖像標簽分類標注任務 .................................................................................................. 29
2.1.1 相關基礎知識 ....................................................................................................... 29
2.1.2 典型應用場景 ....................................................................................................... 29
2.1.3 實踐標注操作 ....................................................................................................... 30
2.1.4 動手實踐 ............................................................................................................... 38
2.2 圖像目標檢測標注任務 .................................................................................................. 39
2.2.1 目標檢測標注 ....................................................................................................... 39
2.2.2 小目標檢測標注 ................................................................................................... 50
2.3 圖像分割標注任務 .......................................................................................................... 67
2.3.1 語義分割標注任務 ............................................................................................... 67
2.3.2 實例分割標注任務 ............................................................................................... 74
2.3.3 全景分割標注任務 ............................................................................................... 80
2.4 關鍵點標注任務 .............................................................................................................. 87
2.4.1 相關基礎知識 ....................................................................................................... 87
2.4.2 典型應用場景 ....................................................................................................... 87
2.4.3 實踐標注操作 ....................................................................................................... 88
2.4.4 動手實踐 ............................................................................................................... 92
小結 ........................................................................................................................................... 93
課后習題 ................................................................................................................................... 94
第 3 章 視頻標注項目 ................................................................................................................... 95
3.1 視頻分類標注任務 .......................................................................................................... 95
3.1.1 相關基礎知識 ....................................................................................................... 95
3.1.2 典型應用場景 ....................................................................................................... 96
3.1.3 實踐標注操作 ....................................................................................................... 98
3.1.4 動手實踐 ............................................................................................................. 104
3.2 視頻跨幀追蹤標注任務 ................................................................................................ 104
3.2.1 相關基礎知識 ..................................................................................................... 104
3.2.2 典型應用場景 ..................................................................................................... 104
3.2.3 實踐標注操作 ..................................................................................................... 107
3.2.4 動手實踐 ............................................................................................................. 115
小結 ......................................................................................................................................... 115
課后習題 ................................................................................................................................. 116
第 4 章 自然語言標注項目 ......................................................................................................... 118
4.1 命名實體識別標注任務 ................................................................................................ 118
4.1.1 相關基礎知識 ..................................................................................................... 118
4.1.2 典型應用場景 ..................................................................................................... 119
4.1.3 數(shù)據(jù)標注方式 ..................................................................................................... 120
4.1.4 實踐標注操作 ..................................................................................................... 121
4.1.5 動手實踐 ............................................................................................................. 127
4.2 文本分類標注任務 ........................................................................................................ 128
4.2.1 相關基礎知識 ..................................................................................................... 128
4.2.2 典型應用場景 ..................................................................................................... 129
4.2.3 數(shù)據(jù)標注方式 ..................................................................................................... 131
4.2.4 實踐標注操作 ..................................................................................................... 131
4.2.5 動手實踐 ............................................................................................................. 138
4.3 文本關系抽取標注任務 ................................................................................................ 138
4.3.1 相關基礎知識 ..................................................................................................... 138
4.3.2 典型應用場景 ..................................................................................................... 140
4.3.3 數(shù)據(jù)標注方式 ..................................................................................................... 141
4.3.4 實踐標注操作 ..................................................................................................... 142
4.3.5 動手實踐 ............................................................................................................. 151
4.4 文本摘要標注任務 ........................................................................................................ 152
4.4.1 相關基礎知識 ..................................................................................................... 152
4.4.2 典型應用場景 ..................................................................................................... 152
4.4.3 數(shù)據(jù)標注方式 ..................................................................................................... 153
4.4.4 實踐標注操作 ..................................................................................................... 154
4.4.5 動手實踐 ............................................................................................................. 159
4.5 生成對話標注任務 ........................................................................................................ 159
4.5.1 相關基礎知識 ..................................................................................................... 159
4.5.2 典型應用場景 ..................................................................................................... 160
4.5.3 數(shù)據(jù)標注方式 ..................................................................................................... 161
4.5.4 實踐標注操作 ..................................................................................................... 162
4.5.5 動手實踐 ............................................................................................................. 169
小結 ......................................................................................................................................... 169
課后習題 ................................................................................................................................. 170
第 5 章 語音標注項目 ................................................................................................................. 172
5.1 自動語音識別標注任務 ................................................................................................ 172
5.1.1 相關基礎知識 ..................................................................................................... 172
5.1.2 典型應用場景 ..................................................................................................... 173
5.1.3 實踐標注操作 ..................................................................................................... 174
5.1.4 動手實踐 ............................................................................................................. 179
5.2 說話人語音分割標注任務 ............................................................................................ 179
5.2.1 相關基礎知識 ..................................................................................................... 179
5.2.2 典型應用場景 ..................................................................................................... 180
5.2.3 實踐標注操作 ..................................................................................................... 181
5.2.4 動手實踐 ............................................................................................................. 188
5.3 聲音事件檢測標注任務 ................................................................................................ 189
5.3.1 相關基礎知識 ..................................................................................................... 189
5.3.2 典型應用場景 ..................................................................................................... 189
5.3.3 實踐標注操作 ..................................................................................................... 191
5.3.4 動手實踐 ............................................................................................................. 197
5.4 語音意圖分類標注任務 ................................................................................................ 197
5.4.1 相關基礎知識 ..................................................................................................... 197
5.4.2 典型應用場景 ..................................................................................................... 198
5.4.3 實踐標注操作 ..................................................................................................... 199
5.4.4 動手實踐 ............................................................................................................. 209
小結 ......................................................................................................................................... 209
課后習題 ................................................................................................................................. 210