-
Notifications
You must be signed in to change notification settings - Fork 108
/
conll2012-6领域测试集-4种分词方法性能.txt
211 lines (211 loc) · 5.42 KB
/
conll2012-6领域测试集-4种分词方法性能.txt
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
('Now filename_1:', 'bc_conll_testing.utf8')
test_documents/conll2012_test_pred_samme\bc_conll_testing.utf8
Samme
result:
标准词数：15405个，正确词数：14628个，错误词数：892个
标准行数：885，正确行数：553，错误行数：332
Recall: 0.949562
Precision: 0.942526
F MEASURE: 0.946031
ERR RATE: 0.057903
Samme_3_15
result:
标准词数：15405个，正确词数：14742个，错误词数：682个
标准行数：885，正确行数：578，错误行数：307
Recall: 0.956962
Precision: 0.955783
F MEASURE: 0.956372
ERR RATE: 0.044271
Mine
result:
标准词数：15405个，正确词数：14623个，错误词数：892个
标准行数：885，正确行数：564，错误行数：321
Recall: 0.949237
Precision: 0.942507
F MEASURE: 0.945860
ERR RATE: 0.057903
Jieba
result:
标准词数：15405个，正确词数：12806个，错误词数：1941个
标准行数：885，正确行数：283，错误行数：602
Recall: 0.831289
Precision: 0.868380
F MEASURE: 0.849430
ERR RATE: 0.125998
--------------------
('Now filename_2:', 'bn_conll_testing.utf8')
test_documents/conll2012_test_pred_samme\bn_conll_testing.utf8
Samme
result:
标准词数：26940个，正确词数：23895个，错误词数：3170个
标准行数：929，正确行数：203，错误行数：726
Recall: 0.886971
Precision: 0.882875
F MEASURE: 0.884918
ERR RATE: 0.117669
Samme_3_15
result:
标准词数：26940个，正确词数：25735个，错误词数：1228个
标准行数：929，正确行数：474，错误行数：455
Recall: 0.955271
Precision: 0.954456
F MEASURE: 0.954863
ERR RATE: 0.045583
Mine
result:
标准词数：26940个，正确词数：24795个，错误词数：1725个
标准行数：929，正确行数：412，错误行数：517
Recall: 0.920379
Precision: 0.934955
F MEASURE: 0.927609
ERR RATE: 0.064031
Jieba
result:
标准词数：26940个，正确词数：21762个，错误词数：4452个
标准行数：929，正确行数：96，错误行数：833
Recall: 0.807795
Precision: 0.830167
F MEASURE: 0.818828
ERR RATE: 0.165256
--------------------
('Now filename_3:', 'mz_conll_testing.utf8')
test_documents/conll2012_test_pred_samme\mz_conll_testing.utf8
Samme
result:
标准词数：14105个，正确词数：11824个，错误词数：1913个
标准行数：451，正确行数：62，错误行数：389
Recall: 0.838284
Precision: 0.860741
F MEASURE: 0.849364
ERR RATE: 0.135626
Samme_3_15
result:
标准词数：14105个，正确词数：13057个，错误词数：885个
标准行数：451，正确行数：148，错误行数：303
Recall: 0.925700
Precision: 0.936523
F MEASURE: 0.931080
ERR RATE: 0.062744
Mine
result:
标准词数：14105个，正确词数：12586个，错误词数：1320个
标准行数：451，正确行数：115，错误行数：336
Recall: 0.892308
Precision: 0.905077
F MEASURE: 0.898647
ERR RATE: 0.093584
Jieba
result:
标准词数：14105个，正确词数：11227个，错误词数：1880个
标准行数：451，正确行数：50，错误行数：401
Recall: 0.795959
Precision: 0.856565
F MEASURE: 0.825151
ERR RATE: 0.133286
--------------------
('Now filename_4:', 'nw_conll_testing.utf8')
test_documents/conll2012_test_pred_samme\nw_conll_testing.utf8
Samme
result:
标准词数：11722个，正确词数：10262个，错误词数：1315个
标准行数：481，正确行数：148，错误行数：333
Recall: 0.875448
Precision: 0.886413
F MEASURE: 0.880896
ERR RATE: 0.112182
Samme_3_15
result:
标准词数：11722个，正确词数：11241个，错误词数：428个
标准行数：481，正确行数：293，错误行数：188
Recall: 0.958966
Precision: 0.963322
F MEASURE: 0.961139
ERR RATE: 0.036513
Mine
result:
标准词数：11722个，正确词数：10803个，错误词数：639个
标准行数：481，正确行数：255，错误行数：226
Recall: 0.921600
Precision: 0.944153
F MEASURE: 0.932740
ERR RATE: 0.054513
Jieba
result:
标准词数：11722个，正确词数：8753个，错误词数：2109个
标准行数：481，正确行数：83，错误行数：398
Recall: 0.746716
Precision: 0.805837
F MEASURE: 0.775151
ERR RATE: 0.179918
--------------------
('Now filename_5:', 'tc_conll_testing.utf8')
test_documents/conll2012_test_pred_samme\tc_conll_testing.utf8
Samme
result:
标准词数：10198个，正确词数：8409个，错误词数：1304个
标准行数：968，正确行数：456，错误行数：512
Recall: 0.824573
Precision: 0.865747
F MEASURE: 0.844659
ERR RATE: 0.127868
Samme_3_15
result:
标准词数：10198个，正确词数：9550个，错误词数：692个
标准行数：968，正确行数：674，错误行数：294
Recall: 0.936458
Precision: 0.932435
F MEASURE: 0.934442
ERR RATE: 0.067856
Mine
result:
标准词数：10198个，正确词数：9373个，错误词数：811个
标准行数：968，正确行数：642，错误行数：326
Recall: 0.919102
Precision: 0.920365
F MEASURE: 0.919733
ERR RATE: 0.079525
Jieba
result:
标准词数：10198个，正确词数：8620个，错误词数：1263个
标准行数：968，正确行数：523，错误行数：445
Recall: 0.845264
Precision: 0.872205
F MEASURE: 0.858523
ERR RATE: 0.123848
--------------------
('Now filename_6:', 'wb_conll_testing.utf8')
test_documents/conll2012_test_pred_samme\wb_conll_testing.utf8
Samme
result:
标准词数：13938个，正确词数：12455个，错误词数：1825个
标准行数：758，正确行数：261，错误行数：497
Recall: 0.893600
Precision: 0.872199
F MEASURE: 0.882770
ERR RATE: 0.130937
Samme_3_15
result:
标准词数：13938个，正确词数：13087个，错误词数：1013个
标准行数：758，正确行数：383，错误行数：375
Recall: 0.938944
Precision: 0.928156
F MEASURE: 0.933519
ERR RATE: 0.072679
Mine
result:
标准词数：13938个，正确词数：12734个，错误词数：1367个
标准行数：758，正确行数：321，错误行数：437
Recall: 0.913617
Precision: 0.903057
F MEASURE: 0.908306
ERR RATE: 0.098077
Jieba
result:
标准词数：13938个，正确词数：11321个，错误词数：3267个
标准行数：758，正确行数：151，错误行数：607
Recall: 0.812240
Precision: 0.776049
F MEASURE: 0.793732
ERR RATE: 0.234395
--------------------
[Finished in 1.5s]