searchengine/oss/loc/analysisunittest/data/analysisunittest/evaluation/chinese_2gram_exp_out.txt
changeset 24 65456528cac2
equal deleted inserted replaced
23:d4d56f5e7c55 24:65456528cac2
       
     1 Q 'E' -  'e'
       
     2 i:...................................................................................................................
       
     3 j:...................................................................................................................
       
     4 c:...................................................................................................................
       
     5 ok
       
     6 
       
     7 Q '逗' -  '逗'
       
     8 i:.....X.............................................................................................................
       
     9 j:.....X.............................................................................................................
       
    10 c:.....!.............................................................................................................
       
    11 more errors!
       
    12 
       
    13 Q '台湾' -  '台湾'
       
    14 i:..X................................................................................................................
       
    15 j:..X................................................................................................................
       
    16 c:...................................................................................................................
       
    17 ok
       
    18 
       
    19 Q '国家' -  '国家'
       
    20 i:............X.X...........................................X........................................................
       
    21 j:............X.X...........................................X........................................................
       
    22 c:...................................................................................................................
       
    23 ok
       
    24 
       
    25 Q '中国' -  '中国'
       
    26 i:X...X..X................X.......XX........X..X.............................X.........................X.XX........X.
       
    27 j:X...X..X................X.......XX........X..X.............................X.........................X.XX........X.
       
    28 c:...................................................................................................................
       
    29 ok
       
    30 
       
    31 Q '重' -  '重'
       
    32 i:.........................................................X...........................X....................X........
       
    33 j:.........................................................X...........................X....................X........
       
    34 c:.........................................................!...........................!....................!........
       
    35 more errors!
       
    36 
       
    37 Q '北京' -  '北京'
       
    38 i:........................................XX.........................................................................
       
    39 j:........................................XX.........................................................................
       
    40 c:...................................................................................................................
       
    41 ok
       
    42 
       
    43 Q '年' -  '年'
       
    44 i:X..X................X............X....................X...........................................X................
       
    45 j:X..X................X............X....................X...........................................X................
       
    46 c:!..!................!............!....................!...........................................!................
       
    47 more errors!
       
    48 
       
    49 Q '东盟' -  '东盟'
       
    50 i:....................................................XX....XX.....................X...........XXXXX.XX..X.....X.....
       
    51 j:....................................................XX....XX.....................X...........XXXXX.XX..X.....X.....
       
    52 c:...................................................................................................................
       
    53 ok
       
    54 
       
    55 Q '缅甸' -  '缅甸'
       
    56 i:....................................................X.X....X.........X..X.......X.X..X..XX.X.XX.............X.X..X.
       
    57 j:....................................................X.X....X.........X..X.......X.X..X..XX.X.XX.............X.X..X.
       
    58 c:...................................................................................................................
       
    59 ok
       
    60 
       
    61 Q '中' -  '中'
       
    62 i:X.X.X..XXX..............X.......XXX.......X..X........X...........X....X...XX....XXX..............X..X.XX..X.....X.
       
    63 j:X.X.X..XXX..............X.......XXX.......X..X........X...........X....X...XX....XXX..............X..X.XX..X.....X.
       
    64 c:!.!.!..!!!..............!.......!!!.......!..!........!...........!....!...!!....!!!..............!..!.!!..!.....!.
       
    65 more errors!
       
    66 
       
    67 Q '亚洲' -  '亚洲'
       
    68 i:.......................................................X...............................X.................X.........
       
    69 j:.......................................................X...............................X.................X.........
       
    70 c:...................................................................................................................
       
    71 ok
       
    72 
       
    73 Q '奥巴马' -  '奥巴' '巴马'
       
    74 i:X..X....X..............X.........X...X..X....XXX....X.......X..X.......X.......X..X...X..................X.........
       
    75 j:X..X....X..............X.........X...X..X....XXX....X.......X..X.......X.......X..X...X..................X.........
       
    76 c:...................................................................................................................
       
    77 ok
       
    78 
       
    79 Q '昂' -  '昂'
       
    80 i:..............................................X.......X......X..X.....XX..........X.X.....X........................
       
    81 j:..............................................X.......X......X..X.....XX..........X.X.....X........................
       
    82 c:..............................................!.......!......!..!.....!!..........!.!.....!........................
       
    83 more errors!
       
    84 
       
    85 Q '日本' -  '日本'
       
    86 i:......................................................................................X............................
       
    87 j:......................................................................................X............................
       
    88 c:...................................................................................................................
       
    89 ok
       
    90 
       
    91 Q '笑容' -  '笑容'
       
    92 i:.................................................X.............X...................................................
       
    93 j:.................................................X.............X...................................................
       
    94 c:...................................................................................................................
       
    95 ok
       
    96 
       
    97 Q '儿' -  '儿'
       
    98 i:..............................................................X....................X..................X............
       
    99 j:..............................................................X....................X..................X............
       
   100 c:..............................................................!....................!..................!............
       
   101 more errors!
       
   102 
       
   103 Q '友好关系' -  '友好' '好关' '关系'
       
   104 i:.................................................................................................................X.
       
   105 j:.................................................................................................................X.
       
   106 c:...................................................................................................................
       
   107 ok
       
   108 
       
   109 Q '现场' -  '现场'
       
   110 i:.X.................................................................................................................
       
   111 j:.X.................................................................................................................
       
   112 c:...................................................................................................................
       
   113 ok
       
   114 
       
   115 Q '局面' -  '局面'
       
   116 i:...................................................................................................................
       
   117 j:...................................................................................................................
       
   118 c:...................................................................................................................
       
   119 ok
       
   120 
       
   121 Q '事务' -  '事务'
       
   122 i:..................................................................................................X................
       
   123 j:..................................................................................................X................
       
   124 c:...................................................................................................................
       
   125 ok
       
   126 
       
   127 Q 'er' -  'er'
       
   128 i:...........................XX..X...................................................................................
       
   129 j:...................................................................................................................
       
   130 c:...................................................................................................................
       
   131 ok
       
   132 
       
   133 Q 'facebook' -  'facebook'
       
   134 i:...............................X...................................................................................
       
   135 j:...............................X...................................................................................
       
   136 c:...................................................................................................................
       
   137 ok
       
   138 
       
   139 Q 'TWITTER' -  'twitter'
       
   140 i:...........................XX..X...................................................................................
       
   141 j:...........................XX..X...................................................................................
       
   142 c:...................................................................................................................
       
   143 ok
       
   144 
       
   145 Q '月' -  '月'
       
   146 i:X..................................................X......X........................................................
       
   147 j:X..................................................X......X........................................................
       
   148 c:..........................................................!........................................................
       
   149 more errors!
       
   150 
       
   151 Q 'APEC' -  'apec'
       
   152 i:................................................X..X.......X...............X....X..................................
       
   153 j:................................................X..X.......X...............X....X..................................
       
   154 c:...................................................................................................................
       
   155 ok
       
   156 
       
   157 Q 'AP' -  'ap'
       
   158 i:...................................................................................................................
       
   159 j:...................................................................................................................
       
   160 c:...................................................................................................................
       
   161 ok
       
   162 
       
   163 Q 'book' -  'book'
       
   164 i:...................................................................................................................
       
   165 j:...................................................................................................................
       
   166 c:...................................................................................................................
       
   167 ok
       
   168 
       
   169 Q 'face*' -  'face'
       
   170 i:...............................X...................................................................................
       
   171 j:...............................X...................................................................................
       
   172 c:...................................................................................................................
       
   173 ok
       
   174 
       
   175 Q 'A*' -  'a'
       
   176 i:................................................X..X.......X...............X....X..................................
       
   177 j:................................................X..X.......X...............X....X..................................
       
   178 c:...................................................................................................................
       
   179 ok
       
   180 
       
   181 Q '喜*' -  '喜'
       
   182 i:..................................................X................................................................
       
   183 j:..................................................X................................................................
       
   184 c:..................................................!................................................................
       
   185 more errors!
       
   186 
       
   187 Q '合*' -  '合'
       
   188 i:.........X......................................XX.................................X.........X.....................
       
   189 j:.........X......................................XX.................................X.........X.....................
       
   190 c:...................................................................................................................
       
   191 ok
       
   192 
       
   193 Q '年*' -  '年'
       
   194 i:X..X................X............X....................X...........................................X................
       
   195 j:X..X................X............X....................X...........................................X................
       
   196 c:...!...............................................................................................................
       
   197 more errors!
       
   198 
       
   199 Q '使用*' -  '使用'
       
   200 i:....X..............................................................................................................
       
   201 j:...................................................................................................................
       
   202 c:....+...........................!..................................................................................
       
   203 ok
       
   204 
       
   205 Q '玩*' -  '玩'
       
   206 i:...................X...............................................................................................
       
   207 j:...................X...............................................................................................
       
   208 c:...................................................................................................................
       
   209 ok
       
   210 
       
   211 Q '美*' -  '美'
       
   212 i:X.X....X.X.X..........X.X...................X..X.....X...XX.X.X...XXX...X..X.....X......X...XXX..X...XX....X...XX..
       
   213 j:X.X....X.X.X..........X.X...................X..X.....X...XX.X.X...XXX...X..X.....X......X...XXX..X...XX....X...XX..
       
   214 c:............................................!......................................................................
       
   215 more errors!
       
   216 
       
   217 Q '听*' -  '听'
       
   218 i:.X.................................................................................................................
       
   219 j:.X.................................................................................................................
       
   220 c:...................................................................................................................
       
   221 ok
       
   222 
       
   223 Q '以及*' -  '以及'
       
   224 i:..X.X..........................X.......X..................................................X........................
       
   225 j:...................................................................................................................
       
   226 c:..+.+..........................+.......+..................................................+........................
       
   227 improved
       
   228 
       
   229 Q '1' -  '1'
       
   230 i:X..................................................X..X............................................................
       
   231 j:...................................................................................................................
       
   232 c:...................................................................................................................
       
   233 ok
       
   234 
       
   235 Q '正*' -  '正'
       
   236 i:......................................XX........X................X....................................X............
       
   237 j:......................................XX........X................X....................................X............
       
   238 c:......................................!............................................................................
       
   239 more errors!
       
   240 
       
   241 Q '加*' -  '加'
       
   242 i:..........X....................................X............X...................X............X...X.....X...........
       
   243 j:..........X....................................X............X...................X............X...X.....X...........
       
   244 c:...................................................................................................................
       
   245 ok
       
   246 
       
   247 Q '采*' -  '采'
       
   248 i:................................................................................................X..................
       
   249 j:................................................................................................X..................
       
   250 c:...................................................................................................................
       
   251 ok
       
   252 
       
   253 Q '现在' -  '现在'
       
   254 i:...........................................................................................................X.......
       
   255 j:...........................................................................................................X.......
       
   256 c:...................................................................................................................
       
   257 ok
       
   258 
       
   259 Q '月*' -  '月'
       
   260 i:X..................................................X......X........................................................
       
   261 j:X..................................................X......X........................................................
       
   262 c:...................................................................................................................
       
   263 ok
       
   264 
       
   265 Q '什么*' -  '什么'
       
   266 i:...................................................................................................................
       
   267 j:...................................................................................................................
       
   268 c:..........................................................................!........................................
       
   269 more errors!
       
   270 
       
   271 Q '什么*' -  '什么'
       
   272 i:..........................................................................X........................................
       
   273 j:...................................................................................................................
       
   274 c:..........................................................................+........................................
       
   275 improved
       
   276 
       
   277 Q '呼*' -  '呼'
       
   278 i:..............................................X.......X....................X...X..X................................
       
   279 j:..............................................X.......X....................X...X..X................................
       
   280 c:...................................................................................................................
       
   281 ok
       
   282 
       
   283 Q '不*' -  '不'
       
   284 i:............XX.........X............X...................X.....................................X.X...X..X....X.X....
       
   285 j:............XX.........X............X...................X.....................................X.X...X..X....X.X....
       
   286 c:...................................................................................................................
       
   287 ok
       
   288 
       
   289 Q '提问' -  '提问'
       
   290 i:.X..................XX.....X.......................................................................................
       
   291 j:.X..................XX.....X.......................................................................................
       
   292 c:...................................................................................................................
       
   293 ok
       
   294 
       
   295 Q '任*' -  '任'
       
   296 i:............X............................................................................................XX.X......
       
   297 j:............X............................................................................................XX.X......
       
   298 c:...................................................................................................................
       
   299 ok
       
   300 
       
   301 Q '另*' -  '另'
       
   302 i:.....................X...........................................................X..............................X..
       
   303 j:.....................X...........................................................X..............................X..
       
   304 c:...................................................................................................................
       
   305 ok
       
   306 
       
   307 Q '问*' -  '问'
       
   308 i:.XX..X..............XXX....X.................X...............................................X................X....
       
   309 j:.XX..X..............XXX....X.................X...............................................X................X....
       
   310 c:.....................!.......................!.....................................................................
       
   311 more errors!
       
   312 
       
   313 Q '"美国总统"' -  '美国' '国总' '总统'
       
   314 i:X..............................................X...................................................................
       
   315 j:X..............................................X...................................................................
       
   316 c:...................................................................................................................
       
   317 ok
       
   318 
       
   319 Q '"有关美国对台"' -  '有关' '关美' '美国' '国对' '对台'
       
   320 i:......................X............................................................................................
       
   321 j:......................X............................................................................................
       
   322 c:...................................................................................................................
       
   323 ok
       
   324 
       
   325 Q '"少数民族"问' -  '少数' '数民' '民族' '问'
       
   326 i:.XX..X............X.XXX....X.................X...............................................X................X....
       
   327 j:.XX..X............X.XXX....X.................X...............................................X................X....
       
   328 c:.!!..!..............!!!....!.................!...............................................!................!....
       
   329 more errors!
       
   330 
       
   331 Q '"自由信息流通"' -  '自由' '由信' '信息' '息流' '流通'
       
   332 i:.........................X.........................................................................................
       
   333 j:.........................X.........................................................................................
       
   334 c:...................................................................................................................
       
   335 ok
       
   336 
       
   337 Q '"让美国着急"' -  '让美' '美国' '国着' '着急'
       
   338 i:................................................................................................................X..
       
   339 j:................................................................................................................X..
       
   340 c:...................................................................................................................
       
   341 ok
       
   342 
       
   343 Q '"中国与缅甸"' -  '中国' '国与' '与缅' '缅甸'
       
   344 i:.................................................................................................................X.
       
   345 j:.................................................................................................................X.
       
   346 c:...................................................................................................................
       
   347 ok
       
   348 
       
   349 Q '“亚洲政策演讲”' -  '亚洲' '洲政' '政策' '策演' '演讲'
       
   350 i:.......................................................................................X...........................
       
   351 j:.......................................................................................X...........................
       
   352 c:...................................................................................................................
       
   353 ok
       
   354 
       
   355 Q '“美国对缅甸的制裁”' -  '美国' '国对' '对缅' '缅甸' '甸的' '的制' '制裁'
       
   356 i:........................................................................................X..........................
       
   357 j:........................................................................................X..........................
       
   358 c:...................................................................................................................
       
   359 ok
       
   360 
       
   361 Q '“所有政治犯”' -  '所有' '有政' '政治' '治犯'
       
   362 i:..........................................................................................X........................
       
   363 j:..........................................................................................X........................
       
   364 c:...................................................................................................................
       
   365 ok
       
   366 
       
   367 Q '“与东盟的关系”' -  '与东' '东盟' '盟的' '的关' '关系'
       
   368 i:.......................................................................................................X.....X.....
       
   369 j:.......................................................................................................X.....X.....
       
   370 c:...................................................................................................................
       
   371 ok
       
   372 
       
   373 Q '“建立更友好的关系”' -  '建立' '立更' '更友' '友好' '好的' '的关' '关系'
       
   374 i:............................................................................................X......................
       
   375 j:............................................................................................X......................
       
   376 c:...................................................................................................................
       
   377 ok
       
   378 
       
   379 Q '“东盟峰会”' -  '东盟' '盟峰' '峰会'
       
   380 i:.....................................................X...........................X...............X.................
       
   381 j:.....................................................X...........................X...............X.................
       
   382 c:...................................................................................................................
       
   383 ok
       
   384 
       
   385 Q '“不干预他国政策”' -  '不干' '干预' '预他' '他国' '国政' '政策'
       
   386 i:................................................................................................X..................
       
   387 j:................................................................................................X..................
       
   388 c:...................................................................................................................
       
   389 ok
       
   390 
       
   391 Q '“认真作出回应”' -  '认真' '真作' '作出' '出回' '回应'
       
   392 i:...............................................................................X...................................
       
   393 j:...............................................................................X...................................
       
   394 c:...................................................................................................................
       
   395 ok
       
   396 
       
   397 Q '“美国外交举动没劲儿”' -  '美国' '国外' '外交' '交举' '举动' '动没' '没劲' '劲儿'
       
   398 i:..............................................................X....................................................
       
   399 j:..............................................................X....................................................
       
   400 c:...................................................................................................................
       
   401 ok
       
   402 
       
   403 Q '“穿上传统服装与大家合照,笑容灿烂”' -  '穿上' '上传' '传统' '统服' '服装' '装与' '与大' '大家' '家合' '合照' '照,' ',笑' '笑容' '容灿' '灿烂'
       
   404 i:.................................................X.................................................................
       
   405 j:.................................................X.................................................................
       
   406 c:...................................................................................................................
       
   407 ok
       
   408 
       
   409 Q '“11月15日”' -  '11' '月' '15' '日'
       
   410 i:...................................................X...............................................................
       
   411 j:X..................................................X...............................................................
       
   412 c:+..................................................!...............................................................
       
   413 ok
       
   414 
       
   415 Q '“在7月份,”' -  '在' '7' '月份' '份,'
       
   416 i:..........................................................X........................................................
       
   417 j:..........................................................X........................................................
       
   418 c:...................................................................................................................
       
   419 ok
       
   420 
       
   421 Q '“Twitter以及Facebook”' -  'twitter' '以及' 'facebook'
       
   422 i:...............................X...................................................................................
       
   423 j:...............................X...................................................................................
       
   424 c:...................................................................................................................
       
   425 ok
       
   426 
       
   427 Q '“这些表达自由、 宗教崇拜自由”' -  '这些' '些表' '表达' '达自' '自由' '宗教' '教崇' '崇拜' '拜自' '自由'
       
   428 i:..............XX...................................................................................................
       
   429 j:..............XX...................................................................................................
       
   430 c:...................................................................................................................
       
   431 ok
       
   432 
       
   433 Q 'twitt*' -  'twitt'
       
   434 i:...........................XX..X...................................................................................
       
   435 j:...........................XX..X...................................................................................
       
   436 c:...................................................................................................................
       
   437 ok
       
   438 
       
   439 Q 'ap*' -  'ap'
       
   440 i:................................................X..X.......X...............X....X..................................
       
   441 j:................................................X..X.......X...............X....X..................................
       
   442 c:...................................................................................................................
       
   443 ok
       
   444 
       
   445 Q '以*' -  '以'
       
   446 i:..X.X..........................X.......X..................................................X........................
       
   447 j:..X.X..........................X.......X..................................................X........................
       
   448 c:...................................................................................................................
       
   449 ok
       
   450 
       
   451 Index size was 17 KB
       
   452 Improved in 2 / 75
       
   453 Deteriorated in 14 / 75