Update README.md

Update lucene to 8.1.0
更新搜狗2019流行词汇；
2019-05-27 13:23:53 +08:00 · 2019-05-27 10:23:32 +08:00 · 2019-05-27 10:21:00 +08:00
27 changed files with 15558 additions and 103 deletions
@@ -21,15 +21,15 @@ ik-analyzer for solr 7.x-8.x
 | word | 64.2万 | 2014年 |
 | jieba | 58.4万 | 2012年 |
 | jcesg | 16.6万 | 2018年 |
-| sougou词库 | 115.2万 | 2018年 |
-#### 将以上词库进行整理后约188.5万条词汇；
+| sougou词库 | 115.2万 | 2019年 |
+#### 将以上词库进行整理后约187.1万条词汇；
 #### 添加动态加载词典表功能，在不需要重启solr服务的情况下加载新增的词典。
 * IKAnalyzer的原作者为林良益<linliangyi2007@gmail.com>，项目网站为<http://code.google.com/p/ik-analyzer>
 * 该项目动态加载功能根据博主[@星火燎原智勇](http://www.cnblogs.com/liang1101/articles/6395016.html)的博客进行修改，其GITHUB地址为[@liang68](https://github.com/liang68)


 ## 使用说明
-* jar包下载地址：[![GitHub version](https://img.shields.io/badge/version-8.0.0-519dd9.svg)](https://search.maven.org/remotecontent?filepath=com/github/magese/ik-analyzer/8.0.0/ik-analyzer-8.0.0.jar)
+* jar包下载地址：[![GitHub version](https://img.shields.io/badge/version-8.1.0-519dd9.svg)](https://search.maven.org/remotecontent?filepath=com/github/magese/ik-analyzer/8.1.0/ik-analyzer-8.1.0.jar)
 * 历史版本：[![GitHub version](https://img.shields.io/maven-central/v/com.github.magese/ik-analyzer.svg?style=flat-square)](https://search.maven.org/search?q=g:com.github.magese%20AND%20a:ik-analyzer&core=gav)

    ```console
@@ -37,7 +37,7 @@ ik-analyzer for solr 7.x-8.x
    <dependency>
        <groupId>com.github.magese</groupId>
        <artifactId>ik-analyzer</artifactId>
-        <version>8.0.0</version>
+        <version>8.1.0</version>
    </dependency>
    ```

@@ -91,6 +91,10 @@ ik-analyzer for solr 7.x-8.x


 ## 更新说明
+- `2019-05-27:` 
+    - 升级lucene版本为`8.1.0`
+    - 优化原词典部分重复词语
+    - 更新搜狗2019最新流行词汇词典，约20k词汇量
 - `2019-05-15:` 升级lucene版本为`8.0.0`，并支持Solr8使用
 - `2019-03-01:` 升级lucene版本为`7.7.1`
 - `2019-02-15:` 升级lucene版本为`7.7.0`
@@ -4,7 +4,7 @@

    <groupId>com.github.magese</groupId>
    <artifactId>ik-analyzer</artifactId>
-    <version>8.0.0</version>
+    <version>8.1.0</version>
    <packaging>jar</packaging>

    <name>ik-analyzer-solr</name>
@@ -13,7 +13,7 @@

    <properties>
        <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
-        <lucene.version>8.0.0</lucene.version>
+        <lucene.version>8.1.0</lucene.version>
        <javac.src.version>1.8</javac.src.version>
        <javac.target.version>1.8</javac.target.version>
        <maven.compiler.plugin.version>3.3</maven.compiler.plugin.version>
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.cfg;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.cfg;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.core;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.core;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.core;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.core;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.core;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.core;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.core;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.core;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.core;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.core;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.core;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.dic;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.dic;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.dic;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.lucene;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.lucene;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.lucene;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.lucene;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.query;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.query;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.sample;
@@ -1,6 +1,6 @@
 /*
- * IK 中文分词  版本 8.0.0
- * IK Analyzer release 8.0.0
+ * IK 中文分词  版本 8.1.0
+ * IK Analyzer release 8.1.0
 *
 * Licensed to the Apache Software Foundation (ASF) under one or more
 * contributor license agreements.  See the NOTICE file distributed with
@@ -21,8 +21,8 @@
 * 版权声明 2012，乌龙茶工作室
 * provided by Linliangyi and copyright 2012 by Oolong studio
 *
- * 8.0.0版本 由 Magese (magese@live.cn) 更新
- * release 8.0.0 update by Magese(magese@live.cn)
+ * 8.1.0版本 由 Magese (magese@live.cn) 更新
+ * release 8.1.0 update by Magese(magese@live.cn)
 *
 */
 package org.wltea.analyzer.sample;
Author	SHA1	Message	Date
magese	2ebf31fed5	Update README.md	2019-05-27 13:23:53 +08:00
magese	fd35153cce	Update lucene to 8.1.0	2019-05-27 10:23:32 +08:00
magese	48a0234bb6	更新搜狗2019流行词汇；	2019-05-27 10:21:00 +08:00