实验 词汇分析
1）使用任意分词方法编写算法实现汉语自动分词程序；
2）编写直接调用分词工具(jieba分词，中科院分词等)进行分词的程序;
3）用两种方法，给出至少50个句子的分词结果（以附件形式）；
4）分别计算出两种分词结果的正确率，给出计算依据。
2021-06-07 14:07:10
33.55MB
1
jieba分词的自定义词典：使用jieba分词对语料进行分词之前，需要先载入，载入代码为jieba.load_userdict("userdict.txt")。
2021-06-03 17:12:06
7.43MB
结巴分词用到的资源文件sougou.dict，使用方式见本人的博客。https://blog.csdn.net/JohnnyChu/article/details/100920349
2021-05-10 03:07:11
1.05MB
1
本人最近在用lucene做一些东西，需要用到jieba分词器。但csdn上的资源都是需要积分的，一个开源软件竟然还要积分。。。从github找的，分享给大家吧
2021-05-09 17:35:27
2.45MB
1
将需要分词进行词性标注的句子存放在corpus文本文件（自建）中，最好是每句话存为一行。注：corpus文件需放在代码所在文件夹里。运行代码，自动生成一个outcome文本文件，分词词性标注结果就在此文本里。
2021-04-24 18:41:13
715B
1
前向最大匹配算法、后向最大匹配算法、jieba分词，使用python，完整的代码和运行结果
2021-04-15 13:03:27
108KB
该资源包括jieba中文分词所需要的词库，中文中国知网Hownet，清华大学李军词库，情感词典词库，词性分词词库等资源，众多词库资源方便与分词使用，在人工智能和nlp上使用方便
2021-04-14 13:53:52
5.23MB
1
结巴中文分词停用表，整合百度分词、哈工大等停用词表2000余条数据
即拿即用，效果好，提升分词速度准确率。
2021-03-25 14:23:10
16KB
1
主要介绍了Django实现whoosh搜索引擎使用jieba分词，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2021-03-24 14:16:24
236KB
1