资源简介

中文敏感词库、各种停用词表以及各种分词词库,txt格式方便实用

资源截图

代码片段和文件信息

# -*- coding: UTF-8 -*- 
f = open(‘30wChinsesSeqDic.txt‘)
fout = open(‘30wdict.txt‘‘a‘)
count = 0
for line in f:
temp = line.strip()
temp_list = temp.split(‘ ‘)
temp_sublist = temp_list[1].split(‘\t‘)
if len(temp_sublist[1]) > 2:
count = count + 1
print temp_sublist[1]
fout.write(temp_sublist[1] + ‘\n‘)
f.close()
fout.close()
#print count

 属性            大小     日期    时间   名称
----------- ---------  ---------- -----  ----
     目录           0  2018-08-21 01:08  Chinese-master\
     文件        4606  2018-08-21 01:08  Chinese-master\README.md
     文件    23002183  2018-08-21 01:08  Chinese-master\dict.dat
     目录           0  2018-08-21 01:08  Chinese-master\dict\
     文件        4144  2018-08-21 01:08  Chinese-master\dict\中文停用词库.txt
     文件        4589  2018-08-21 01:08  Chinese-master\dict\哈工大停用词表.txt
     文件        6364  2018-08-21 01:08  Chinese-master\dict\四川大学机器智能实验室停用词库.txt
     文件        9331  2018-08-21 01:08  Chinese-master\dict\百度停用词列表.txt
     文件       13289  2018-08-21 01:08  Chinese-master\stopwords.dat
     目录           0  2018-08-21 01:08  Chinese-master\中文分词词库整理\
     目录           0  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\
     文件     7527940  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\30wChinsesSeqDic.txt
     文件     3115128  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\30wChinsesSeqDic_clean.txt
     文件     2318318  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\30wdict.txt
     文件     3186211  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\30wdict_utf8.txt
     文件      594098  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\42537条伪原创词库.txt
     目录           0  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\QQ拼音词库\
     文件        7056  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\QQ拼音词库\QQpinyin.jpg
     文件         119  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\QQ拼音词库\QQ拼音词库导出.txt
     文件     2355763  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\dict.txt
     文件      565268  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\fingerDic.txt
     文件     1681830  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\httpcws_dict.txt
     文件     1207622  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\out.txt
     文件         365  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\thirtyw.py
     文件         513  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\thirtyw.pyc
     文件          49  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\www.5eyi.com.txt
     文件      300428  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\五笔词库.TXT
     文件     1685340  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\四十万可用搜狗txt词库.txt
     文件      784176  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\四十万汉语大词库.txt
     文件         123  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\搜狗词库方法.txt
     文件      794887  2018-08-21 01:08  Chinese-master\中文分词词库整理\中文分词词库整理\百度分词词库.txt
............此处省略8个文件信息

评论

共有 条评论