论坛 › 互助跑包区 › 花了四天的时间，80多G字典，合并去重复，去掉8位以下，去掉20位以上，最后合计35.3G

我来WAN一玩 发表于 2015-11-5 08:00

我被大标题骗了~

zho12376 发表于 2015-11-5 10:35

清烟仔 发表于 2015-11-4 21:04
想忽悠小白吧

我只有呵呵，有什么必要么？有必要么，有必要么。:L

zho12376 发表于 2015-11-5 10:37

vcxz 发表于 2015-11-4 16:43
楼主好
等你把网上所有已经公开的字典全部合并，大概是860多GB，去重后，大概260多GB（记不太准确了） ...

原来你是大神啊!小弟佩服

tdj815 发表于 2015-11-5 12:37

:lol没有地址分享吗？

随风飘 发表于 2015-11-5 13:54

本帖最后由 随风飘 于 2015-11-5 13:57 编辑

type *
合并这样就可以几个字符而已
去重才是重点
用以前大神说的-u两个字符就可以完成去重这个大工程。:lol



http://www.anywlan.com/thread-151122-1-1.html
代码通用的

滴水瓦 发表于 2015-11-6 14:27

大幅vdjgy你快放开mu'y'g

沐黍思道 发表于 2015-11-6 15:24

字典没有提供下载吗？

yiyi881 发表于 2015-11-9 09:51

建议搞个全网字典大合并:D

sunbh0829 发表于 2015-11-11 21:01

dddddddddddddddddddddddd

人间幽灵0913 发表于 2015-11-14 00:08

既然已经做了就拿出来给大家分享一下活跃论坛，大男人别小家子气。

呕吐曼 发表于 2015-11-14 11:52

建议楼主分享一下

lxc7059 发表于 2015-11-14 12:21

很大了。我的机器跑的慢。

查看完整版本: 花了四天的时间，80多G字典，合并去重复，去掉8位以下，去掉20位以上，最后合计35.3G