查看: 463|回复: 12

字典去重复工具

[复制链接]

主题

好友

103

积分

上等兵

签到天数: 4 天

[LV.2]偶尔看看I

发表于 2018-7-25 15:10 |显示全部楼层
Anywlan微信公众号
本帖最后由 mortimer7866 于 2018-7-26 08:15 编辑

本人测试是用的网上找的字典集合

这个包中字典比较多,所以需要的内存比较大,本人使用32G内存测试,数据全部读取完成之后占用内存70%左右

程序运行图:

从图中可以看到所有加载的字典中一共有269451685组密码,大概需要几个小时的处理。
上附件:
大家使用程序的时候如果遇到有什么BUG,可以回帖反馈,有时间我可以改改。
处理完成后结果保存在D盘的result.txt文件中

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?加入

x

评分

1

查看全部评分

主题

好友

4663

积分

少校

签到天数: 499 天

[LV.9]以坛为家II

发表于 2018-7-26 02:11 |显示全部楼层
谢谢分享
回复

使用道具 举报

主题

好友

353

积分

少尉

签到天数: 28 天

[LV.4]偶尔看看III

发表于 2018-7-26 07:48 |显示全部楼层
谢谢分享了!
回复

使用道具 举报

主题

好友

103

积分

上等兵

签到天数: 4 天

[LV.2]偶尔看看I

发表于 2018-7-26 07:49 |显示全部楼层
本帖最后由 mortimer7866 于 2018-7-26 08:18 编辑

一楼的附件已重新上传,请大家下载最新的使用
回复

使用道具 举报

主题

好友

708

积分

中尉

签到天数: 61 天

[LV.6]常住居民II

发表于 2018-7-26 15:34 |显示全部楼层
谢谢楼主分享。
回复

使用道具 举报

主题

好友

1万

积分

上校

签到天数: 1405 天

[LV.10]以坛为家III

发表于 2018-7-26 16:25 |显示全部楼层
谢谢楼主分享
回复

使用道具 举报

主题

好友

1万

积分

上校

签到天数: 1 天

[LV.1]初来乍到

发表于 2018-7-26 22:50 来自手机 |显示全部楼层
兄弟你这个要做出特点才行吧,就去个重就算了?还会有下文不
回复

使用道具 举报

主题

好友

9967

积分

中校

签到天数: 1043 天

[LV.10]以坛为家III

发表于 2018-7-27 08:14 |显示全部楼层

谢谢分享了!
回复

使用道具 举报

主题

好友

103

积分

上等兵

签到天数: 4 天

[LV.2]偶尔看看I

发表于 2018-7-27 09:42 |显示全部楼层
上上网 发表于 2018-7-26 22:50
兄弟你这个要做出特点才行吧,就去个重就算了?还会有下文不

兄弟你觉得我需要做成什么样?
回复

使用道具 举报

主题

好友

2万

积分

版主

签到天数: 28 天

[LV.4]偶尔看看III

发表于 2018-7-28 09:20 |显示全部楼层
mortimer7866 发表于 2018-7-27 09:42
兄弟你觉得我需要做成什么样?

去重其实不难,方法有很多,但是要做到效率与资源占用兼顾就比较两难了。往往一把好刀赛过一堆普普通通的工具。支持楼主!
回复

使用道具 举报

主题

好友

103

积分

上等兵

签到天数: 4 天

[LV.2]偶尔看看I

发表于 2018-7-28 15:01 |显示全部楼层
viviczh 发表于 2018-7-28 09:20
去重其实不难,方法有很多,但是要做到效率与资源占用兼顾就比较两难了。往往一把好刀赛过一堆普普通通的 ...

谢谢版主支持
回复

使用道具 举报

主题

好友

56

积分

新兵上阵

签到天数: 4 天

[LV.2]偶尔看看I

发表于 2018-7-28 16:24 |显示全部楼层
谢谢分享
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 加入

本版积分规则

关闭

站长推荐 上一条 /1 下一条

Archiver| 手机版| 中国无线门户 ( 粤ICP备11076993 ) |网站地图 

GMT+8, 2018-8-18 20:27

Powered by Discuz! X3.4

© 2003-2013 广州威思信息科技有限公司

返回顶部 返回列表