ubnt解决方案
查看: 1997|回复: 9

[软件求助] TXT巨大文档处理

[复制链接]

32

回帖

107

积分

95 小时

在线时间

上等兵

注册时间
2013-8-11
金币
58 个
威望
0 个
荣誉
0 个
累计签到:4 天
连续签到:1 天
[LV.20]漫游旅程
发表于 2022-6-5 17:34 来自手机 |显示全部楼层
现有需求如下:A .TXT文件 与 B .TXT文件,其中B文件巨大,100G以上,包含有部分A文件的内容,请问有软件能两文件对比 ,不合并只在B文件中去掉与A文件重复的内容,谢谢盼复 备注 文件都比较巨大100G以上

618

回帖

5105

积分

992 小时

在线时间

中校

30天持久勋章

注册时间
2013-10-31
金币
4364 个
威望
1 个
荣誉
0 个
累计签到:287 天
连续签到:2 天
[LV.365]无线熟人
发表于 2022-6-6 06:32 |显示全部楼层
楼猪问题比较刁钻!目前有三个问题,第一个呢,有个软件可以去重复内容,但是必须合并成一个文件。第二个呢,有个批处理能比对两个文本,但是输出也只能输出一个文件。第三个问题楼猪可能不能接受,如果就算能处理,加入用批处理处理的话,预计电脑不断的干1个月才能干好,而且我也没有想到能输出两个文件的代码!
. o4 k; D% |$ E0 [. N9 k- ?- ?5 }! G2 I3 Q
综上,建议:用软件吧文件合并成一个文件,去了重复后,在分割成小一点的文件,没有更好的解决办法。如果必须要达到楼猪的要求也不是不可以,找个编程群定制软件,预计5位数能给您出专门的软件(当然这个价格我也不清楚)!
回复

使用道具 举报

371

回帖

3493

积分

436 小时

在线时间

少校

超级管理员QQ 2632560408

注册时间
2019-5-1
金币
3077 个
威望
-4 个
荣誉
0 个

尚未签到

发表于 2022-6-6 08:46 |显示全部楼层
有需要可联系我,曾成功处理过,a  b 各500G左右文件
跑包QQ 2632560408
回复

使用道具 举报

32

回帖

107

积分

95 小时

在线时间

上等兵

注册时间
2013-8-11
金币
58 个
威望
0 个
荣誉
0 个
累计签到:4 天
连续签到:1 天
[LV.20]漫游旅程
发表于 2022-6-6 08:49 来自手机 |显示全部楼层
爱人1516 发表于 2022-6-6 08:46+ j* V; `3 M6 \1 u  U& Q
有需要可联系我,曾成功处理过,a  b 各500G左右文件

+ `, H. @$ s% x/ \1 Y" L大神如何联系到您
回复

使用道具 举报

371

回帖

3493

积分

436 小时

在线时间

少校

超级管理员QQ 2632560408

注册时间
2019-5-1
金币
3077 个
威望
-4 个
荣誉
0 个

尚未签到

发表于 2022-6-6 08:50 |显示全部楼层
mijackson 发表于 2022-6-6 08:49+ C9 A# R2 v" E5 B- A1 X4 U
大神如何联系到您

* c. F5 Y9 R& L* a' R/ X( z+ }加我头像位置Q号
跑包QQ 2632560408
回复

使用道具 举报

32

回帖

107

积分

95 小时

在线时间

上等兵

注册时间
2013-8-11
金币
58 个
威望
0 个
荣誉
0 个
累计签到:4 天
连续签到:1 天
[LV.20]漫游旅程
发表于 2022-6-6 10:21 |显示全部楼层
爱人1516 发表于 2022-6-6 08:50- a2 c4 V: G3 T+ Q7 k  l/ `; o
加我头像位置Q号
* R2 V+ {" C' |" J) h
已发q 加下我 名字 天下 万分感谢
回复

使用道具 举报

5

回帖

86

积分

5 小时

在线时间

上等兵

注册时间
2013-7-25
金币
80 个
威望
0 个
荣誉
0 个
累计签到:3 天
连续签到:0 天
[LV.20]漫游旅程
发表于 2022-8-31 13:37 |显示全部楼层
506751 发表于 2022-6-6 06:32
6 v3 R( m+ g1 T! e& s楼猪问题比较刁钻!目前有三个问题,第一个呢,有个软件可以去重复内容,但是必须合并成一个文件。第二个呢 ...

: d6 R, U. z" a8 I# x+ b求第一和第二
回复

使用道具 举报

2294

回帖

3万

积分

3723 小时

在线时间

大校

灌水天才正义勋章

注册时间
2009-11-15
金币
29412 个
威望
23 个
荣誉
5 个
累计签到:39 天
连续签到:0 天
[LV.50]初入江湖
发表于 2022-9-7 16:57 |显示全部楼层
sort -u a.txt >aa.txt & K& z5 s- d- P0 @% G$ G& S2 l
; |0 Y+ c4 R3 }& U. a1 d
sort -u b.txt >bb.txt 2 L+ d8 F. n6 K0 Q+ {

9 b6 _; A# p8 G4 e$ Ncomm -23 aa.txt bb.txt >a-b.txt 5 x1 D. o) r( s+ N- T1 |
教程出处:
" t+ s" q$ u0 T8 phttps://www.anywlan.com/thread-440498-1-1.html
回复

使用道具 举报

2294

回帖

3万

积分

3723 小时

在线时间

大校

灌水天才正义勋章

注册时间
2009-11-15
金币
29412 个
威望
23 个
荣誉
5 个
累计签到:39 天
连续签到:0 天
[LV.50]初入江湖
发表于 2022-9-7 16:58 |显示全部楼层
sort -u a.txt >aa.txt
+ V* r3 L- L9 p' d; r) L9 l' V4 a1 B
# P) L$ Y8 @" xsort -u b.txt >bb.txt 1 B4 j2 s  \# A# x. M) V

* a  ?1 i+ t# {) G: [4 Mcomm -23 aa.txt bb.txt >a-b.txt
4 c/ ^- z4 L  l% r/ b" c教程出处:6 c) u* w9 L7 l4 C9 M' E2 c2 t  l
https://www.anywlan.com/thread-440498-1-1.html
回复

使用道具 举报

32

回帖

107

积分

95 小时

在线时间

上等兵

注册时间
2013-8-11
金币
58 个
威望
0 个
荣誉
0 个
累计签到:4 天
连续签到:1 天
[LV.20]漫游旅程
发表于 2022-9-12 00:21 |显示全部楼层
随风无限 发表于 2022-9-7 16:584 W9 j3 {4 V: p8 G/ N9 K4 t
sort -u a.txt >aa.txt + v" m& {, p$ D$ A  c9 i4 }
$ Z- \5 X2 Q  T2 v
sort -u b.txt >bb.txt
/ I0 d5 S; M0 K; e$ ]& v- u
感谢大神 学习您的帖子终于走少了很多弯路!
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册 微信登录

本版积分规则

Archiver | 手机版 | 无线门户 ( 粤ICP备11076993号|粤公网安备44010602008359号 ) |网站地图

GMT+8, 2025-11-1 03:18

返回顶部 返回列表