24小时热门版块排行榜    

查看: 902  |  回复: 7
当前只显示满足指定条件的回帖,点击这里查看本话题的所有回帖

liusinuo

木虫 (小有名气)

[求助] 倾尽所有积分,求如何截取一个6G大的文件中指定行并生成新的文件 已有3人参与

各位大神,我现在有个6G大的文件,里面共五百多万行,以大括号分行,见下,最后两行其实为一行,因为都在一个大括号里
{(23,23,3),(4,34,54),(23,343,43),(23,23,54)}
{(23,23,3),(4,34,54),(23,343,43),(23,23,54)}
{(23,23,3),(4,34,54),(23,343,43),(23,23,54),(454,56),(3,456,78),
(34,34,45),(45,54,676),(23,45,45)}
我现在想用ultraedit按行截取该文件,并生成几个新的文件,请大神帮忙!或者用其他工具和编程方法也行,比如matlab、Python等、、、跪谢!!
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

z8261337

新虫 (初入文坛)

【答案】应助回帖

感谢参与,应助指数 +1
按行读取的话,可以这样,开一个线程,每次读取固定大小的文件,比如512k,读进来后就放到一个文件块列表里,列表大小固定,每个文件块编个序号。
然后,开多线程,对列表里的文件块进行处理,查找{}找出一行一行的数据,遇到结尾的半行数据就和
比当前文件块编号大1的文件块首行合并。

[ 发自手机版 http://muchong.com/3g ]
6楼2014-08-31 10:54:14
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
查看全部 8 个回答

cooooldog

铁杆木虫 (著名写手)

ส็็็

你6G文件什么格式? 推测是txt格式??

选取的行有什么特征?区别于其它行?
ส็็็็็็็็็็็็็็็็็็็็
2楼2014-08-30 10:37:54
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

NicoleLas

木虫 (正式写手)

还没有用UltraEdit打开过这么大的文件呢..............我也不是很熟悉。
Be water, my friend.
3楼2014-08-30 10:45:32
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

liusinuo

木虫 (小有名气)

引用回帖:
2楼: Originally posted by cooooldog at 2014-08-30 10:37:54
你6G文件什么格式? 推测是txt格式??

选取的行有什么特征?区别于其它行?

是PKL格式的,行没有特征,只是行与行之间是用大括号{}分开的~~
4楼2014-08-30 11:52:13
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[基金申请] 系统查不到 +11 董八千 2026-08-26 11/550 2026-08-28 18:06 by Leogzhya
[基金申请] 基金不中,共勉 +11 eulota 2026-08-26 11/550 2026-08-28 14:22 by 火星超人xi
[基金申请] 麻烦专家们看看评委们的意见(F口面上) +4 gdd2018 2026-08-28 9/450 2026-08-28 14:22 by jklily
[基金申请] 2026年叶企孙基金 +3 bud_bud 2026-08-27 6/300 2026-08-28 11:53 by bud_bud
[基金申请] 基金系统什么内容也没有 30+4 winsaint 2026-08-27 9/450 2026-08-28 11:06 by maolC
[基金申请] 怎么查啊 +6 huang1991js 2026-08-26 6/300 2026-08-28 08:42 by winsaint
[基金申请] 哪位高人中了,把查询到的截图贴出来让我看看,让我长长见识 +5 yuleib84 2026-08-26 6/300 2026-08-28 00:02 by yudaoqian88
[基金申请] 基金未中,这种答复是模板吗? +5 zhaosm1982 2026-08-27 6/300 2026-08-27 16:00 by lfy8008
[基金申请] 看板上这么多中的,有点像50人群里49个人都是骗子的那种感觉…… +5 a089 2026-08-26 6/300 2026-08-27 14:05 by jonewore
[基金申请] 为什么 国际(地区)合作与交流项目 没有放榜? 10+3 majunge000 2026-08-26 11/550 2026-08-27 08:42 by 北京莱茵编辑
[基金申请] 我不理解! +15 Edward_pc 2026-08-26 23/1150 2026-08-26 20:34 by zzuzxg
[基金申请] 2026年的国家社科基金项目通讯评审的新规则与新动向、新挑战 +7 process2012 2026-08-23 10/500 2026-08-26 19:23 by hmhminy
[基金申请] 范进中举一文的中心思想 +9 炎黄贵胄 2026-08-22 10/500 2026-08-26 15:40 by semaglutide
[基金申请] 国合里面能看到了 +7 一怀馨秋 2026-08-26 7/350 2026-08-26 11:23 by zhaosm1982
[基金申请] 国际合作可查了,中了面上 (EPI+1)(金币+50) +18 Ldrop2023 2026-08-26 18/900 2026-08-26 11:15 by cmrandy
[基金申请] 今天务委会开完了,明天出结果吗 +19 angus9576 2026-08-25 23/1150 2026-08-26 10:03 by zp519
[基金申请] 在坚冰还盖着北海的时候,我看到了怒放的梅花。 (金币+10) +6 ziyangfang 2026-08-25 9/450 2026-08-25 20:26 by huagongfeihu
[基金申请] 明天应该可查了!? +6 chengyan1220 2026-08-23 6/300 2026-08-25 19:45 by zfd97
[基金申请] 没有任何消息-是不是就凉了 +9 图啦图啦 2026-08-24 10/500 2026-08-25 11:59 by 南海小哥
[教师之家] 跳槽后在研项目怎么办? +5 简单化xn 2026-08-22 10/500 2026-08-23 12:38 by 简单化xn
信息提示
请填处理意见