100万文本比较如何能够快速比较出来

soutyc · 发表于 2010-9-26 10:39:13

各位老师，请教下，比较两个文本文件（按行比较），取出相同的行和不相同的行，怎么做比较快？100万的数据，现在用的是删除法，一样的行内容就删除，这样比较下来后面就变的快些，可实际下来100万根本处理不了，慢的很，20万都要7分钟，30万近2小时。另外一种将两个文本排序后比较，100万数据比较也是有问题，这些都是数组比较。请问老师还有什么好的办法或实例，谢谢！
文本一般就是字母和数字！

小磊 · 发表于 2010-9-26 11:16:10

同时开启多条线程，每条分析10万差不多

soutyc · 发表于 2010-9-26 22:56:40

可是10条线程的话，就不能完整比较了，因为第一个文件的第一行数据可能就在第200000行，如果拆分的话，那就不能将第一行比较到20万行，那如果是顺序比较的话，第10万行和10万零一行一样呢，拆分了这样还行吗？

微凉 · 发表于 2010-9-27 05:38:21

打开内存
载入内存, 速度会快很多的

soutyc · 发表于 2010-9-27 09:32:58

楼上的老大，如何载入内存？我用的是数组！我把代码发出来，老大能帮我改一下？

xbzx · 发表于 2010-9-29 14:29:10

给个100万的文本，或你的源码帮你修改。

		自动登录	找回密码
密码			注册

[易语言] 100万文本比较如何能够快速比较出来