开启辅助访问 切换到宽版

精易论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

用微信号发送消息登录论坛

新人指南 邀请好友注册 - 我关注人的新帖 教你赚取精币 - 每日签到


求职/招聘- 论坛接单- 开发者大厅

论坛版规 总版规 - 建议/投诉 - 应聘版主 - 精华帖总集 积分说明 - 禁言标准 - 有奖举报

查看: 18447|回复: 116
收起左侧

[易源码分享] 极速操作大文件 读入文件()大文件读不全的解决方案

[复制链接]
结帖率:94% (110/117)
发表于 2019-9-11 18:38:36 | 显示全部楼层 |阅读模式   山东省潍坊市
分享源码
界面截图:
是否带模块: -
备注说明: -
本帖最后由 再哭就吻你 于 2019-9-12 01:25 编辑

本源码是实现了一个非常简单的小功能.就是单纯的字符串替换但可以帮你解决两个问题:
第一:处理效率的问题

第二:大文件 读取读不全的问题
一个朋友需要替换几百兆的txt文件,但是打开就会卡死,.于是帮他写了一个.经过测试1G多的文件  替换仅需2秒多一点.
(理论上来说  可处理的文件大小是无限制的!)

解决大文件读取不全的原理:按照指定的字节数来分批读取文件,进行处理.再分批写入
解决效率问题原理:尽量使用字节集对象会提升效率(以前发过一篇效率对比帖子.快速字节集对象 是普通的文本处理函数效率的50-100倍左右)如果你有更快的处理方式.欢迎来分享.感谢!
用的到的朋友来下载吧!

大文件处理例子.rar (7.87 KB, 下载次数: 1179)

点评

秃头哪吒头像好评   江苏省徐州市  发表于 2020-5-29 04:38
比如我要将 测试 这俩中文字 替换为 test.然后中间部分 可能 测试 这俩字正好在字节集区段的末尾,被分开了..就会触发bug 如你代码里的 102400 这个位置,我中文在 102397-102404 这个区段   浙江省温州市  发表于 2019-9-14 22:15
+888荣誉点 原来不过如此,学习了。谢谢楼主大大!   浙江省绍兴市  发表于 2019-9-13 13:22
+99999金币 非常感谢,好作品,这是我在精易论坛几年来看过处理超大文件最好最快的作品。THANKS   江苏省淮安市  发表于 2019-9-11 23:11

评分

参与人数 10好评 +9 精币 +17 收起 理由
dwcq + 1 支持开源~!感谢分享
yoaan + 1 + 1 支持开源~!感谢分享
影知 + 1 + 3 支持开源~!感谢分享
易语言资源网 + 1 + 3 支持开源~!感谢分享
shituo + 1 大神,请收下我的膝盖
lianzuo123 + 1 思路不错,但是可能存在BUG
kyo9766 + 1 + 2 新技能已get√
钱乐 + 1 + 2 非常感谢~!!雪中送炭,希望多出这样的好作品
冰点 + 1 + 3 支持开源~!感谢分享
情雅 + 1 + 2 支持开源~!感谢分享

查看全部评分


本帖被以下淘专辑推荐:

签到天数: 3 天

发表于 前天 12:11 | 显示全部楼层   河南省驻马店市
66666666666666666
回复 支持 反对

使用道具 举报

结帖率:29% (5/17)
发表于 2024-10-5 21:49:40 | 显示全部楼层   广东省东莞市
支持开源~!感谢分享
回复 支持 反对

使用道具 举报

签到天数: 21 天

发表于 2024-8-27 10:57:03 | 显示全部楼层   湖北省武汉市
支持开源~!感谢分享
回复 支持 反对

使用道具 举报

结帖率:0% (0/1)

签到天数: 9 天

发表于 2024-7-19 16:04:15 | 显示全部楼层   河北省邯郸市
支持开源~!感谢分享
回复 支持 反对

使用道具 举报

签到天数: 14 天

发表于 2024-4-28 09:25:39 | 显示全部楼层   广东省茂名市
    支持开源~!感谢分享
回复 支持 反对

使用道具 举报

结帖率:0% (0/1)
发表于 2024-4-10 20:20:30 | 显示全部楼层   福建省宁德市
11111111111111111111
回复 支持 反对

使用道具 举报

结帖率:91% (10/11)

签到天数: 6 天

发表于 2024-3-17 03:35:45 | 显示全部楼层   江苏省淮安市
        支持开源~!感谢分享
回复 支持 反对

使用道具 举报

结帖率:78% (7/9)

签到天数: 8 天

发表于 2024-1-27 18:09:18 | 显示全部楼层   广东省揭阳市
  支持开源~!感谢分享
回复 支持 反对

使用道具 举报

结帖率:0% (0/1)
发表于 2024-1-7 11:46:16 | 显示全部楼层   江西省景德镇市
感谢大佬
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则 致发广告者

发布主题 收藏帖子 返回列表

sitemap| 易语言源码| 易语言教程| 易语言论坛| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论,本站内容均为会员发表,并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的,严禁用于非法目的,否则造成一切后果自负!如帖子内容侵害到你的权益,请联系我们!
防范网络诈骗,远离网络犯罪 违法和不良信息举报电话0663-3422125,QQ: 793400750,邮箱:wp@125.la
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备12094385号-1) 粤公网安备 44522102000125 增值电信业务经营许可证 粤B2-20192173

快速回复 返回顶部 返回列表