开启辅助访问 切换到宽版

精易论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

用微信号发送消息登录论坛

新人指南 邀请好友注册 - 我关注人的新帖 教你赚取精币 - 每日签到


求职/招聘- 论坛接单- 开发者大厅

论坛版规 总版规 - 建议/投诉 - 应聘版主 - 精华帖总集 积分说明 - 禁言标准 - 有奖举报

查看: 6818|回复: 39
收起左侧

[易源码分享] 多线程 读入大文件 不崩溃的方法

[复制链接]
结帖率:56% (20/36)
发表于 2021-9-17 19:11:18 | 显示全部楼层 |阅读模式   广东省茂名市
分享源码
界面截图: -
是否带模块: -
备注说明: -
今天遇到这个问题,在多线程中用【读入文件("y.txt")】命令,读入比较大点的文件到变量中时(文件才400多M),就会显示分配内存失败,然后程序就崩溃了!
这个问题好像只在多线程中才会存在,不太知道是什么原因!被这个问题搞一天了!

所以就写了这个分段读大文件子程序,能解决多线程读大文件崩溃问题,希望对你也有用吧!


0.png

如果在多线程内直接读入比较大的文件,程序就崩溃!
不知道是易语言分配内存多少M比较好,我就分100M一段的方式读入到进数组中!


Desktop.zip

1.77 KB, 下载次数: 173, 下载积分: 精币 -2 枚

点评

感谢楼主 正找方法呢 感谢   山东省德州市  发表于 2021-9-20 11:27

评分

参与人数 5好评 +5 精币 +3 收起 理由
循环判断首 + 1 YYDS~!
bianyuan456 + 1 楼主为啥不试试E2EE的读入文本文件()这个呢!?
小观众 + 1 新技能已get√
易语言资源网 + 1 + 3 支持开源~!感谢分享
被封禁言 + 1 支持开源~!感谢分享

查看全部评分


签到天数: 4 天

发表于 2021-9-17 19:30:04 | 显示全部楼层   广东省阳江市
............
回复 支持 反对

使用道具 举报

结帖率:100% (6/6)

签到天数: 17 天

发表于 2021-9-17 20:21:56 | 显示全部楼层   广东省广州市
看看是什么,支持开源~!感谢分享
回复 支持 反对

使用道具 举报

结帖率:0% (0/1)

签到天数: 2 天

发表于 2021-9-17 21:16:51 | 显示全部楼层   浙江省湖州市
好东西 谢谢分享
回复 支持 反对

使用道具 举报

签到天数: 20 天

发表于 2021-9-17 22:51:57 | 显示全部楼层   广东省东莞市
支持开源~!感谢分享
回复 支持 反对

使用道具 举报

签到天数: 19 天

发表于 2021-9-18 03:53:56 | 显示全部楼层   江西省赣州市
...............
回复 支持 反对

使用道具 举报

结帖率:67% (2/3)
发表于 2021-9-18 08:30:25 | 显示全部楼层   四川省成都市
#在这里快速回复#        支持开源~!感谢分享
回复 支持 反对

使用道具 举报

结帖率:86% (19/22)
发表于 2021-9-18 11:13:31 | 显示全部楼层   四川省成都市
支持开源~!感谢分享
回复 支持 反对

使用道具 举报

结帖率:86% (19/22)
发表于 2021-9-18 11:22:25 | 显示全部楼层   四川省成都市
如果在多线程内直接读入比较大的文件,程序就崩溃!
回复 支持 反对

使用道具 举报

结帖率:67% (2/3)

签到天数: 2 天

发表于 2021-9-18 12:19:50 | 显示全部楼层   江西省赣州市
本帖最后由 东方优源 于 2021-9-18 12:21 编辑
  
子程序名返回值类型公开备 注
分段读入大文件 分段方式读入到数组,多线程读取500M以上文件不崩溃
参数名类 型参考可空数组备 注
参_文件路径文本型欲打开文件路径
参_分段大小长整数型分段大小单位(M)如100M设置为:100
参_字节集数组字节集返回到字节集数组变量
变量名类 型静态数组备 注
局_文件号整数型 
局_文件大小长整数型 
局_分段大小长整数型 
局_字节集字节集 
局_第几段整数型 
局_移动位置长整数型 
局_文件号 = 打开文件 (参_文件路径, 1, )
局_文件大小 = 取文件长度 (局_文件号)
局_分段大小 = 参_分段大小 × 1024 × 1024
如果 (局_文件大小 > 局_分段大小)  ' 大于 ' 参_分段大小 ' M 文件分段读入
局_移动位置 = 0
计次循环首 (局_文件大小 ÷ 局_分段大小 + 1, 局_第几段)
局_字节集 = {  }
移动读写位置 (局_文件号, 局_移动位置, 局_分段大小)
局_字节集 = 读入字节集 (局_文件号, 局_分段大小)
局_移动位置 = 局_移动位置 + 局_分段大小 × 2
如果真 (局_字节集 ≠ {  })
加入成员 (参_字节集数组, 局_字节集)

计次循环尾 ()
局_字节集 = 读入字节集 (局_文件号, 局_文件大小)
如果真 (局_字节集 ≠ {  })
加入成员 (参_字节集数组, 局_字节集)

关闭文件 (局_文件号)
' 调用方法:分段读入大文件 (取运行目录 () + “\大文件.txt”, 100, 字节集数组)

  1. 感谢分享,这样子舒服多了。
复制代码
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则 致发广告者

发布主题 收藏帖子 返回列表

sitemap| 易语言源码| 易语言教程| 易语言论坛| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论,本站内容均为会员发表,并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的,严禁用于非法目的,否则造成一切后果自负!如帖子内容侵害到你的权益,请联系我们!
防范网络诈骗,远离网络犯罪 违法和不良信息举报电话0663-3422125,QQ: 793400750,邮箱:wp@125.la
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备12094385号-1) 粤公网安备 44522102000125 增值电信业务经营许可证 粤B2-20192173

快速回复 返回顶部 返回列表