开启辅助访问 切换到宽版

精易论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

用微信号发送消息登录论坛

新人指南 邀请好友注册 - 我关注人的新帖 教你赚取精币 - 每日签到


求职/招聘- 论坛接单- 开发者大厅

论坛版规 总版规 - 建议/投诉 - 应聘版主 - 精华帖总集 积分说明 - 禁言标准 - 有奖举报

查看: 281|回复: 10
收起左侧

[已解决] 易语言操作的COM对象过大则崩溃,有体积限制?

 关闭 [复制链接]
结帖率:81% (22/27)
发表于 2024-8-28 21:10:03 | 显示全部楼层 |阅读模式   山东省淄博市
50精币
易语言程序从数据库中读取80w行数据,通过COM写入EXCEL文件多个sheet中,共40列,写入方法是range.写属性(“value2”,区域变体型数组),公式区域用formula属性写入,range行列为2000*40,多次调试情况如下:
1.当最后的sheet数据行数超过30w行后,range.写属性()批量赋值经常失败,不久就出现附件所示错误;
2.range批量赋值失败后,还是通过range.写属性()方法,重新逐行、逐单元格赋值,则未见赋值失败,但不久还是出现附件所示错误;(可见,区域赋值的数据类型没有问题)
3.跳过之前sheet,直接用range.写属性()方法写这个30w+行的sheet,未见批量赋值失败,也未出现附近所示错误。
4.附件所示报错后,易语言程序很快崩溃,但COM所在EXCEL进程仍驻留运行进程中,内存占用最大未超过700M。
5.查询官方EXCEL限制与规范,单个sheet行列限制为1048576 * 16384 列,公式数量无限制,工作表个数受内存限制。

由此推测,易语言操作的COM对象,是不是有体积限制?超限易语言程序则会崩溃?恳请各位大神指教




补充内容 (2024-8-28 21:13):
当把每页列数减少到25列,总行数还是80w,,单页最大还是30w+,则不会批量赋值失败,也不会出现附件所示错误

补充内容 (2024-8-29 08:04):
关于附件所示错误,网上及论坛里论搜过,据说原因多种多样,包括重装c++运行库,清理临时文件,重装系统,全局变量锁机制…,总之,具体原因...

补充内容 (2024-9-4 10:57):
完美构造xlsx文件,单线程写出800条/秒,速度不错,如想提速可以每个sheet一个线程同时写出
1000013811.jpg

最佳答案

查看完整内容

或者自己组装格式,我看到了一个源码,直接自己组,xlsx 其实就是个xml 加压缩

回答提醒:如果本帖被关闭无法回复,您有更好的答案帮助楼主解决,请发表至 源码区 可获得加分喔。
友情提醒:本版被采纳的主题可在 申请荣誉值 页面申请荣誉值,获得 1点 荣誉值,荣誉值可兑换荣誉会员、终身vip用户组。
快捷通道:申请荣誉值无答案申请取消悬赏投诉有答案未采纳为最佳

签到天数: 31 天

发表于 2024-8-28 21:10:04 | 显示全部楼层   河北省石家庄市
或者自己组装格式,我看到了一个源码,直接自己组,xlsx 其实就是个xml 加压缩

评分

参与人数 2好评 +1 精币 +1 荣誉 +1 收起 理由
笨潴 + 1 热心帮助他人,荣誉+1,希望继续努力(*^__^*) 嘻嘻!
茫然 + 1 + 1 完美构造xlsx文件,单线程写出800条/秒,速度不错,如想提速可以每个sheet一个线程同.

查看全部评分

回复

使用道具 举报

结帖率:81% (22/27)
 楼主| 发表于 2024-8-28 21:17:34 | 显示全部楼层   山东省淄博市
请大神不吝赐教,拜谢
回复

使用道具 举报

签到天数: 31 天

发表于 2024-8-29 05:56:11 | 显示全部楼层   河北省石家庄市
不如下下力气,改成 libxl 吧,这个比较科学
回复

使用道具 举报

签到天数: 31 天

发表于 2024-8-29 06:02:08 | 显示全部楼层   河北省石家庄市
https://bbs.125.la/forum.php?mod ... %A8%E6%A1%86%2BXLSX

这个帖子里,就是自己组装的,速度也快,也稳定
回复

使用道具 举报

结帖率:81% (22/27)
 楼主| 发表于 2024-8-29 07:46:31 | 显示全部楼层   山东省淄博市
番茄吧 发表于 2024-8-29 05:56
不如下下力气,改成 libxl 吧,这个比较科学

LibXL写过呀,其问题是,1. LibXL只能逐个单元格写入,写入速度极低。2.LibXL占用内存极大,工作簿总数据只要超过40w行(40列),内存就会超过2G,然后崩
回复

使用道具 举报

结帖率:81% (22/27)
 楼主| 发表于 2024-8-29 07:50:18 | 显示全部楼层   山东省淄博市
番茄吧 发表于 2024-8-29 05:59
或者自己组装格式,我看到了一个源码,直接自己组,xlsx 其实就是个xml 加压缩 ...

这也许是个思路,今天研究一下,多谢了
回复

使用道具 举报

结帖率:81% (22/27)
 楼主| 发表于 2024-8-29 09:08:19 | 显示全部楼层   山东省淄博市
番茄吧 发表于 2024-8-29 06:02
https://bbs.125.la/forum.php?mod=viewthread&tid=14831364&highlight=%E8%B6%85%E7%BA%A7%E5%88%97%E8%A1 ...

不稳定啊,分配内存失败
1000013819.jpg
回复

使用道具 举报

签到天数: 31 天

发表于 2024-8-29 12:34:10 | 显示全部楼层   河北省石家庄市
那你这个还真怕是不行,不过话说,这么大文件,用excel来搞,实在是不科学
回复

使用道具 举报

结帖率:81% (22/27)
 楼主| 发表于 2024-8-30 00:23:44 | 显示全部楼层   山东省淄博市
番茄吧 发表于 2024-8-29 12:34
那你这个还真怕是不行,不过话说,这么大文件,用excel来搞,实在是不科学 ...

按您之前说的解析(构造)XLSX文件的方式写入,应该是个不错的思路,今天研究半天,基本研究透了,因为单一文件格式,没有太多变化,构造起来相对简单,代码主体已基本完成,明天调试看看,完事在感谢您

补充内容 (2024-8-30 00:25):
当然,单一文件,也是有不同的单元格格式的,只是格式数量是有限且可选的,而不是任意的,所以构造起来相对简单

补充内容 (2024-8-30 00:29):
所谓稳定,我觉得主要在于申请内存,只写入无需申请内存,写入时,可用打开文件(文件号)的方式读写大文件,这样占用内存少

点评

嗯嗯,看上去自己组文件都是最佳选择   河北省石家庄市  发表于 2024-8-30 05:35
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则 致发广告者

发布主题 收藏帖子 返回列表

sitemap| 易语言源码| 易语言教程| 易语言论坛| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论,本站内容均为会员发表,并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的,严禁用于非法目的,否则造成一切后果自负!如帖子内容侵害到你的权益,请联系我们!
防范网络诈骗,远离网络犯罪 违法和不良信息举报电话0663-3422125,QQ: 793400750,邮箱:wp@125.la
网站简介:精易论坛成立于2009年,是一个程序设计学习交流技术论坛,隶属于揭阳市揭东区精易科技有限公司所有。
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备12094385号-1) 粤公网安备 44522102000125 增值电信业务经营许可证 粤B2-20192173

快速回复 返回顶部 返回列表