类_快速文本-其中分割文本值得一试

广二爷xxoo · 发表于 2021-8-15 12:25:20

分割后的数组不能用

jr21066 · 发表于 2021-4-26 09:23:43

dangerace 发表于 2021-4-25 20:11
今天再打开第三版的类源码，就不提示要什么”大杂烩“模块了，奇怪，哈哈
不过经过测试，仍然会出现：
1、 ...

动态分配内存这块不熟悉。所以很费内存。失败一般都是因为内存不够引起的。
代码中要检测返回值是否正确再进行下一步。

dangerace · 发表于 2021-4-25 20:11:55

今天再打开第三版的类源码，就不提示要什么”大杂烩“模块了，奇怪，哈哈
不过经过测试，仍然会出现：
1、分配内存失败错误，770m的csv就过不去，350m的也会出现。
2、只能正常运行一次，再次运行就会闪退。除非彻底关掉进程重新启动。
请楼主有空再看看什么原因吧。

孤城已故 · 发表于 2021-4-25 04:56:09

来看看

dangerace · 发表于 2021-4-24 16:39:49

本帖最后由 dangerace 于 2021-4-24 19:54 编辑

在分割一个体积约385兆的csv文件时，稳定崩溃，提示：
VX图片_20210424163709.png

仔细看看，才不到400兆啊，怎么就失败了呢？
因为找不到你2版和3版里的“大杂烩”模块，所以暂时先用的1版，在面对200多兆及更小的文本分割时，表现非常出色。但是....
=============
把源码胡乱调整了一下，385兆的文件已经不报错了，但是在打开770兆文件时，又提示分配78xxxxxxx（近770m）字节内存失败！想问一下，这个怎么把内存申请的大一些？毕竟770m内存距离2G还有很大差距啊。

dangerace · 发表于 2021-4-24 12:27:49

本帖最后由 dangerace 于 2021-4-24 12:30 编辑

jr21066 发表于 2020-11-27 21:09
20201127第三版.应该稳定了吧

20201127这一版，使用5.92打开，提示缺少一个叫“大杂烩”的模块。请问如何解决？

dangerace · 发表于 2021-4-24 12:08:16

测试了一下，其中的“汇编文本分割”有着“吓死人”的高速度！
某文档，数百兆，我分别用核心库的“分割文本”、“分割字节集”、“快速文本对象”、“快速字节集对象”进行分割，速度分别为8w/s、8w/s、80w/s、90w/s，都不满意，因为我要分割的对象有几千万，综合下来需要几分钟的时间，不太实用。
用了这个测试了一下，800w-900w/s，oh my god! 比快速字节集还快10倍以上！！！！

如果不是因为与精易助手的大内存相冲突，简直就是神器了！！！

jr21066 · 发表于 2020-11-27 21:09:20

20201127第三版.应该稳定了吧

domingo · 发表于 2020-11-27 15:30:45

jr21066 发表于 2020-11-26 22:16
上一版错误太多了.采取易自带的命令更稳定了

那么高支持库

jr21066 · 发表于 2020-11-26 22:16:14

上一版错误太多了.采取易自带的命令更稳定了

		自动登录	找回密码
密码			注册

[2020开源大赛(第五届)] 类_快速文本-其中分割文本值得一试