大神看看，如何提高存储速度

694893292 · 发表于 2022-4-28 09:31:42

提取网页“http://zjy.jxjst.gov.cn/credit/qyRyCreditScore/list”数据，包含链接（我完成），因为有15000多条数据，存入数据库时要进2.5小时。有没有办法提高速度？
精易模块添加了获取网页的子程序，返回的是每页网页15家单位数据，每家单位用换行符隔开

694893292 · 发表于 2022-4-28 17:59:55

数据有近400M，存到EDB数据库要2.5小时，
我的思路是：
1、发送一个页面号，则返回15家单位及其资质（资质在网页类链接）我模块中已完成，取出正常
2、在存到EDB数据库，是乎写数据库时无法同时写入。

大神们，是否要换数据库？其他数据库我也不会。望请指教！

仙游 · 发表于 2022-4-28 09:31:43

.版本 2

.子程序功能_网页访问, 文本型, , 本命令由【精易网页调试助手】生成，请配合精易模块使用。
.局部变量  局_网址, 文本型
.局部变量  局_方式, 整数型
.局部变量  ADD_数据包, 类_POST数据类
.局部变量  局_提交数据, 文本型
.局部变量  ADD_协议头, 类_POST数据类
.局部变量  局_提交协议头, 文本型
.局部变量  局_结果, 字节集
.局部变量  局_返回, 文本型
' http://zjy.jxjst.gov.cn/credit/qyRyCreditScore/queryPageList
局_网址 = "http://zjy.jxjst.gov.cn/credit/qyRyCreditScore/queryPageList"
局_方式 = 1
ADD_数据包.添加 ("cardOrName",""）
ADD_数据包.添加 ("%24pgsz","1000"）

局_提交数据 = ADD_数据包.获取Post数据 ()
ADD_协议头.添加 ("Content-Type","application/x-www-form-urlencoded; charset=UTF-8"）
ADD_协议头.添加 ("Origin","http://zjy.jxjst.gov.cn"）
ADD_协议头.添加 ("Referer","http://zjy.jxjst.gov.cn/credit/qyRyCreditScore/list"）
ADD_协议头.添加 ("User-Agent","Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.87 Safari/537.36"）

局_提交协议头 = ADD_协议头.获取协议头数据 ()

局_结果 = 网页_访问_对象 (局_网址, 局_方式, 局_提交数据, , , 局_提交协议头, , , , , , , , , , , )
局_返回 = 到文本(编码_编码转换对象(局_结果))
返回(局_返回)

一次存1000就快了