多线程访问网页问题求助各位大佬！

AcLe · 发表于 2024-9-6 09:31:40

请问我这个算不算多线程？如果不算，该怎么写？
在循环里面加上延迟，才能正常读取网页内容，不加延迟就读取不了。但是加延迟后，感觉访问速度很慢。

还有，这个延迟要加到2000毫秒，不然也会读取不完全。这是怎么回事？怎么修改？

求求大佬们帮忙看看。谢谢

ykq123654789 · 发表于 2024-9-6 09:31:41

2秒投递一次,如果2秒内响应了那你这个跟单线程也没什么区别
2秒内速度太快,服务器行为风控觉得你不正常
乱响应数据也是合理的

补充内容 (2024-9-6 11:07):
合理点,就仿真点,请求一页,下载一页,不定时延时一会

AcLe · 发表于 2024-9-10 16:39:06

ykq123654789 发表于 2024-9-6 11:05
2秒投递一次,如果2秒内响应了那你这个跟单线程也没什么区别
2秒内速度太快,服务器行为风控觉得你不正常
...

那么，请问我这个算是多线程吗？

ykq123654789 · 发表于 2024-9-10 18:25:57

AcLe 发表于 2024-9-10 16:39
那么，请问我这个算是多线程吗？

是多线程了

AcLe · 发表于 2024-9-10 23:29:48

ykq123654789 发表于 2024-9-10 18:25
是多线程了

非常感谢！
请问我这个怎么优化？想要更快一点。

第一张图里面的线程下载内容，感觉像是单线程。线程池.投递

AcLe · 发表于 2024-9-10 23:35:30

ykq123654789 发表于 2024-9-10 18:25
是多线程了

非常感谢！
请问我这个怎么优化？想要更快一点。

第一张图里面的线程下载内容，感觉像是单线程。

线程池.投递任务（&下载头条文章），这个子程序里面是访问网页，正则取出内容，然后保存到txt里。打开文件夹能看到文件是一个一个的保存，并不是多个文件一起保存，所以感觉像是单线程。

ykq123654789 · 发表于 2024-9-12 10:01:17

AcLe 发表于 2024-9-10 23:35
非常感谢！
请问我这个怎么优化？想要更快一点。

线程池.投递任务（&下载头条文章）
这里的延时去掉就快了
但是风控
风控解决不了你这个多线程就没意义

		自动登录	找回密码
密码			注册

[完成] 多线程访问网页问题求助各位大佬！