有没有多线程网页访问的例子

381692 · 发表于 2018-12-12 18:48:49

有没有多线程网页访问的例子

从网页A 取出N个网页B 再从网页B中取出1个文本

类似这样的例子我总感觉自己的好慢哦

太快取的还不准

想找点资料学习下

hatsunemiku · 发表于 2018-12-12 18:48:50

halccccccc 发表于 2018-12-12 19:01
是啊所以我感觉我自己的太慢了实际上从网页A中就要用多线程了因为有30页每页20个然后又要从600 ...

我能想的大概就是这样

15191318454 · 发表于 2018-12-12 18:53:54

用鱼刺多线程吧

hatsunemiku · 发表于 2018-12-12 18:56:32

访问A 取出多页地址,再用多线程访问所有多页地址从里面取出结果
两层还好,三层四层才麻烦...

补充内容 (2018-12-12 18:57):
但是速度估计也就那样了..

381692 · 发表于 2018-12-12 19:01:06

hatsunemiku 发表于 2018-12-12 18:56
访问A 取出多页地址,再用多线程访问所有多页地址从里面取出结果
两层还好,三层四层才麻烦...

是啊所以我感觉我自己的太慢了实际上从网页A中就要用多线程了因为有30页每页20个然后又要从600中取出网页B中的文本数字是打个比方说的不一样多少页你有好一点的思路吗我现在是从网页A中 30个线程取所有的网页B 再统一取一次网页B的文本

381692 · 发表于 2018-12-12 19:02:04

hatsunemiku 发表于 2018-12-12 18:56
访问A 取出多页地址,再用多线程访问所有多页地址从里面取出结果
两层还好,三层四层才麻烦...

我总感觉自己的思路不是太正确不是最方便快捷的

381692 · 发表于 2018-12-12 19:07:45

hatsunemiku 发表于 2018-12-12 19:05
我能想的大概就是这样

跟我的一样啊

hatsunemiku · 发表于 2018-12-12 19:08:32

halccccccc 发表于 2018-12-12 19:07
跟我的一样啊

也没啥别的方法了吧,始终要读取那么多次

381692 · 发表于 2018-12-12 19:09:21

hatsunemiku 发表于 2018-12-12 19:05
我能想的大概就是这样

不过看了你的代码我能省一行代码了我没用参数用的程序量变量，有点受益匪浅

		自动登录	找回密码
密码			注册

[已解决] 有没有多线程网页访问的例子