下滑翻页获取新地址

无敌哥 · 发表于 2022-1-27 20:50:44

https://author.baidu.com/home?fr ... id=1556582096082300抓包可以获取到这以下地址，这个地址里可以得到文章title和文章的链接。

https://mbd.baidu.com/webpage?ta ... jsonp41643287365364

但是下要翻页就是继续往下滑，会出现新的地址，怎么才能获取到下滑翻页后的新地址，就是（https://mbd.baidu.com/webpage?tab= ）这条开头的新地址

实现自动翻页自动获取新地址

翎朗 · 发表于 2022-1-27 20:50:45

提取百家号文章链接.e (912.52 KB, 下载次数: 5)

七彩色工作室 · 发表于 2022-1-27 21:53:05

主要的参数就是ctime，你根据时间戳直接构造就行

一米阳光520 · 发表于 2022-1-27 22:48:55

这个很简单吧，通过谷歌模块可以实现自动下滑，然后拦截指定的地址

一米阳光520 · 发表于 2022-1-27 22:50:10

用谷歌模块可以直接写。我写的采集斗音粉丝uid的功能，就是自动下滑，然后拦截指定地址返回的参数 https://www.bilibili.com/video/BV1xF411q7YF?spm_id_from=333.999.0.0

一米阳光520 · 发表于 2022-1-27 22:50:27

https://www.bilibili.com/video/BV1xF411q7YF?spm_id_from=333.999.0.0

一米阳光520 · 发表于 2022-1-27 22:51:15

一米阳光520 发表于 2022-1-27 22:50
https://www.bilibili.com/video/BV1xF411q7YF?spm_id_from=333.999.0.0

我写的这个斗音粉丝uid采集，就是通过自动下滑，拦截指定地址返回的参数，来提取uid的，跟你这个类似，你这个更简单很多

吃饱打老婆 · 发表于 2022-1-28 11:44:21

谷歌模块

		自动登录	找回密码
密码			注册

[已解决] 下滑翻页获取新地址