开启辅助访问 切换到宽版

精易论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

用微信号发送消息登录论坛

新人指南 邀请好友注册 - 我关注人的新帖 教你赚取精币 - 每日签到


求职/招聘- 论坛接单- 开发者大厅

论坛版规 总版规 - 建议/投诉 - 应聘版主 - 精华帖总集 积分说明 - 禁言标准 - 有奖举报

查看: 1365|回复: 12
收起左侧

[求助] 请教关于一个网站的抓包问题

[复制链接]
结帖率:92% (12/13)
发表于 2021-12-13 14:30:04 | 显示全部楼层 |阅读模式   香港特别行政区*
https://thecryptoyou.com/market
请教一下大佬们,像这种网站应该怎么抓呢,用火狐抓他的包,抓不到的,然后本地源码也没有的,打开以后他要加载卡片数据,大概10-20秒会完全加载完,几百上千张卡片。
我要筛选卡片,所以首先要能抓到他的总的列表。
结帖率:88% (44/50)

签到天数: 17 天

发表于 2021-12-13 15:02:23 | 显示全部楼层   安徽省淮北市
国wai网址 跟咱们的不太一样吧。。你要取什么值吗
回复 支持 反对

使用道具 举报

结帖率:91% (21/23)

签到天数: 7 天

发表于 2021-12-13 15:28:24 高大上手机用户 | 显示全部楼层   浙江省温州市
可能是websocke协议传输数据的?
回复 支持 反对

使用道具 举报

结帖率:94% (29/31)

签到天数: 25 天

发表于 2021-12-13 15:35:36 | 显示全部楼层   四川省成都市
用这个 Fiddler
回复 支持 反对

使用道具 举报

结帖率:92% (12/13)

签到天数: 4 天

 楼主| 发表于 2021-12-13 15:55:22 | 显示全部楼层   香港特别行政区*
花影孤自怜 发表于 2021-12-13 15:28
可能是websocke协议传输数据的?

这个还真不知道呢。
回复 支持 反对

使用道具 举报

结帖率:0% (0/1)

签到天数: 3 天

发表于 2021-12-13 17:16:26 | 显示全部楼层   北京市北京市
这个好像可以用python,用xpath解析取出来,网页元素里都有
回复 支持 反对

使用道具 举报

结帖率:92% (12/13)

签到天数: 4 天

 楼主| 发表于 2021-12-13 18:29:57 | 显示全部楼层   香港特别行政区*
bnm4565377 发表于 2021-12-13 15:02
国wai网址 跟咱们的不太一样吧。。你要取什么值吗

直接就能打开的,要取他的卡片列表。
回复 支持 反对

使用道具 举报

结帖率:0% (0/2)

签到天数: 4 天

发表于 2021-12-19 19:26:25 | 显示全部楼层   北京市北京市
能获取html就直接正则获取,要获取他的接口,得分析他的JS
回复 支持 反对

使用道具 举报

结帖率:92% (12/13)

签到天数: 4 天

 楼主| 发表于 2021-12-19 19:55:36 | 显示全部楼层   江苏省常州市
whm630987633 发表于 2021-12-19 19:26
能获取html就直接正则获取,要获取他的接口,得分析他的JS

这个没有html,所以后面就不会取了。
回复 支持 反对

使用道具 举报

结帖率:0% (0/2)

签到天数: 4 天

发表于 2021-12-19 20:42:17 | 显示全部楼层   北京市北京市
gdj528 发表于 2021-12-19 19:55
这个没有html,所以后面就不会取了。

那你这个只能通过获取他的RPC接口了,这网站我打开显示一下就白屏了
回复 支持 反对

使用道具 举报

  高级模式
B Color Image Link Quote Code Smilies |上传

本版积分规则 致发广告者

发布主题 收藏帖子 返回列表

sitemap| 易语言源码| 易语言教程| 易语言论坛| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论,本站内容均为会员发表,并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的,严禁用于非法目的,否则造成一切后果自负!如帖子内容侵害到你的权益,请联系我们!
防范网络诈骗,远离网络犯罪 违法和不良信息举报电话0663-3422125,QQ: 793400750,邮箱:wp@125.la
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备12094385号-1) 粤公网安备 44522102000125 增值电信业务经营许可证 粤B2-20192173

快速回复 返回顶部 返回列表