开启辅助访问

登录 | 注册

切换到宽版

新人指南 邀请好友注册 - 我关注人的新帖 教你赚取精币 - 每日签到

求职/招聘- 论坛接单- 开发者大厅

论坛版规 总版规 - 建议/投诉 - 应聘版主 - 精华帖总集 积分说明 - 禁言标准 - 有奖举报

精易论坛»论坛 › 技术专区 › 问答求助 › 网站爬取数据问题

12 3 / 3 页下一页

发新帖

查看: 385|回复: 23

收起左侧

[已解决] 网站爬取数据问题

结帖率：100% (17/17)

发表于 2024-12-13 16:47:48 | 显示全部楼层 |阅读模式河南省新乡市

楼主结帖率: 100% (17/17)

10精币

https://price.filtereditor.cn/

此网站是从服务器端获取数据的，我F12看了一下，找不到取到的数据，只能找到一个js
https://price.filtereditor.cn/static/js/index-500af0b0.js
具体的数据应该怎么获取呢？

比如“DC比”这些

我在F12里找到一个api
https://api.filtereditor.cn/prod/system/getPriceJson?id=2

这个的返回值疑似是某种编码，大神帮忙看看

最佳答案

查看完整内容

哪里那么多无效哦，挺大的我给写道文件了

回答提醒：如果本帖被关闭无法回复，您有更好的答案帮助楼主解决，请发表至源码区可获得加分喔。
友情提醒：本版被采纳的主题可在申请荣誉值页面申请荣誉值，获得 1点荣誉值，荣誉值可兑换荣誉会员、终身vip用户组。
快捷通道：申请荣誉值 → 无答案申请取消悬赏 → 投诉有答案未采纳为最佳

回复

使用道具举报

签到天数: 20 天

发表于 2024-12-13 16:47:49 | 显示全部楼层湖南省长沙市

哪里那么多无效哦，挺大的我给写道文件了

评分

参与人数 1	荣誉 +1	收起理由
笨潴	+ 1	热心帮助他人，荣誉+1，希望继续努力(^__^) 嘻嘻!

查看全部评分

回复

使用道具举报

结帖率：82% (75/92)

签到天数: 12 天

发表于 2024-12-13 16:54:58 | 显示全部楼层贵州省遵义市

url解码 https://price.filtereditor.cn/static/js/index-xxxx.js里面不就是数据吗？例如：https://price.filtereditor.cn/static/js/index-bf49c4e7.js

点评

正解江苏省南京市发表于 2024-12-13 17:01

我尝试一下，我找到数据了但是不知道怎么解码，感谢河南省新乡市发表于 2024-12-13 16:56

回复

使用道具举报

结帖率：80% (20/25)

签到天数: 11 天

发表于 2024-12-13 16:56:24 | 显示全部楼层湖北省潜江市

能显示就能抓到，是不是你ip被风控了。你重启光猫路由再试试

VX截图_20241213165534.png

VX截图_20241213165534.png

回复

使用道具举报

结帖率：82% (75/92)

签到天数: 12 天

发表于 2024-12-13 16:58:27 | 显示全部楼层贵州省遵义市

就是单纯的URL解码啊，你是不是想复杂了

补充内容 (2024-12-13 16:59):
https://api.filtereditor.cn/prod/system/getPriceJson?id=2这个也是单纯base64编码，解码就行了

回复

使用道具举报

结帖率：100% (17/17)

签到天数: 11 天

楼主| 发表于 2024-12-13 17:01:30 | 显示全部楼层河南省新乡市

emodiyu 发表于 2024-12-13 16:58
就是单纯的URL解码啊，你是不是想复杂了

补充内容 (2024-12-13 16:59):

好的我试试看

回复

使用道具举报

签到天数: 20 天

发表于 2024-12-13 17:03:30 | 显示全部楼层湖南省长沙市

看头部H4sIAAAAAAAAA这样的就是Gzip压缩了

回复

使用道具举报

结帖率：100% (17/17)

签到天数: 11 天

楼主| 发表于 2024-12-13 17:04:03 | 显示全部楼层河南省新乡市

emodiyu 发表于 2024-12-13 16:58
就是单纯的URL解码啊，你是不是想复杂了

补充内容 (2024-12-13 16:59):

尝试解码了一下好像是乱码啊？大佬能解出明文来吗

回复

使用道具举报

结帖率：82% (75/92)

签到天数: 12 天

发表于 2024-12-13 17:05:17 | 显示全部楼层贵州省遵义市

憨憨问号发表于 2024-12-13 17:04
尝试解码了一下好像是乱码啊？大佬能解出明文来吗

URL解码有个UTF8参数，填写真

回复

使用道具举报

结帖率：100% (17/17)

签到天数: 11 天

楼主| 发表于 2024-12-13 17:07:20 | 显示全部楼层河南省新乡市

black0216 发表于 2024-12-13 17:03
看头部H4sIAAAAAAAAA这样的就是Gzip压缩了

我尝试用精易模块的Gzip解压没有效果，空白

回复

使用道具举报

12 3 / 3 页下一页

发新帖

发布主题 收藏帖子 返回列表

关注微信

sitemap| 易语言源码| 易语言教程| 易语言论坛| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论，本站内容均为会员发表，并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的，严禁用于非法目的，否则造成一切后果自负！如帖子内容侵害到你的权益，请联系我们！
防范网络诈骗，远离网络犯罪违法和不良信息举报电话0663-3422125，QQ： 793400750，邮箱：wp@125.la
网站简介：精易论坛成立于2009年，是一个程序设计学习交流技术论坛，隶属于揭阳市揭东区精易科技有限公司所有。
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备12094385号-1) 粤公网安备 44522102000125　增值电信业务经营许可证粤B2-20192173

快速回复 返回顶部 返回列表