开启辅助访问 切换到宽版

精易论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

用微信号发送消息登录论坛

新人指南 邀请好友注册 - 我关注人的新帖 教你赚取精币 - 每日签到


求职/招聘- 论坛接单- 开发者大厅

论坛版规 总版规 - 建议/投诉 - 应聘版主 - 精华帖总集 积分说明 - 禁言标准 - 有奖举报

查看: 15593|回复: 41
收起左侧

[图文教程] Python界的新一届毒瘤 教你如何用中文写爬虫,目标:美图录-中国美女【教程】

[复制链接]

结帖率:93% (26/28)
发表于 2017-10-31 15:16:57 | 显示全部楼层 |阅读模式   河北省唐山市
首先,环境环境:3.6.3

目标站点:https://www.meitulu.com/guochan/

2.png 1.png



详情地址:https://www.meitulu.com/item/12215.html
第一图片地址: http://mtl.ttsqgs.com/images/img/12215/1.jpg
第二图片地址: http://mtl.ttsqgs.com/images/img/12215/2.jpg
可以看出,12215是详情地址的地址数,图片地址就是他的详情地址的数字加上第几张图片


OK,那么剩下就简单了,在首页把标题和张数还有详情地址的数字取出来就可以了,写正则
<p><span>.*?</span>数量: (.*?) 张.*?</p>[\S\s]*?<p class=p_title><a target="_blank">(.*?)</a></p>
格式:张数    地址数     标题
然后这里是https://www.meitulu.com/guochan/2.想html   主页第二页的地址
通过这个可以看到最后一页,那么页数递增就可以了,取出全部页数
写正则

5.png

..<ahref=".*?">(.*?)</a> <a href=".*?"class=".*?">下一页</a>


我的正则不太好,讲究这种,我只会.*?
现在基本条件已经可以了,那么开始写代码。首先先写全部页的循环,然后把每页的地址,标题,张数取出来,有问题的话在修复。

代码如下:已经跑完,没有BUG。
6.png

创建文件夹代码:标题处理是为了防止他的标题里有不允许存在的字符。


7.png

然后把创建目录调用上

8.png



然后再根据多少张去循环下载。

10.png

12.png
总体大合照:

11.png


源码下载: 美图录-中国美女爬虫.rar (1.2 KB, 下载次数: 227)
9.png

点评

爬虫爬的好 牢饭少不了   天津市天津市  发表于 2022-5-24 08:47
本以为是王者,没想到既然是。。。。   安徽省滁州市  发表于 2018-8-14 11:24
举报何阿杰公开传播不健康图片,毒害众男性坛友的身心健康   吉林省通化市  发表于 2017-10-31 17:47
举报何阿杰公开传播不健康图片,毒害众男性坛友的身心健康   山东省济南市  发表于 2017-10-31 15:48
举报何阿杰公开传播不健康图片,毒害众男性坛友的身心健康   山西省吕梁市  发表于 2017-10-31 15:33

评分

参与人数 2好评 +2 精币 +3 收起 理由
铅笔刀 + 1 + 1 6666
小桥流水34 + 1 + 2 感谢分享,很给力!~

查看全部评分

结帖率:100% (1/1)

签到天数: 1 天

发表于 2022-9-27 10:47:24 高大上手机用户 | 显示全部楼层   四川省达州市
{:3_49:}{:3_49:}{:3_49:}{:3_49:}{:3_49:}{:3_49:}{:3_49:}
回复 支持 反对

使用道具 举报

结帖率:100% (13/13)
发表于 2022-5-24 08:43:23 | 显示全部楼层   江苏省苏州市
学习------------
回复 支持 反对

使用道具 举报

结帖率:100% (9/9)
发表于 2019-9-15 09:27:47 | 显示全部楼层   浙江省绍兴市
你是神~~~~ 代码逻辑清楚,给我拟入Python的人提供了很强大的学习实例。谢谢。
回复 支持 反对

使用道具 举报

结帖率:0% (0/2)
发表于 2019-3-23 20:36:30 | 显示全部楼层   北京市北京市
神人神人神人神人神人神人
回复 支持 反对

使用道具 举报

结帖率:0% (0/1)
发表于 2019-1-25 09:18:40 | 显示全部楼层   湖南省郴州市
厉害呀大神
回复 支持 反对

使用道具 举报

发表于 2019-1-11 18:07:48 | 显示全部楼层   广东省广州市
感谢分享!
回复 支持 反对

使用道具 举报

发表于 2018-9-26 11:09:01 | 显示全部楼层   广东省广州市
厉害啊,大神
回复 支持 反对

使用道具 举报

结帖率:100% (8/8)
发表于 2018-8-14 11:19:34 | 显示全部楼层   河南省三门峡市
不是易语言啊,不会py
回复 支持 反对

使用道具 举报

发表于 2018-8-13 21:29:37 | 显示全部楼层   四川省德阳市
把Python当成易语言写。。。全是中文变量。。。
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则 致发广告者

发布主题 收藏帖子 返回列表

sitemap| 易语言源码| 易语言教程| 易语言论坛| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论,本站内容均为会员发表,并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的,严禁用于非法目的,否则造成一切后果自负!如帖子内容侵害到你的权益,请联系我们!
防范网络诈骗,远离网络犯罪 违法和不良信息举报电话0663-3422125,QQ: 793400750,邮箱:wp@125.la
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备12094385号-1) 粤公网安备 44522102000125 增值电信业务经营许可证 粤B2-20192173

快速回复 返回顶部 返回列表