开启辅助访问 切换到宽版

精易论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

用微信号发送消息登录论坛

新人指南 邀请好友注册 - 我关注人的新帖 教你赚取精币 - 每日签到


求职/招聘- 论坛接单- 开发者大厅

论坛版规 总版规 - 建议/投诉 - 应聘版主 - 精华帖总集 积分说明 - 禁言标准 - 有奖举报

查看: 6086|回复: 0
收起左侧

[源码分享] pyhon通用框架,爬虫,正则,文本读写

[复制链接]
结帖率:50% (1/2)
发表于 2018-12-31 22:05:55 | 显示全部楼层 |阅读模式   黑龙江省鸡西市
本帖最后由 xuehang00126 于 2018-12-31 22:09 编辑

re.正则单个查找框架import re                              #导入re模块
def zz_cz_dg(cz_nr):                  #正则查找视频地址
    re_gz='</a></li><li><a href="/Html/(.*?).html"'      #查找规则
    re_jx_nr=re.search(re_gz,cz_nr)         #正则查找方法
    return re_jx_nr.group(1)            #返回查找内容


re.正则批量查找框架
import re
def zz_cz_lb(cz_nr):                  #正则查找视频地址
    re_gz='</a></li><li><a href="/Html/(.*?).html"'      #查找规则
    re_jx_nr=re.findall(re_gz,cz_nr)            #正则查找方法返回列表
    return re_jx_nr                #返回查找内容,列表方式


requests.get访问框架
import requests
def html_get(wy_dz):                  #网页访问
    r=requests.get(wy_dz)                    #get方法访问网页,获取源码
    r.encoding=r.apparent_encoding           #utf-8编码
    wy_nr=r.text                            #赋值变量保存
    return wy_nr                               #返回保存网页内容


下载图片框架
import requests
def picture(url,name):
html=requests.get(url)    #访问图片地址
    address="D:\\图片\\"+str(name)+".jpg"      #本地图片下载路径
    with open(address,"wb") as f:             #保存图片
        f.write(html.content)
print(address,'下载完成')


读取文件框架
def Read_the_file(Text_address):
with open(Text_address) as f:      
#Full_text=f.read()                 #读取全部文本为文本格式
        Full_text_list =f.readlines()       #读取全部文本为列表格式
        f.close()
return Full_text_list


写入文件框架
def Written_to_the_file(Text_address,Write_content):
with open(Text_address,"a") as f:
f.write(Write_content+"\n")         #尾行写入文件
        f.close()

自己用的爬虫框架,觉的用的还行,分享下。






您需要登录后才可以回帖 登录 | 注册

本版积分规则 致发广告者

发布主题 收藏帖子 返回列表

sitemap| 易语言源码| 易语言教程| 易语言论坛| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论,本站内容均为会员发表,并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的,严禁用于非法目的,否则造成一切后果自负!如帖子内容侵害到你的权益,请联系我们!
防范网络诈骗,远离网络犯罪 违法和不良信息举报电话0663-3422125,QQ: 793400750,邮箱:wp@125.la
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备12094385号-1) 粤公网安备 44522102000125 增值电信业务经营许可证 粤B2-20192173

快速回复 返回顶部 返回列表