开启辅助访问 切换到宽版

精易论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

用微信号发送消息登录论坛

新人指南 邀请好友注册 - 我关注人的新帖 教你赚取精币 - 每日签到


求职/招聘- 论坛接单- 开发者大厅

论坛版规 总版规 - 建议/投诉 - 应聘版主 - 精华帖总集 积分说明 - 禁言标准 - 有奖举报

查看: 10387|回复: 85
收起左侧

[易语言软件开源] 分享一个网站采集源码,针对资源网

[复制链接]
结帖率:100% (2/2)
发表于 2019-5-15 20:10:19 | 显示全部楼层 |阅读模式   广东省韶关市
分享源码
界面截图: -
是否带模块: 调用了模块
备注说明: -
本帖最后由 宇智波·佐助 于 2019-5-16 10:16 编辑
先上图片,表示尊敬

1.jpg

2.jpg

3.jpg




1、说明:

1、刚写完的采集软件,针对资源网,其他网站可以自己测试。

2、模块使用了:精易模块、精易皮肤模块(我就不打包了,增加安全度)。

3、很简单的一个软件,大牛可以绕道啦


4、root\rule 目录里存放的是网站规则的配置文件,可以用记事本打开。

5、root\article 目录里存放的是爬取出来的html文件,可以用浏览器打开。(没有把图片保存到本地,省空间,省速度,哈哈)

6、tmp 目录里存放的是临时测试爬取的html文件。

7、LinkId.txt文件是取网站链接的 配置文件。




2、教程:

1、请新建文件夹,解压压缩包里的所有文件,并编译源码。

2、选择夹介绍

  • 第一个选择夹:正式遍历文章(就是测试遍历正常,才开始正式遍历)
  • 第二个选择夹:测试遍历(就是自己添加完规则后,测试遍历是否正常!)
  • 第三个选择夹:添加规则(就是自己添加网站的采集规则,头文本,尾文本啊,那些的)





3、使用方法:

  • 请新建文件夹,解压压缩包里的所有文件,并编译源码。
  • 进入第三个选择夹,选择规则文件,点击载入按钮。
  • 载入完毕后(编辑框会出现内容),点击右下角的  “测试遍历”  按钮。
  • 软件自动进入第二个选择夹,这个时候可以点击  “开始遍历”  按钮。
  • 遍历完成后会弹出信息框,点击列表框,可以查看遍历出的内容是否正确
  • 以上是临时采集,文件保存在 tmp 目录下。
  • 正式采集就进入第一个选择夹选择规则 开始采集 ,正式采集过程可视!



规则添加方法:

规则添加方法:

规则添加方法:

页面规则采集设置:

{

范围头部文本

    标签头部文本

        链接头部文本

        链接尾部文本

        标题头部文本

        标题尾部文本

    标签尾部文本

范围尾部文本

}





文章规则采集设置:

{

文章范围头部文本
文章范围尾部文本

}


查看网页源代码并填写进编辑框测试遍历即可!



4、最后说句一。。。。

真的好难讲清楚,不知道你们听清没,反正我是听不清...,接触过 html 的 应该 都会懂一点..

真的是没啥难度,新手们可以学习学习,反正我也是新手,一起学习哈哈

大牛应该一看就懂了..



5、下载地址

回帖一下下帖子就能免精币下载啦...
刮刮乐:https://share.weiyun.com/5vzPqTp



评分

参与人数 1好评 +1 精币 +2 收起 理由
178826559 + 1 + 2 支持开源~!感谢分享

查看全部评分


发表于 2022-10-15 20:35:13 | 显示全部楼层   贵州省黔南布依族苗族自治州
666666666666666666
回复 支持 反对

使用道具 举报

结帖率:0% (0/2)
发表于 2022-7-18 13:20:49 | 显示全部楼层   福建省莆田市
1111111111111111
回复 支持 反对

使用道具 举报

发表于 2022-6-29 15:35:01 | 显示全部楼层   广西壮族自治区防城港市
多谢分享,下来学习下
回复 支持 反对

使用道具 举报

发表于 2022-5-16 02:38:05 | 显示全部楼层   北京市北京市
支持开源~!感谢分
回复 支持 反对

使用道具 举报

签到天数: 6 天

发表于 2021-4-17 05:28:16 | 显示全部楼层   浙江省绍兴市
谢谢分享来看看
回复 支持 反对

使用道具 举报

发表于 2021-4-16 18:29:41 | 显示全部楼层   湖北省仙桃市
谢谢分享.。
回复 支持 反对

使用道具 举报

签到天数: 21 天

发表于 2019-9-29 22:40:01 | 显示全部楼层   安徽省芜湖市
谢谢分享.。
回复 支持 反对

使用道具 举报

发表于 2019-9-29 22:37:52 | 显示全部楼层   柬埔寨
没玩懂 个人感觉
回复 支持 反对

使用道具 举报

发表于 2019-8-1 16:59:34 | 显示全部楼层   陕西省咸阳市
感谢分享,不过希望能发开源文件或者软件实际,我们也好实际测试
回复 支持 反对

使用道具 举报

结帖率:100% (1/1)
发表于 2019-6-24 19:42:54 | 显示全部楼层   四川省成都市
多谢分享,下来学习下
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则 致发广告者

发布主题 收藏帖子 返回列表

sitemap| 易语言源码| 易语言教程| 易语言论坛| 诚聘英才| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论,本站内容均为会员发表,并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的,严禁用于非法目的,否则造成一切后果自负!如帖子内容侵害到你的权益,请联系我们!
防范网络诈骗,远离网络犯罪 违法和不良信息举报电话0663-3422125,QQ: 800073686,邮箱:800073686@b.qq.com
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备12094385号-1) 粤公网安备 44522102000125 增值电信业务经营许可证 粤B2-20192173

快速回复 返回顶部 返回列表