第四十二天作业

老郭

今日主要学习内容**

42.1  综合实例- Http代理采集验证系统-插件模式 - 软件接口设计
42.2  综合实例- Http代理采集验证系统-插件模式 - 实现采集插件与插件测试
42.3  综合实例- Http代理采集验证系统-插件模式 - 反射加载采集插件
42.4  综合实例- Http代理采集验证系统-插件模式 - 重写ListView开启DobuleBuffer并过滤WM_WM_ERASEBKGND

今日作业

1. 请完成  https://www.xicidaili.com/nn 网站的代理采集插件
2. 尝试编写并发验证的部分

曜石头

xici代理

与89代理不同之处有：
1、 string url = "https://www.xicidaili.com/nn/{index}";
string reg = @"<td>(\d+.\d+.\d+.\d+)</td>\s+<td>(\d+)</td>[\s,\S]+?([\u4e00-\u9fa5]+)[\s,\S]+?(HTTPS?)[\s,\S]+?<td>\d+-\d+-(\d+)\s\d+:\d+</td>";
string rel = await _client.GetStringAsync(url.Replace("{index}", _index.ToString()));
MatchCollection mc = Regex.Matches(rel, reg, RegexOptions.IgnoreCase);
List<ProxyInfo> plist = new List<ProxyInfo>();
ProxyInfo p;
foreach (Match ma in mc){
        if (ma.Success) {
                p = new ProxyInfo();
                p.Ip = ma.Groups[1].Value;
                p.port = Convert.ToInt32(ma.Groups[2].Value);
                p.Address  = ma.Groups[3].Value;
                p.Type = ma.Groups[4].Value;
                p.VerifyTime = ma.Groups[5].Value;
                if (IsOut(p.VerifyTime)) {//函数出口
                        ProgressEvent?.Invoke($"当前正在采集{_index}/页", plist);
                        ProgressComplete?.Invoke("搞完了");
                        _client.Dispose();
                        return;
                }
                plist.Add(p);
        }
}
ProgressEvent?.Invoke($"当前正在采集{_index}/页", plist);
_index++;
await Start();

private bool IsOut(string strDay) {//出口条件(前天获取的就不要了）
            int dayNow = DateTime.Now.Date.Day;
            int day = Convert.ToInt32(strDay);
            if (dayNow - day > 1) {
                return true;
            } else {
                return false;
            }
        }

验证
string rel = await client.GetStringAsync("http://www.lyb2019.cn");//轰炸自己网站哈哈哈哈
if (rel.Contains("嘿嘿嘿")){
        p.state = true;//可用标位
}

qingshanlushui

xici代理

与89代理不同之处有：
1、 string url = "https://www.xicidaili.com/nn/{index}";
2、xici陈列了建站以来所有ip，且正则太长了，分成两块一块用来取信息，第二块取xici公布的验证时间与string str = DateTime.Now.Date.ToString("yy-MM-dd");作对比
            string reg = @"<td>(\d+\.\d+\.\d+\.\d+)</td>\s+<td>(\d+)</td>\s+<td>(\s+|\s+<a href=.+>(\w+)</a>)\s+</td>";  //没有ip地址的时候，源码留空了。。用了 或 |
            string reg2 = @"<td>(19-\d+-\d+)\s.+</td>";
            if (mc2[mc2.Count-1].Groups[1].Value != str)   //出口点。。只取带当天ip的
                {
                    ProgressComplete?.Invoke("搞完了");
                    _client.Dispose();
                    return;
                }

3、Title
4、测试的时候多跑了几次，xici把我ip拉黑了半小时
5、第二个作业被我提前看了剧透