读取网页源码时有些电脑只读到协yi头的问题

madfrag · 发表于 2016-12-1 17:10:50

读取网页源码使用的是send和recv,使用多年大部分用户都没有任何问题
偶尔会碰到有个用户出现只接收到协yi头却没有网页源码的情况
这是个静态页面reg.htm 用浏览器访问正常用我的软件访问就只有协yi头
出现这种问题的情况很少也许100个会碰到1个求大神们帮帮忙找出原因
下面贴出send数据和 2个接收到的数据(直接写出字节集,无文本转换过程)
1.以下是send数据:
GET /reg.htm HTTP/1.1
User-Agent: Mozilla/4.0
Accept: */*
Host: www.xxxxxxxx.com
Cache-Control: no-cache

2.以下是接收不完整的数据:
HTTP/1.1 200 OK
Content-Length: 5191
Content-Type: text/html
Last-Modified: Tue, 29 Nov 2016 13:09:57 GMT
Accept-Ranges: bytes
ETag: "929e1ae2414ad21:1d89"
Server: Microsoft-IIS/6.0
X-Powered-By: ASP.NET
Date: Thu, 01 Dec 2016 07:25:52 GMT

3.以下是接收完整的数据:
HTTP/1.1 200 OK
Content-Length: 5191
Content-Type: text/html
Last-Modified: Tue, 29 Nov 2016 13:09:57 GMT
Accept-Ranges: bytes
ETag: "929e1ae2414ad21:1d89"
Server: Microsoft-IIS/6.0
X-Powered-By: ASP.NET
Date: Thu, 01 Dec 2016 07:33:44 GMT
<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN"
"http://www.w3.org/TR/html4/loose.dtd">
<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=gb2312">
<title>注册页面</title>
<style type="text/css">

</style>
</head>
<body>
<div align="center">
  <TABLE cellSpacing=0 width=514 border=0>
<TBODY>
<TR>
......此处为最简单的10行表格......省略几百字
   </TR>
</TBODY>
  </TABLE>
</div>
</body>
</html>

第一页 · 发表于 2016-12-1 17:10:51

这个问题.我估计你贴到CSDN也很少有人知道
这个问题很偏僻
比较经典的就是百度的首页不进行gzip压缩的时候
只返回http头
但是再次接收,就返回了BODY
解决办法也很简单
然后循环recv即可.你之前肯定是只send和recv了一次
如果recv返回0的时候,被阻塞等待时间长.HTTP头加上Connection:close搞定
如果这个办法不行.那么还有另外的办法
不过这个解决办法基本上还是比较通杀的

键盘上的魔手 · 发表于 2016-12-1 17:19:28

你可能遇到了302的链接或者服务器带有反爬虫，这个要看具体需求的了。

madfrag · 发表于 2016-12-1 17:44:24

键盘上的魔手发表于 2016-12-1 17:19
你可能遇到了302的链接或者服务器带有反爬虫，这个要看具体需求的了。

99个用户使用是正常的就1个用户出现这种情况

补充内容 (2016-12-1 17:51):
而且访问也不频繁一般只访问一次

		自动登录	找回密码
密码			注册

[已解决] 读取网页源码时有些电脑只读到协yi头的问题

最佳答案