100枚精币 寻求php curl 访问网页问题

qq504238413

访问 https://www.sciencedirect.com/ 这个 用 精易网页助手 是正常的   (返回 en-us 是正常显示的网页)；但是我用php curl 访问是不正常的 下面是curl代码<?php// 设置目标网址
$url = 'https://www.sciencedirect.com/'; // 将此处的"example.com"替换为你想要采集的网站地址

// 初始化cURL会话
$ch = curl_init();

// 配置cURL选项
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true); // 启用自动重定向
curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, true); // 启用自动重定向
curl_setopt($ch, CURLOPT_CAINFO, getcwd() . '/cacert.pem'); // 启用自动重定向
curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, 2); // 启用自动重定向

// 设置请求头信息来模拟浏览器
$headers = [
    'User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36',
    'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9',

    'Accept-Language: en-US,en;q=0.9',
    // 如有需要，添加更多请求头，例如 Cloudflare 相关的挑战头
];
curl_setopt($ch, CURLOPT_HTTPHEADER, $headers);

// 发送HTTP GET请求并获取结果
$response = curl_exec($ch);

// 检查是否有错误发生
if(curl_errno($ch)){
    echo 'cURL Error: ' . curl_error($ch);
}

// 输出结果或者对其进行处理
echo $response;

// 关闭cURL会话
curl_close($ch);
?>

下面是curl的 返回  en 是不对的 被拦截了 。辛苦各位大神 看下是什么情况

emodiyu

PHP7.1测试运行没问题

[PHP] 纯文本查看 复制代码

<?php
// 设置目标网址
$url = 'https://www.sciencedirect.com/';

// 初始化cURL会话
$ch = curl_init();

// 配置cURL选项
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);
curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false); // 禁用SSL证书验证
curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, 0); // 禁用SSL主机验证

// 设置请求头信息来模拟浏览器
$headers = [
    'User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36',
    'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9',
    'Accept-Language: en-US,en;q=0.9'
];
curl_setopt($ch, CURLOPT_HTTPHEADER, $headers);

// 发送HTTP GET请求并获取结果
$response = curl_exec($ch);

// 检查是否有错误发生
if(curl_errno($ch)){
    echo 'cURL Error: ' . curl_error($ch);
}

// 输出结果或者对其进行处理
echo $response;

// 关闭cURL会话
curl_close($ch);
?>

qq504238413

emodiyu 发表于 2024-2-11 18:12
PHP7.1测试运行没问题

一样被拦截  提示<p>Please supply the following details:</p>

kebin

楼主，第一次玩威客接单，你这个需求我怎么给你交付？

Lxn

测试无问题