file_get_contents 抓网页一直 403 被拒 请求头怎么改

现象

用 file_get_Contents 抓合作方的接口,返回 false,warning 里是 failed to open stream: HTTP request failed! HTTP/1.1 403 Forbidden。同一地址用浏览器打开正常,curl 加上浏览器 UA 也能拿到数据,只有 PHP 不行。

原因

file_get_contents 默认的 User-Agent 是 PHP/8.3,很多站点和 WAF 会直接拦截这类标识;缺少 Referer、accept 也会被判定为机器人。部分接口还校验 Cookie 或来源 IP,只换 UA 不够。allow_url_fopen 关闭时会报另一个错误,不要混淆。

解决步骤

第一步,看真实响应头。用 ignore_errors 让函数在 4xx 时也返回内容,打印 $http_response_header,确认是 WAF 拦截还是业务层拒绝。

$ctx = stream_context_create([
    'http' => [
        'method' => 'GET',
        'header' => "User-Agent: Mozilla/5.0\r\n"
            . "Referer: https://example.com/\r\n",
        'timeout' => 8,
        'ignore_errors' => true,
    ],
]);
$body = file_get_contents('https://example.com/api', false, $ctx);
var_dump($http_response_header[0] ?? '');

第二步,补齐必要请求头。按对方要求补 Accept、Accept-Language 和 Cookie,参数用 http_build_query 拼接;需要 POST 时把 method 和 content 写进 context。

第三步,换 curl 处理复杂场景。需要自定义 TLS、跟随跳转或复用连接时改用 curl,设置 CURLOPT_USERAGENT、CURLOPT_REFERER 和 CURLOPT_TIMEOUT,并检查状态码。

验证

接口返回 200,$http_response_header 第一行是 HTTP/1.1 200,重复请求结果稳定,服务端不再记录拦截。

小结

403 多数是请求特征被识别,不是 PHP 函数不能用。先看响应头,再补 UA 和 Referer,复杂场景直接换 curl。

您可以还会对下面的文章感兴趣: