Recuperar contenido de la página usando cURL

En este contexto, busca extraer el contenido de una página de resultados de búsqueda de Google usando cURL. A pesar de intentar configurar agentes de usuario y varias opciones, se le ha escapado la recuperación exitosa del contenido de la página. Los redireccionamientos o los errores de "página movida" continúan obstaculizando sus esfuerzos.

Se cree que el problema puede deberse a la codificación de caracteres especiales en la cadena de consulta. Para mitigar esto, es necesario realizar modificaciones en su código PHP.

Este es el enfoque:

function get_web_page($url)
{
    $user_agent = 'Mozilla/5.0 (Windows NT 6.1; rv:8.0) Gecko/20100101 Firefox/8.0';

    $options = array(
        CURLOPT_CUSTOMREQUEST => "GET",
        CURLOPT_POST           => false,
        CURLOPT_USERAGENT      => $user_agent,
        CURLOPT_COOKIEFILE     => "cookie.txt",
        CURLOPT_COOKIEJAR      => "cookie.txt",
        CURLOPT_RETURNTRANSFER => true,
        CURLOPT_HEADER         => false,
        CURLOPT_FOLLOWLOCATION => true,
        CURLOPT_ENCODING       => "",
        CURLOPT_AUTOREFERER    => true,
        CURLOPT_CONNECTTIMEOUT => 120,
        CURLOPT_TIMEOUT        => 120,
        CURLOPT_MAXREDIRS      => 10
    );

    $ch = curl_init($url);
    curl_setopt_array($ch, $options);
    $content = curl_exec($ch);
    $err = curl_errno($ch);
    $errmsg = curl_error($ch);
    $header = curl_getinfo($ch);
    curl_close($ch);

    $header['errno']   = $err;
    $header['errmsg']  = $errmsg;
    $header['content'] = $content;
    return $header;
}

Uso:

$result = get_web_page($url);

if ($result['errno'] != 0) {
    // Handle errors: bad URL, timeout, redirect loop
}

if ($result['http_code'] != 200) {
    // Handle errors: no page, no permissions, no service
}

$page = $result['content'];

Con este código, ahora puede recuperar el contenido exacto de la página tal como se muestra en su navegador. Al tener en cuenta los caracteres especiales en la cadena de consulta, podrá superar los obstáculos que enfrentó anteriormente.