como fazer requisição curl esperar a pagina de destino carregar?

[fercpbsb1 0]

Olá pessoal,

 

estou tentando fazer um programa para capturar o valor de um produto que está em outra página.

Estou usando o cURL em PHP.

Consigo pegar o código da outra página corretamente, mas o que é retornado é a tela de "Aguarde enquanto buscamos o melhor valor".

Essa página de "aguarde" está no site alvo e é um script executado em uma tread, enquanto o sistema faz a varredura em banco de dados.

 

Estou percebendo que a requisição cURL não aguarda que a página alvo seja completamente carregada para só então pegar o código HTML final.

 

Como faço para ele aguardar todo o carregamento da página destino?

 

Estou usando o seguinte código:

 

$link = "http://www.megaroteiros.com.br"; //link de exemplo
    
    $cURL = curl_init($link);
    curl_setopt($cURL, CURLOPT_RETURNTRANSFER, true);
    // Seguir qualquer redirecionamento que houver na URL    
    curl_setopt($cURL, CURLOPT_FOLLOWLOCATION, true);
    curl_setopt($cURL, CURLOPT_AUTOREFERER, 1);    
    curl_setopt ($cURL, CURLOPT_HEADER, 1);
    curl_setopt($cURL, CURLOPT_MAXREDIRS, 10);
    curl_setopt ($cURL, CURLOPT_CONNECTTIMEOUT, 0);
    curl_setopt ($cURL, CURLOPT_TIMEOUT, 15);
    $userAgent = $_SERVER['HTTP_USER_AGENT']; 
    curl_setopt($cURL, CURLOPT_USERAGENT, $userAgent );
    
    $url = curl_exec($cURL);
    // Pega o código de resposta HTTP
    $resposta = curl_getinfo($cURL, CURLINFO_HTTP_CODE);
    curl_close($cURL);
      if ($resposta == '404') {
        echo 'O site está fora do ar (ERRO 404)!';
      } else {
        //$url = file_get_contents($link);
    	echo "<textarea cols='130' rows='50' wrap='OFF'>";
     	$variavel_x = $url;
     	echo htmlentities(utf8_decode($variavel_x));
    	echo "</textarea>";
      }
    
    
    

 

[fercpbsb1 0]

12 horas atrás, Rapadura disse:

Bom dia.

 

dê uma olhada :

http://www.clubedohardware.com.br/forums/topic/1179712-php-como-fazer-requisição-curl-esperar-a-pagina-de-destino-carregar/

Abraços.

 

Rapadura, obrigado pela resposta.

Não sei se você reparou, mas fui eu quem fiz o último comentário no link que você me indicou.

Gostaria de saber se aquela indicação havia solucionado o problema.

 

No entanto, digo que para mim seria muito complicado instalar aquele Servidor Selenium pois utilizo hospedagem de terceiros.

No servidor, sei que o cURL funciona sem problemas por isso estou buscando algo que ajude a esperar o carregamento total da página, ou seja, após a execução da tread que roda antes do resultado final da pesquisa na página destino.