HTML — страницы PHP Curl Tor не отображаются

Question

HTML — страницы PHP Curl Tor не отображаются

У меня есть этот код

<?php

$ua = array(
"Mozilla/5.0 (compatible; MSIE 9.0; AOL 9.7; AOLBuild 4343.19; Windows NT 6.1; WOW64; Trident/5.0; FunWebProducts)",
"Mozilla/5.0 (Macintosh; U; PPC Mac OS X Mach-O; XH; rv:8.578.498) fr, Gecko/20121021 Camino/8.723+ (Firefox compatible)",
"Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2227.1 Safari/537.36",
"Mozilla/5.0 (Windows NT 6.1; WOW64; rv:40.0) Gecko/20100101 Firefox/40.1",
"Mozilla/5.0 (compatible, MSIE 11, Windows NT 6.3; Trident/7.0; rv:11.0) like Gecko",
"Mozilla/5.0 (X11; U; Linux i686; fr-fr) AppleWebKit/525.1+ (KHTML, like Gecko, Safari/525.1+) midori/1.19",
"Opera/9.80 (X11; Linux i686; Ubuntu/14.10) Presto/2.12.388 Version/12.16",
"Mozilla/5.0 (Linux; U; Android 4.0.3; de-ch; HTC Sensation Build/IML74K) AppleWebKit/534.30 (KHTML, like Gecko) Version/4.0 Mobile Safari/534.30");

$uar = array_rand($ua);

$url = "sometestserverisetup";
$ip = '127.0.0.1';
$port = '9051';
$auth = 'mypwwhateveritis';
$command = 'signal NEWNYM';

$fp = fsockopen($ip,$port,$error_number,$err_string,10);
if(!$fp) { echo "ERROR: $error_number : $err_string";
return false;
} else {
fwrite($fp,"AUTHENTICATE \"".$auth."\"\n");
$received = fread($fp,512);
fwrite($fp,$command."\n");
$received = fread($fp,512);
}

fclose($fp);

$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_PROXY, "127.0.0.1:9050");
curl_setopt($ch, CURLOPT_PROXYTYPE, CURLPROXY_SOCKS5);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_VERBOSE, 0);
curl_setopt($ch,CURLOPT_USERAGENT,$ua[$uar]);
$response = curl_exec($ch);

echo $response;
?>

все отлично работает С моим тестовым сайтом и отображается правильно. Однако некоторые сайты (google.com, amazon.com, youtube, facebook.) Отображают только пустую страницу для эхо-ответа.

Есть ли какая-либо опция скручивания, которую нужно включить, чтобы страницы отображались правильно?

3

curl html php tor

Решение

Другие решения

Других решений пока нет …

Источник

Accepted Answer

Глядя на var_dump(curl_getinfo($ch)); после звонка curl_exec может быть полезным

Я проверил ваш код и обнаружил, что в некоторых случаях сайты отправляют 302 Moved ответ с Location заголовок для перенаправления браузера, что приведет к пустому ответу на успешный запрос.

Добавление

curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);

сделал так, чтобы каждый упомянутый вами сайт всегда возвращал ответ в моих тестах. И в зависимости от того, что вы делаете (поиски, логины, отправка форм), вы, вероятно, обнаружите, что перенаправления являются общими, поэтому вам нужно указать cURL, чтобы они следовали им с этой опцией.

Помимо этого, вы можете установить CURLOPT_HEADER в true так что вы можете посмотреть на отправленные заголовки ответа, чтобы увидеть, что происходит в дополнение к curl_getinfo чтобы убедиться, что соединение прошло успешно (через Tor или через сайт).

3