Octubre 14th, 2009
Función de descarga mediante PHP anonimamente con proxys automáticos
Por fin algo de código :)
He desarrollado una función que descarga una URL mediante un proxy con PHP y cURL. Lo bueno (y a la vez lo malo) de la función, es que descarga un listado de IPs (las IPs de los proxys y sus puertos) de una página y va realizando peticiones proxy a proxy hasta que da con uno que funcione, lo malo vendría por la lentitud de la ejecución de la misma, por lo que está pensada para utilizar con CRONJOBS o scripts que no requieran de velocidad de ejecución. Se podría añadir una caché para los proxys de forma que los vaya utilizando hasta que no quede ninguno con vida, pero eso ya sería complicar un poco más la historia y ahora mismo no tengo tiempo para ello.
-
function curl_proxy($url,$proxys){
-
$index_proxy = 0;
-
$end = false;
-
do{
-
$proxy = $proxys[$index_proxy];
-
-
$ip = $proxy[0];
-
$port = $proxy[1];
-
-
// echo "Try: $ip : $port <br>\n";
-
-
$ch = curl_init();
-
curl_setopt($ch, CURLOPT_URL,$url);
-
curl_setopt($ch, CURLOPT_HEADER, TRUE);
-
-
curl_setopt($ch, CURLOPT_RETURNTRANSFER, TRUE);
-
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, TRUE);
-
curl_setopt($ch, CURLOPT_HTTPPROXYTUNNEL, TRUE);
-
curl_setopt($ch, CURLOPT_PROXYTYPE, CURLPROXY_HTTP);
-
curl_setopt ($ch, CURLOPT_SSL_VERIFYPEER, FALSE);
-
-
curl_setopt($ch, CURLOPT_PROXY, "http://$ip:$port");
-
-
$info = curl_exec($ch);
-
curl_close($ch);
-
-
$end = true;
-
}
-
$index_proxy++;
-
}while($info === false || $end === true);
-
-
}
-
function obte_llistat_proxys(){
-
preg_match_all('%<td>([0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}):(\d*?)</td><td>(.*?)</td>%s', $proxys, $result, PREG_PATTERN_ORDER);
-
$ps = $result[0];
-
$ip = $result[1];
-
$po = $result[2];
-
$ti = $result[3];
-
-
-
for($i=0;$i<$t;$i++){
-
}
-
return $sortida;
-
}
-
Ah si, he utilizado DOS funciones en lugar de una, la que te devuelve el listado de IPs y la que hace la petición cURL usando el listado de IPs y puertos devueltos por la otra función.
Espero que le vaya bien a alguien. Saludos peñita!
