USERAGENT при парсинге в PHP
Часто сайты проверяют наличие заголовка USERAGENT, отвечая отказом, если он не установлен. Установить его можно через CURL:
<?php
curl_setopt($curl, CURLOPT_USERAGENT, 'Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1)');
?>