|
|
|
| Возникли вопросы, хоч чтоб грабер рабтал у меня на компе. Возникл пару вопросов:
1. Как отправлять сграбленные данные функцией mail() на денвере?
2. Как запскатьисполняемые php файл с пмощью какого-нибудь планировщика кажы 10 мнут
3. Есть ли разница работает мой грабер на хостинге или у меня на локалке, админ может меня забанить?
Сам грабер я написал, остались вот такие детские вопроы, но все же... | |
|
|
|
|
|
|
|
для: technic611
(10.08.2011 в 22:33)
| | >1. Как отправлять сграбленные данные функцией mail() на денвере?
А отправлять куда?
>2. Как запскатьисполняемые php файл с пмощью какого-нибудь планировщика кажы 10 мнут
Нужно связать расширение файла .php с php-win.exe, или в планировщике прописать путь к php-win.exe и передать путь к PHP-файлу в качестве параметра.
>3. Есть ли разница работает мой грабер на хостинге или у меня на локалке, админ может меня
>забанить?
Разницы нет, забанить может. | |
|
|
|
|
|
|
|
для: cheops
(11.08.2011 в 10:44)
| | 1. отправлять мне на почтвый ящик
2. можно приме ркак это сделать?
3. что нужно сделать чтоб не забанили? прокси или там еще что | |
|
|
|
|
|
|
|
для: technic611
(13.08.2011 в 12:58)
| | 1) Нужно развернуть почтовый сервер или воспользоваться готовым аккаунтом и обращаться через протокол SMTP.
2) Правой кнокой мыши нажмите на любой PHP-файл, выберите пункт, свойства, на вкладке Общие нажмите кнопку Изменить... напротив Приложение, далее обзор, выберите php-win.exe. Синтаксис задания для планировщика зависит от того, какой планировщик испльзуете, иногда достаточно просто указать путь к PHP-файлу и времени, иногда нужен путь к PHP-интерпретатору.
3) Как можно реже обращаться, чтобы не обращали внимание. | |
|
|
|
|
|
|
|
для: cheops
(13.08.2011 в 13:14)
| | 3) Как можно реже обращаться, чтобы не обращали внимание.
ну это не вариант, что вообще нет способов? | |
|
|
|
|
|
|
|
для: technic611
(13.08.2011 в 15:11)
| | Ведите себя как пользователь браузера, полностью его воспроизводя. Если администратор начнет на вас охоту - противостоять будет сложно, при помощи большого набора прокси-серверов, последнее слово, конечно, останется за вами. Однако, последовательный и терпеливый администратор может отбиваться от вас очень долго. Тут кто кого перетерпит. | |
|
|
|
|
|
|
|
для: cheops
(13.08.2011 в 15:20)
| | научите как вести себя как пользователь? если использовать платные прокси?
какподключить свой скрипт прокси? | |
|
|
|
|
|
|
|
для: technic611
(13.08.2011 в 15:35)
| | Вести как пользователь надо не вам, а скрипту ващему. Т.е надо создать цикл и к примеру грабить главную страницу, потом, передавая http заголовок referer, и все основные, "заставить" скрипт перехадить по определенным адресам(по тем, которые вам пришлось бы видеть в адресной строке браузера до тех пор, пока не дойдете до нужной вам информации), так же передавая referer..
Воспользоваться прокси-серверами из скрипта вам поможет cURL. | |
|
|
|
|
|
|
|
для: technic611
(13.08.2011 в 15:35)
| | По сути вы обращаетесь к прокси-серверу, а прокси сервер перебрасывает ваш запрос, ориентируясь на HTTP-заголовок Host. Больше никаких специальных усилий делать не нужно (ну только если вы не цепочку прокси-серверов выстраиваете). | |
|
|
|
|
|
|
|
для: cheops
(14.08.2011 в 10:55)
| | А как же
>Ведите себя как пользователь браузера
Хотя если прокси-серверов понабрать штук >500 то можно и без "поведения". Но не все прокси дают ожидаемого результата. | |
|
|
|
|
|
|
|
для: Гавриленко Дмитрий
(14.08.2011 в 12:31)
| | Здесь имеется в виду, что нужно передавать все те HTTP-заголовки, которые передает браузер, если прокси-сервер анонимный и не прозрачный, он никаких своих HTTP-заголовков не добавит. | |
|
|
|
|
|
|
|
для: cheops
(14.08.2011 в 19:09)
| | Даже в этом случае получится слишком много прямых запросов.. Админ хоть какой-то но сделает шаг. | |
|
|
|
|
|
|
|
для: Гавриленко Дмитрий
(15.08.2011 в 00:12)
| | Может быть и мало, от задачи зависит... в конце концов, если у вас слишком много запросов другому серверу стоит подумать об организации собственного схожего сервиса, который будет находиться в ваших руках и под вашим управлением. | |
|
|
|
|
|
|
|
для: cheops
(15.08.2011 в 09:12)
| | ау люди, здесь, как бы я еще есть )) | |
|
|
|
|
|
|
|
для: technic611
(15.08.2011 в 14:31)
| | Если остались не разрешенные вопросы, задавайте встречные вопросы.
PS Лучше, конечно, под каждый новый вопрос заводить новую тему - так ответов больше всех получается. Чем больше в теме ответов, тем меньше желающих разбираться в проблеме и читать все ответы. | |
|
|
|