| | Так как один участник заинтересовался, отправив мне письмо, вижу логичным разместить этот скрипт здесь.
Так как это FREE, то, соответственно, распространение - "AS IS", с отказом от всяких гарантий чего бы то ни было. :) Делал его по просьбе друга, поэтому, последствий типа взрыва монитора или форматирования винта быть не должно, хотя и не исключаются. :)
С Google'ом местами выползают косяки. Когда анализировал результирующие HTML от него, заметил, что временами по запросу он выдает код, значительно отличающий от кода аналогичных запросов. (то теги пропустит, то вставит, структуру поменяет, причем отображается он также, как и остальные. Видимо, программеры Гуггля защиту такую от SEOшников сделали. :). Поэтому иногда реги не срабатывают, и сайт "выпадает" из результатов, на самом деле он там есть. Можете доработать реги, если интересно, чтобы этого не происходило. Можете еще поисковиков добавить. В конце-концов, можете кучу фич понапихать, переработать. Буду благодарен, если сделаете конфетку и поделитесь ею потом. :)
Сам принцип такой:
1 .Определяете параметры поисковиков (строка запроса, реги и т.д.)
2. Определяете искомые сайты
3. Определяете ключевые слова
4. Скрипт делает запросы к поисковикам по ключевым словам, и вывод сохраняет в переменной
5. Потом парсинг переменной - сначала "выкусывает" "контейнеры" (это данные, относящиеся к одному блоку. Блоки повторяются для каждой позиции)
6. Потом парсит блоки и ищет в них совпадение с URL указанных сайтов, и выводит позиции.
Скрипт является скорее прототипом, чем готовым продуктом, но пользоваться им можно. Основные недостатки:
1. Большие тормоза. Может долго думать, и превысить timeout_limit (если он маленький, или скрипт запускается с домашнего Pentium-I, на соединении 28.8kbps.)
2. Как сказал, иногда "выпадает" Google
3. Нет "переходит" по постраничной навигации (вернее, делал, почти сделал, но сейчас времени нет до конца довести. Принцип там несложный).
Благодарю за внимание. Буду рад комментарием и конструктивным предложениям.
P.S. Да, чуть не забыл! Для анализа HTML могу посоветовать браузер Mozilla Firefox. У него классная подсветка синтаксиса html-кода во view-source (т.е., "не отходя от кассы"), и DOM Inspector в умолчательной сборке (правда при установку нужно пометить галку "средства разработки"). С помощью этих средств достаточно удобно анализировать. Если кто знает что-то лучше для этих целей, поделитесь! | |
