KeyTective — консольная программа, которая за несколько секунд пройдется по списку сайтов и определит наличие заданных ключевых слов на странице.
Область применения программы достаточно широка. Вот некоторые возможные варианты использования:
— выборка сайтов по критерию возможности оставить ссылку на свой ресурс (каталоги, доски объявлений и т. д.)
— проверка наличия ссылки на ваш ресурс на сайтах донорах
— мониторинг сайтов конкурентов на вхождение заданных ключевых слов
— мониторинг новостных ресурсов
— выборка сайтов на одном движке (например, WordPress или Joomla)
В архиве с программой, кроме самой программы, вы обнаружите два файла: keys.txt и urls.txt. В первый необходимо построчно записать ключевые слова, по которым вы хотите сделать выборку, во второй — построчно ссылки на страницы сайтов. Учтите, что чем больше ключевых слов и ссылок, тем дольше будет работать программа.

Важно. Если, вы случайно удалите файлы keys.txt и urls.txt, новые файлы сохраняйте в кодировке UTF—8 без BOM.
Запускаем программу. Далее, необходимо указать таймаут (в секундах) между запросами. Если, количество ссылок до 1000, значение таймаута можно установить 0 секунд. Если ссылок более 1000 — лучше установить в пределах 1-3 секунд.
На следующем шаге, программа попросит ввести значение таймаута ответа сервера. Можно установить значение в пределах 3 — 5 секунд.



Программа тестировалась на Windows7, Windows10 и Linux Mint 17
Пример, как с помощью KeyTective сделать выборку каталогов из списка 100 сайтов за несколько минут.