Скрипт парсинга google и youtube + картинки
Скрипт вначале парсит гугл по заданным ключам, собирает ссылки для парсинга контента сторонним софтом (например, XParser), в отдельный файл, и в другой файл пишет чутка почищеные сниппеты. После собирает ссылки на тематические картинки с гугла и айдишники видео с ютуба.
Проект работат без банов при парсинге гугла без &num= в многопотоке. С указанием количества результатов выдачи - может зависнуть. Собранное сохраняет в отдельные файлы на диск D:\ (урлы картинок, ссылки на конкурентов для анализа и парсинга контента, сниппеты, видео, мультиключ под пандорку с релевантными видосами)
Этот шаблон будет интересен для начинающих, кто хочет разобраться с регулярными выражениями и лентяев, кому нужно спарсить гугл.
Да, в проекте реализована проверка на наличие гуглкапчи посредством проверки кода и логики скрипта if else, что тоже будет интересно начинающим в басе.
Скачать