Wolframcheg / crawler

Crawler (бот).

Возможности бота:

• Бот способен зайти на сайт и посчитать количество img на страницах
• По завершению работы бот генерирует отчет (файл с именем report_dd.mm.yyyy.html) в виде отсортированной таблицы:
  • адрес страницы
  • кол-во тегов
  • длительность обработки страницы

Входные данные бота:

• адрес сайта
• глубина поиска

Результат:

• файл report_dd.mm.yyyy.html

Установка

composer install

Запуск

php crawler.php --url="http://example.ru" --depth="3"