Классный термин:
CRON = метод программирования, который автоматически планирует задачи через определенные промежутки времени.

Веб что?

При исследовании проектов и т. д. мы обычно пишем информацию с разных сайтов - будь то дневник/excel/doc и т. д.
Мы снимаем информацию с Интернета и извлекаем данные вручную.

Парсинг веб-страниц автоматизирует это.

Пример

При поиске в Интернете «кроссовки» отображается список веб-сайтов с продуктами и ценами. На вкладке покупок есть более подробная запись, верно?
Google только что скопировал веб-сайты, чтобы показать вам кроссовки с разных сайтов.
Эту технику используют почти все крупные компании для своего бизнеса, поскольку объем данных растет в геометрической прогрессии.

Веб-сканер

Это метод, который хоть и извлекает информацию, но отличается от парсинга в том смысле, что он ищет лучшие веб-сайты и индексирует их, тогда как парсинг выполняется на одном веб-сайте.

Используется для SEO-анализа (парсинга — сбора данных).

Известные технологии парсинга веб-страниц:

• Кукловод
• КрасивыйСуп
• BrightData

Проблемы!

Обратите внимание, что запрос на получение информации с сайта делает не пользователь, а написанный код! Если веб-сайты узнают, что эта задача автоматизирована, они быстро заблокируют IP-адрес.
И эта проверка породила

1. Капчи
2. Ограничение ставки
3. Динамический контент

Цель: смоделировать работу людей!

Активные данные автоматизируют работу. Он даже меняет IP-адреса, чтобы сделать пользователя неизвестным, и разблокирует сайты (платная версия!) для пользователя.

Спасибо JSM за чудесное объяснение.
P.S.:

Ржу не могу!