пример по видеосервисам и русским адулт источникам:
Команда CRON для парсинга автоматически:
wget -O /dev/null -q http://ваш_сайт.ru/auto_query/parse_video.php >/dev/null 2>&1
Примечание: Настроить можно полностью автонаполняемый сайт,
запуск парсинга 1 ролика каждые 14 - 15 минут, получается 96-102 видеоролика в сутки, раз настроили и установили команду по времени в панели хостинга или VDS, и все готово, дальше только заходим время от времени и добаваляем запросы.
Название темы
Просмотров
Ответов
Последний
Web Zone Pro - Территория Профессионального Контента для Веб Мастеров » Как настроить парсинг автоматически по CRON, полностью автонаполняемый сайт!
Как настроить парсинг автоматически по CRON, полностью автонаполняемый сайт!
Как настроить парсинг автоматически по CRON, полностью автонаполняемый сайт!
Частый вопрос - Как настроить парсинг автоматически по CRON
Внимание: В целях безопасности мы рекомендуем переименовать файл
cron.php в любое другое название с расширением PHP
Для работы запуска операций по расписанию необходима поддержка вашим
хостингом запуска приложений с использованием Cron более подробную
информацию о том как использовать данную функцию вы можете
получить у вашего хостинг провайдера.
Файл крона может выполнять следующие операции:
1. Создание резервной копии базы данный. Для запуска данного режима
просто запустите файл cron.php без указания ему параметров
2. Создание карты сайты сайта. Для запуска данного режима
запустите файл с параметром cron.php?cronmode=sitemap
если используется консольный запуск скрипта, то используйте php -f cron.php sitemap
3. Оптимизация базы данных. Для запуска данного режима
запустите файл с параметром cron.php?cronmode=optimize
если используется консольный запуск скрипта, то используйте php -f cron.php optimize
4. Запуск антивируса. Для запуска данного режима
запустите файл с параметром cron.php?cronmode=antivirus
если используется консольный запуск скрипта, то используйте php -f cron.php antivirus
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ */
/* ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
Для включения поддержки запуска операций по крону вы должны
поставить значение 1 для переменной $allow_cron
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ */
$allow_cron = 1;
/* ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
Укажите какое количество файлов с резервной копией БД
хранить на сервере
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ */
$max_count_files = 5;
/* ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
Не редактируйте код который следует ниже.