Scrapy проверка в интервале

Непойму, как написать проверку (на предмет нового контента) в интервале Х секунд. У scrapy есть настройка DOWNLOAD_DELAY (в settings.py), но она по каким-то причинам у меня не сработала. Решил по глупому, разделив логику проверки и логику запуска на два скрипта, check.py и run.py. В run.py просто запускается бесконечный цикл, в одном цикле которого запускается субпроцесс (запускающий check.py), а после, засыпание на Х времени - это работает, но как это решается правильно?