Как сделать задержку парсинга на node.js?
суть вопроса: У меня есть скажем 12 000 страниц одного сайта, при обычном парсинге с помощью request
и cheerio через несколько страниц сайт падает с ошибкой. Как мне при парсинге осуществить задержку и последовательный парсинг контента 12 000 страниц из файла?
Заранее спасибо!
Вам нужно отказаться от параллельной работы, либо как то её ограничить. Я бы использовал очереди с callback'ами. Для основы взял бы вот этот код
-
11:09
Как развивать веб-проекты в 2026 году: технологии, контент E-E-A-T и факторы доверия
-
12:24
-
21:54
-
06:25
Современные инструменты для криптотрейдинга: как технологии помогают принимать решения
-
06:53
Апостиль в Лос-Анджелесе без лишних нервов и бумажной волокиты
-
20:42
-
09:21
Основные этапы разработки сайта для стоматологической клиники
-
12:26
-
10:30
- Почему SERVER_ADDR имеет не тот IP 50373 visits
- Как заменить $_SERVER[REMOTE_ADDR] на IP клиента в PHP за двумя Nginx? 31984 visits
- Хочу вывести несколько строк из массива в один div, выводит только много undefined; подскажите, что делать? 26371 visits
- Как через css изменить цвет png изображения? 11793 visits
- Blob video url download 11335 visits
- Php curl запрос через прокси с авторизацией 10750 visits
- Работа с captcha vk api 9546 visits
© "hostciti.net" 11.5.2026 | 01:57