Долго собираются данные. Что делать?

В сервисе временами бывает, что данные долго собираются и кажется, что задача зависла. Перед тем, как писать в поддержку или в чат, проверьте, что на странице идет процесс сбора данных https://arsenkin.ru/tools/queue/ и нет статуса “зависла“. Если вы видите статус “зависла“, то перезапустите его.

Возможно, что ваша задача уже выполнилась и его можно найти на отдельной странице https://arsenkin.ru/tools/reports/.

Мы в статье хотим рассмотреть самые частые причины долгого сбора данных и дальнейших ваших действиях в конкретной ситуации. Перед тем, как перечислить причины, хотим подчеркнуть, что сервис данные собирает разными способами: собираем самостоятельно или данные предоставляют наши партнеры.

Частые причины:

  • Долго собирается поисковая выдача поисковых систем Яндекс и Google - да, это обычно частый случай долгого выполнения задачи. Ситуации разные бывают: большая очередь в сервисе, ПС усилили защиту парсинга, некорректные входные данные, долгий ответ от самих поисковых систем. Решение: ждать окончания сбора, дополнительные задачи не нужно запускать, вы тем самым отсрочиваете сбор данных по первой вашей задаче. В крайнем случае написать в техническую поддержку, чтобы мы обратили внимание на проблему.
  • Долго собирается частотность Яндекс Вордстат. Основная причина долгого сбора данных - забанили аккаунты Яндекса или ПС улучшили защиту от парсинга. Решение: ждать окончания сбора частотности или поисковых фраз. Если аномально долго собираются, напишите нам в поддержку, чтобы мы своевременно отреагировали. Частотность используется в инструментах Яндекс Вордстат и Кластеризатор.
  • Долго собирается контент сайта. Это редкая проблема для нас, так как у нас сайты парсятся в десятки потоков. Где встречаемся с защитой, то пробуем получить контент через браузер (через браузер время парсинга увеличивается). Решение: ждать окончания парсинга URL/сайтов. Используется активно в инструментах ТЗ на копирайтинг, парсинг тегов, парсинг SEO-текстов.
  • Не может спарсить контент сайтов, хотя я вижу на странице контент. Основная причина - в хорошей защите от парсинга у анализируемого сайта. Скорее, мы даже попробовали спарсить контент даже через браузер. Решение: Прислать нам пример сайта, который мы не смогли спарсить, чтобы мы улучшили характеристики нашего робота и улучшили парсинг. В остальном, смириться и проанализировать контент страницы руками.
  • Ошибка входных данных. Редко, но бывает, что на входе вы указали некорректный формат данных. Решение: необходимо внимательно посмотреть, какие параметры вы указываете для инструмента. Например, вместо ключевых фраз указываете целые абзацы текста. Конечно же, в таком случае инструменты ничего не выведут.
  • Ошибка 500. Техническая ошибка на стороне сервиса. В таких случаях мы моментально получаем уведомления и подключаем для решения программистов и администраторов серверов. Решение: ждать восстановления сервиса.

Отзывы пользователей (все отзывы)

Отзыв Дмитрия Шахова о ARSENKIN TOOLS

Дмитрий Шахов

Основатель агентства REMARKA

Arsenkin Tools - простой, понятный и недорогой инструмент, который я много лет рекомендую всем оптимизаторам.

Отзыв Андрея Буйлова о ARSENKIN TOOLS

Андрей Буйлов

Руководитель в Муравейник

Хороший набор простых, но очень удобных инструментов. И постоянно появляются более продвинутые опции для анализа и парсинга. Успеха и развития сервису! Рекомендую! Обзор инструмента по проверке коммерциализации запроса.

Отзыв Рамазана Миндубаева о ARSENKIN TOOLS

Миндубаев Рамазан

Head of SEO, TRINET.Group

В инструментах ARSENKIN TOOLS собраны решения рядовых SEO задач, которые использую в ежедневной работе как я, так и мои специалисты в TRINET.Group. Ключевое отличие ARSENKIN TOOLS - удобство, быстрота работы и стабильность. Ряд уникальных авторских решений, не имеющие прямых аналогов в других сервисах заслуживает отдельного уважения.


Популярные инструменты:

Проверка коммерциализации

Инструмент, который проверить список поисковых запросов на коммерциализацию в поисковой системе Яндекс.

Выгрузка ТОП-10 сайтов

Инструмент, который поможет быстро выгрузить топ-10 сайтов по заданным запросам, в поисковой системе Яндекс и Google.

Кластеризация запросов

Инструмент, для быстрой группировки (кластеризации) поисковых запросов в поисковых системах Яндекс и Google.