Меньше хлопот, больше данных

— Советы по парсингу бесконечно прокручиваемого веб-сайта

Быстрые советы

Представьте себе, что вы пытаетесь провести маркетинговое исследование для запуска бизнеса по производству чехлов для телефонов. Чтобы проанализировать тенденции рынка, вам, возможно, захочется собрать некоторую информацию о самых продаваемых товарах ваших конкурентов.

Вот несколько советов, которые помогут вам извлечь данные с веб-сайтов конкурентов всего за несколько кликов. Мы возьмем в качестве примера Casetify.

Как видите, это длинный веб-сайт с бесконечной прокруткой, где информация о продуктах появляется по мере прокрутки страницы вниз.

Если вы сначала соберете данные с этого веб-сайта, вы увидите только ограниченное количество собранных продуктов.

Чтобы загрузить больше данных и собрать их, мы можем просто настроить параметры, нажав кнопку "добавить настройку". Вернитесь на свою Databoard и нажмите добавить настройку, как показано ниже.

Прокрутите страницу вниз и увеличьте Повторить N раз до 5.

Готовы нажать кнопку обновить данные на странице вашего Databoard?

Вероятно, вы сможете найти больше собранных товаров после изменения настроек.

Хорошо, почему бы не увеличить это до 20?

Вуаля, теперь вы можете обрабатывать бесконечную прокрутку и собирать все товары с веб-сайта с бесконечной прокруткой, автоматизировав этот шаг!

Парсинг веб-сайтов не обязательно должен быть сложным. Хотите узнать больше о автоматизированном парсинге веб-сайтов? Посмотрите здесь!