Scrapy для новичков

Парсинг одного из крупнейших сайтов электронной коммерции, например Amazon, наглядно показывает, как извлекать данные с веб-ресурсов в промышленных масштабах. Вы разберете процесс создания пауков для автоматического сбора контента с нескольких страниц сайта одновременно.

Внутри разбираются:

• Техники работы с CSS-селекторами и XPath для точного извлечения информации.
• Методы обхода ограничений сайта с помощью ротации User-Agents и настройки прокси.
• Экспорт собранных данных в форматах CSV, XML и JSON.
• Основы работы с базами данных для сохранения результатов парсинга.

Курс ориентирован на тех, кто владеет Python на базовом уровне и хочет применять парсинг для задач машинного обучения или создания поисковых роботов. Изучив эти инструменты, вы сможете автоматизировать сбор данных с любых веб-ресурсов, преодолевая встроенные защиты от сканирования.