Темы, которые я разобрал:
- Что такое парсинг сайтов и зачем он нужен бизнесу?
- Как выбрать инструменты для парсинга и вытащить данные с любого сайта конкурента?
- Что могут и когда применять самые популярные библиотеки для парсинга: Requests и BeautifulSoup?
- Как парсить динамические сайты с помощью Selenium и Playwright?
- Как обойти механизмы защиты сайтов от парсинга?
- Что такое Undetected Chromedriver и Patchright?
- Как парсить сайты с помощью нейросетей: обзор ScrapeGraphAI и Crawl4AI?
- Как установить нейросеть на свой компьютер?
- Лайфхаки для парсинга: Crontab UI, Jsonformatter и Curlconverter.
- Парсим Telegram: обзор фреймворков Telethon и Pyrogram.
Парсинг сайтов — практика:
- Парсим vc.ru и aviationstack по API.
- Парсим сайт с помощью нейросети.
- Парсим исходящие ссылки сайта и ищем дроп-домены.
- Настраиваем краулер для любого сайта, парсим и анализируем все данные.
- Парсим любое видео/аудио с YouTube одной строчкой кода.
