Обучение парсингу на Python #6 | Как собрать информацию с любого сайта | Requests BS4 Selenium

Обучение (Web-Scraping) веб парсингу на Python. В данном видео рассматриваем как и откуда подгружается контент на динамический сайт, используем библиотеку requests и GET запросы к API, парсим данные с помощью Beautifulsoup, а также рассматриваем как можно получить данные и сохранить страницу с помощью Selenium webdriver.

🔥 Доступ в приват | Поддержать проект:

🔥 Стать спонсором канала:

*****Ссылки*****

Музыка из видео:

Дешевый/надежный сервер в Европе:
promo_code:
zomro_246874

Хороший proxy сервис:

Крутой заказ на фрилансе | Подбираем забытый пароль к Excel файлу с помощью Python

Пишем Telegram бота на Python + Загружаем Telegram бота на сервер(хостинг):

Плейлист по парсингу сайтов на Python:

Плейлист по Instagram боту:

Firefox driver:

Chrome driver:

Код проекта на github:

И в telegram канале:

*****Соц.сети*****

[andrusski]

Спасибо большое за такой отличный контент 👌👍 Благодаря ему втянулся в тему парсинга и сейчас работаю над своим первым проектом в этом направлении. Хотелось бы ещё отдельное видео, посвящённое теме заполнения форм на сайте с использованием requests. Спасибо 🤝

[sia_si]

Спасибо за очень полезный и структурированный контент! После ваших видео не остается ни одного вопроса, а появляется желание открыть атом и начинать писать код :) Хотелось бы увидеть видео о сборе спарсенной инфы в бд (например, sqlite). Столкнулась с проблемой засовования вложенных словарей причем разной структуры и перелопатив интернет ничего годного не нашла. Благодарю за ваш труд!

[iwbvepo]

Спасибо большое за видео!!! Ваши видео просто офигенны! Немного теории + море практики + дополнительная инфа для конкретных задач, которые в будущем может встретить любой парсер

[ydyelsd]

Как всегда на высоте! Больше видео про парсинг богу видео про парсинг! :)

[vladimirzelov]

Братишка ты просто Красавчек, мотал я душу гугловским алгоритмам, как я долго тебя искал Четко и по делу Не бросай это дело

[masterng]

Очень понравился курс, самый понятный и адекватный. Я тоже писал парсеры на php и в итоге тоже пришел к python. Удивлен что я тоже использовал такой же подход сохранять в json или в html промежуточные данные. Твой код очень показательный, но все же очень много повторяющегося кода, я обычно писал отдельные функции, например для сохранения файла или чтения. Но твой код хорош тем что если человек не смотрел предыдущие видео все равно сможет разобраться.

[LvSerg]

Вернулся в данный плейлист после краткого ознакомления с selenium. Летим дальше! Спасибо Автору!

[return_]

Спасибо. Для меня вы гений.
Я уже 7 месяцев учу Питон (и в целом програмирования и линукс). Спасибо за качественые видео!
Блогодаря таким людям как вы, новичкам легче учить!
Буду дальше учить.
Удачи и вам!!!

[speede]

Опа, оказывается в Python есть библиотека эмулирующая работу браузера. Познавательно, полезно, прекрасно. Благодарю за ценное видео.

[vigauss]

Котан снова в деле 😀👍 Спасибо тебе за практику! Аналогов не сыскать. з.ы, не думал постримить, пообщаться "вживую"? Думаю много кто подключится.

[mak]

Спасибо большующее! Продолжай делать такие разборы - очень сильно прокачивают нас. Хотелось бы увидеть ролик, где чтобы получить необходимые данные, надо сначала что-то заполнить в input или select, и только после этого появляется страница, которую надо спарсить

[LvSerg]

Спасибо за видео! Пойду просматривать плейлист по selenium.

[cbipftv]

Ты бы знал как я рад, чуть стул не сломал во время прыжка на радостях XD Спасибо огромное!!!

[maryan]

Дуже цікаво і практичні приклади. Молодець. Почну вивчати програмування по Ваших прикладах, практичний досвід реальний.

[CalmDepth]

спасибо.здорово.было бы интересно посмотреть ролик, где больше активных действий типа click, onclick, onmouse. а так же парсинг через selenium shadow dom. или же парсинг json

[dieselekin]

Спасибо тебе. Ты очень доступно объясняешь !!!

[qtbhqjd]

Спасибо, шикарно, мне этого не хватало

[dimitrishat]

Хороший контент. Благодарю. Интересно и информативно.

[bazingos]

Отличнейший контент! Спасибо тебе большое!

[gofeblr]

Очень клёво)) Есть наработки по парсингу у меня но это тоже очень полезно)