Python парсинг сайтов с JavaScript | Инструмент для рендеринга JS

Парсинг сайтов с JavaScript используя requests-html.

В данном видео мы научимся парсить сайты с JS, обрабатывать скрипты на этих страницах и получать валидный ответ от сервера. Мы научимся без bs4 извлекать элементы из страницы, и также находить нужные нам совпадения в тексте без использования регулярных выражений.

Инструмент умеет не только рендерить JS на странице HTML, а также и позволяет рендерить его напрямую из скрипта Python, вы можете написать свой JS скрипт в Python скрипте, и прямо оттуда его выполнить. Инструмент очень мощный и он 100% поможет вам более легко собирать данные с сайтов.

[zproger]

Если вы знаете другие полезные инструменты,
не забудьте оставить их в комментариях, я попробую найти
им применение и сделаю видео на эту тему 🙂
Всем спасибо

[sergeidb]

Дружище, ты даже не представляешь как ты меня выручил. Написал огромный парсер для сайта с сотнями тысяч ссылок, работающий в многопотоке. Часть информации скрапил Селениумом, часть - LXML-ем, но куча открытых селениумом браузеров в режиме многопотока просто ложили сервак. Эта библиотека Requests-HTML просто в корне все меняет. Спасибо тебе огромное!

[goshaposhlyy]

Тор, спасибо, от тебя узнаю больше чем от 99% других каналов

[avax]

Как ты угадал, что я хочу узнать про парсинг?))) Спасибо за ролик, пушка!

[Dreamer_]

Спасибо большое за видео! чудесный инструмент, желаю вам процветания и успехов!!!

[RNikSan]

Круто! Как всегда на уровне, спасибо!

[donpatron]

Спасибо за информацию о библиотеке, она решила мою проблему! :-)

[kozsv]

Ещё бы по больше про асинхронность, многопоточность и моного ядерность 😁

[Happy-rjom]

Ты ж мое золото) Столкнулся с JS при парсинге, не знал что делать, уже руки опустил

[supreltd]

Спасибо!! Этот способ мне на много больше понравился

[SkveerBoy]

Бомба вообще ) до этого думал какой библиотекой можно работать кроме selenium, теперь знаю.

[night_niker]

Слушай, спасибо тебе огромное!!! Я в восторге! Не мог несколько дней побороть скрипты на сайте, уже начал джаву учить, а тут всё настолько просто. Максимальное уважение, лайк, однозначно!

[ktopogizni]

Очень полезная инфа, продолжайте в том же духе! подписчиков мало но это временно уверен! скоро будем 10000 лайков собирать :)

[crutoboy]

Как только я наткнулся на твой ролик, мой мир разделился на до и после

[Shlapoklapik]

Это просто невероятно, спасибо я теперь не овощ

[shustriy]

Спасибо за ваше видео по парсингу. Очень полезно. Мне кажется было бы более наглядно если бы вы смогли на примере какого то сайта показать преимущества этой библиотеки по сравнению с bs4

[rokot]

Спасибо большое, очень полезно! Насчёт return надо произносить так "ритёрн"

[hesuscristomg]

М-да.. Ты забыл упомянуть, что это библа использует также selenium, даже в документации написано, что она также будет использовать двигло chromium. Так что не думаю, что это библа как-то быстрее будет рендерить js... Из альтернатив могу посоветовать requestium - это библа так-же под капотом держит открытым selenium.

[efamir]

супер мега топ, завтра проверю. если это работает, то я счастлив

[cccombobreaker]

Огромное спасибо, теперь надобность в bs4 отпадает) У тебя очень крутой канал!