Парсинг сайта Avito с помощью Python (с нуля)

В этом видео я покажу основы парсинга HTML с помощью Python. Парсинг это выкачивание нужной нам информации с сайтов. Он применяется когда у нужного вам сайта нет публичного API. Для этого видео я выбрал вытягивание некоторой информации из объявлений на Авито: название, цена, дата размещения и ссылка. Работает с любым разделом сайта. Весь код написан на Python 3 с нуля.

Полезные ссылки из видео:

#python #parsing #ityoutubersru

[ghostpanda]

Смотря видео, которые ты выпускаешь последними, замечаю, на сколько ты вырос! А так, видео и контент на уровне! Подписка и лайк под каждым видео, который смотрю происходит в первой половине видео!
Хорош! Продолжай!!!

[zakhargryaznov]

не зря сотку скидывал, спасибо за ролик.

[GROBIK]

Подскажите, почему у меня вместо ParseResult выходит ParseResultsBytes?
И в коде вместо параметров везде b. Вот выход:
ParseResultBytes(scheme=b'', netloc=b'', path=b'', params=b'', query=b'', fragment=b'')

[qvxpnpg]

Увы, на момент 2022 года. Данный способ не работает, сервак выдает код 403(шлет короче без api). Поэтому Selenium в помощь)

[annapopova]

Классное видео! Спасибо
В Телеграмм канале нет кода ((((

[iviv]

А как можно реализовать оповещение о новых объявлениях в заданном разделе?
Просто сравнивать количество объявлений в прошлом запросе и текущем не получится, потому что объявления могут еще и удалять.

[rlzftkx]

Не нашел код в репозитории. Скинь если остался.

[IZHGTUmekhanik]

в именах классов появились приставки в виде _fG54x - не понятно когда он поменяется, наверно с какой то периодичностью и в итоге парсер будет постоянно устаревать, заметил если запустить раза 2-3 то выходит предупреждение :/

[Dmitriy_Sentinel]

Только начал смотреть. Так что, нам не расскажут как собирать телефонную базу с сайтов?))

[vladlogunov]

Здравствуйте! Видео и код просто класс!! Скиньте пожалуйста этот код или ссылку на Git

[denisdred]

Бро все классно, но не могу понять, там получается надо распарсить еще год ? потому что ругается на ValueError: time data '2019' does not match format '%H:%M'

[zkixdgx]

Не работает ссылка на код под видео в Telegram-канале. Скиньте, пожалуйста, этот код или ссылку на Git

[qdniinn]

А как парсят объявления, которые еще не прошли модерацию?

[vbvrumy]

what a great soup you have !! ) help me with opening the initial code plz !

[gzycviy]

не получается теперь так. Как не пытаюсь спарсить Avito (практики ради) не получается. уже и selenium пробовал, не получить код страницы, и всё тут. Какая-то белибирда в виде словарей с байтами чтоли приходит. Думаю защита какая то.

[vliafto]

ССылки на код обновите! или скиньте куда-нибудь - плиз!)

[seserere]

Есть ли смысл переучиваться писать парсеры с использоваонием ООП(сейчас пишу только с использованием функций)? Есть ли какие-нибудь преймущесва?

[artemvishnevskii]

Почему не работает? При попытке реквеста авито выдаёт страницу с инфой "Доступ с вашего IP-адреса временно ограничен" потому что "Мы обнаружили на нём подозрительную активность, нарушающую работоспособность Авито." Лавочка прикрылась? Авито больше не парсится?(

[sergeys]

А почему ты используешь select, вместо find_all?

[wluighw]

Привет хотел бы спросить у тебя. Вот я выучил основу питона(базу). Рано ли мне писать что то на подобие этого?