Парсинг: Как собрать данные с динамических сайтов? Практический урок на примере Wildberries

В этом видео я научу вас парсить динамические сайты, используя популярный онлайн-магазин Wildberries в качестве примера. Мы будем использовать язык программирования Python, библиотеку Requests для отправки HTTP-запросов и Pydantic для структурирования данных. Код будем писать используя ООП.
Погрузитесь в мир веб-скрапинга и узнайте, как получить ценные данные с сайтов, которые обновляются динамически

Бесплатная аналитика WB на 7 дней + 2000руб на счет:

Купон на скидку: SdSq8wCwJA

Купон для скидки: EYvdLcmgSy4tUcBP5uk

Поддержать канал:
или
2204 1201 0103 5539

#python #parsing #scraping #request #json #wildberries #pydantic #ооп

[the_parse_hub]

В видео есть ошибка: sale - это процент скидки, а не количество продаж

[LoonyNoob]

Очень крутой контент! Спасибо огромное за наглядный пример, лайк и подпишусь обязательно! =) 🔥

[non]

приятная подача, хороший материал, спасибо за видео!

[clandast]

Спасибо большое за видео, очень помогаешь, продолжай дальше.

[lalfit]

Вау, это очень круто, продолжай в том же духе!🎉

[aroundx]

мог написать код для парсера динамического сайта, наткнулся на твоё видео и все получилось!🎉🎉🎉 Спасибо тебе, жду следующих уроков

[dominiquediaz]

Спасибо дружище, очень интересный парсинг, попробую такое на js написать

[diatm]

Pandas тоже норм для работы с данными. Спс за pydentic. Интересно если ещё и по asus gigabyte, asrock пройтись или по всем брендам которые там есть)))

[promanplayer]

Круто, думал как-то заняться парсионгом, но так руки и не дошли

[AydarSadrtdinov]

Доброго здравия. Подписался, очень интересно и доходчиво объясняешь. Спасибо. Одна просьба: плохо слышу - напиши пожалуйста каким пакетом IDE пользуешься, а то чувствую мой блокнот++ не особо будет удобен при изучении питона. Спасибо ещё раз.

[MrYtkonos]

Отличное видео, очень не хватает таких подробных разборов на конкретных примерах, спасибо большое! А можно парсить сразу в гугл таблицу?

[latyp]

Приветствую! Написал парсер для вб по данному примеру для каталога товаров, при открытии csv файла обнаружил, что на каждый объект приходит в среднем около 4000 объектов с одинаковым id и другими атрибутами. Есть ли возможность в конечном файле видеть только уникальные объекты, не применяя запросы и или фильтры (для файла xls)?

[Zdravmag]

Здравствуйте, каша в голове) пазл не складывается) без class - ов тоже самый код можно написать? В других видео про парсинг их не пишут. Спасибо за урок

[gwveuzb]

Как сделать, чтобы питон сам вписывал в поисковую строку сайта нужное нам слово (например название товара) и только потом собирал инфу?

[Loelir]

Спасибо! Это очень круто! А что учитывать в коде при парсинге раздела "Компьютеры и моноблоки" на Вайлдберриз? Я учусь на аналитика данных, и у меня горит диплом, потому что не получается собрать id, название, цену, количество продаж, рейтинг компьютера, продавца, рейтинг продавца, технические характеристики, диагональ компьютера.

[somebody]

Здорово. А для просмотра кода на сайте нужна именно версия ПРО или обычного F12 достаточно ? А то получить эту ссылку с каталогом не получилось. Я только делаю первые шаги в этой области. Спасибо.

[erdveji]

Спасибо за подробный разбор, как для новичка (учу питон месяца 2), реализация через классы пока кажется довольно сложным. Еще столкнулся с проблемой, пишу на vs code и там модуль pydantic не работает, пишет что устарела функция .parse_obj (или может я не верно импортировал?) попробую без него разложить json по ключам, но уже завтра )

[hybzwbi]

Здравствуйте, уже который день пытаюсь настроить ваш код, что бы давал возможность вставлять не одну, а допустим несколько ссылок для парса, что бы выводило все в одну таблицу. Можете подсказать как это сделать?

[EvgeniySakharov]

Здравствуйте. Вопрос автору ролика: Как можно посчитать дату доставки из этого json? В нем есть вот такие строки: 'time1': 22, 'time2': 74, 'dist': 1352, . Я так понимаю именно они отвечают за дату доставки. Получается приблизительная дата, но это ни то. Ни могу понять, как посчитать. Что касается ролика, подписан давно. дифирамбы петь не умею, буду краток - СУПЕР! Через ваши ролики начал понимать ООП. Огромное спасибо и куча + к Вашей карме..

[ruvensambora]

всё очень доступно и подача класс!
хотелось бы парсер розетки и хотлайна увидеть)