Пишем асинхронный scraper на Python + asyncio + aiohttp

preview_player
Показать описание
Рекомендации по теме
Комментарии
Автор

Спасибо, именно этот видос помог мне понять, как применить aiohttp и asyncio в моём случае

Alekseyild
Автор

Благодарю, добрый человек. У меня получилось запилить свой парсинг с асинхроном

RuchejAlex
Автор

Спасибо вам за ваше решение моей задачи

KaktusDesert
Автор

Ищищей найдёт.
Благодарю вас за решение моей задачи. Теперь нужно всё изучить и затестиь.

sergejg
Автор

Пасиб за инфу, сам недавно писал парсер по сбору инфы с сайта компов, так работал он вечность, хотя обработать надо было всего 2500 урлов... Пойду переписывать его под асинхроночку) А all_data - это список, а не массив🙈 ну, не смог промолчать)))

takiekakmi
Автор

Отлично, но крошечный текст по размеру

qzdkujk
Автор

Здравствуйте, а будет ли на канале видео запуска данного асинхронного кода в нескольких процессах?

okxlhlt
Автор

Повторил ваш код, запускаю скрипт но на строке async with session.post(url, data) as response:
print(await response.text()) ничего не выдаёт

sergey
Автор

Асинхронный парсер сайт банит, как с этим бороться. Уточню что используется авторизация. Прокси не вариант.

hefhfvc
Автор

в строке 15 "resp.status == 200 " интересно откуда программа знает это значение если ответ от сервера ожидается только на 17 строке await resp.text()

dvylkgy
Автор

Как побороть ошибку:
OSError: [WinError 121] Превышен таймаут семафора
Инфы мало

Dudkaitrubnik