Специальное предложение
- +17
Программирование
Бесплатный вебинар
03 мая 2022Парсер на Python: добываем данные с помощью Selenium
День 2 из 3: Интенсив Python с нуля: пишем парсер данных за 3 дня
Михаил Овчинников
Главный методист технического направления Skillbox
Бесплатный вебинар «Парсер на Python: добываем данные с помощью Selenium». Вы узнаете, как с помощью API и библиотек для парсинга получать данные с веб-сайтов. Научитесь анализировать HTML-содержимое, писать скрипты для входа на сайт, перехода к нужному URL-адресу и загрузки содержимого.
Этот вебинар идеально подойдёт новичкам без опыта в программировании, тем, кто хочет изучить Python подробнее.
Рассмотрим:
- добычу данных в браузере с помощью Selenium;
- работу с API и файлами формата JSON, CSV;
- получение данных через API;
- устройство динамических веб-сайтов;
- библиотеку для парсинга Beautiful Soup.
Спикер — Михаил Овчинников, методист Skillbox. Ведущий инженер-программист в Badoo. Специалист в области разработки высоконагруженных систем и обработки больших данных. Докладчик крупнейших IT-конференций России. Более 15 лет опыта в IT: от стартапов до крупных компаний.
Другие видео интенсива
Рекомендованные
Профессия тестировщик: подводим итоги
18.05.2022 2300Анализ данных в Data Science: подводим итоги
18.05.2022 1388Автоматизируем процесс тестирования
17.05.2022 2970Анализ данных в Data Science: техники исследования
17.05.2022 2750Знакомимся с профессией тестировщика
16.05.2022 8938Анализ данных в Data Science: знакомимся с Python
16.05.2022 9746DevOps: разбор работ
12.05.2022 806Пишем интерфейс мессенджера на Python
12.05.2022 13541С-разработчик: Подведение итогов
12.05.2022 816Пишем пайплайн сборки
11.05.2022 1390Настраиваем протокол TCP для мессенджера
11.05.2022 2458Решаем бизнес-задачи в 1С
11.05.2022 1640Знакомимся с Python
10.05.2022 5764Введение в DevOps
10.05.2022 3514Кто такой программист 1С и чем он занимается
10.05.2022 2828
190 комментариев
Skillbox.Live
Наш Телеграм-чат - https://t.me/+_F0oN5fpnoFjYmNi
клим володин
23:02меня забанили
Aluminiu titanium
23:00спасибо!
Akhan Nurdauletov
23:00Спасибо!
Максим Незнанов
23:00Шпасибо!
Алексей Фалеев
23:00Спасибо!
Николай Алешин
23:00Спасибо
Николай Алешин
23:00Супер
Leonid Vadimovich
23:00как-то надо дождаться загрузки страницы
Petr Kushnir
23:00спасибо!
Xopoxop N
22:59спасибо! супер!
Константин Смоленков
22:59Спасибо!
Marina Pomazkova
22:59с проблемами бана сталкивается разработчик...😥
Lydia
22:57что-то у меня в инспекте не подсвечиваются спаны, как это показывает спикер, и непонятно где искать xpath, когда ничего не подсвечивается. Тыкаю правой мышклй на галку с Даниилом Пилипенко, как показывали
клим володин
22:52как посмотреть предыдущие видео
Petr Kushnir
22:49да, с пагинатором интересно как
mihail stepanyuk
22:46отличаются ли программное нажатие от нажатия мышкой? защиты от бота разницу могут заметить?
M .
22:39как без видимого окна браузера запустить селениум?
Lydia
22:38покажите потом пожалуйста еще раз, откуда вы этот xpath взяли
Андрей Ф.
22:35Нужно ещё один импорт сделать By
Андрей Ф.
22:31driver.maximize_window()
Petr Kushnir
22:31а такой подход с селениумом будет работать на сервере?
Marina Pomazkova
22:30:((( юзаете снова страницу, за парсинг которой забанили...
Fyodor Voropaev
22:28а если браузер не хром
Sergey Zaybert
22:27как размер шрифта изменили?
Xopoxop N
22:21да, как вручную selenium включить?
Artyom Vishnogor
22:19Ссылку на телеграмм можно повторить?
Дмитрий Шадрин
22:17Нельзя на компе на работе
Дмитрий Шадрин
22:16А если питон портейбл, путь в пайчарме на него указывать?
Petr Kushnir
22:12короче, только с vpn )
клим володин
22:11как посмотреть видео ещё раз
Petr Kushnir
22:08а как тогда универсальный запрос сделать?
Konglomerat
22:08такой же результат получаю
Konglomerat
22:08повторяю за вами
M .
22:07csrf токен разве не уникальный для каждого запроса??
Aluminiu titanium
22:07парсинг это только извлечение инфы из сайта? или ещё его обработка
Tiime Irre Vaali
22:00В итоге, как я понял за два интенсива, в web-программировании без фронта никак.
Marina Pomazkova
21:59вопрос - почему мы брали для работы в первый день сайт скиллбокс, если за повторные парсинги ip забанили, и я теперь не могу учиться на платформе? 😥
Андрей Ф.
21:58Отлично, деньги за учебу уже отбил
Aluminiu titanium
21:58это павер поинт презентация?