Тёмный

Парсим сайты конкурентов с помощью Python | Часть 1 | Web Scraping Python 

Алексей Куличевский
Подписаться 11 тыс.
Просмотров 6 тыс.
50% 1

Опубликовано:

 

21 сен 2024

Поделиться:

Ссылка:

Скачать:

Готовим ссылку...

Добавить в:

Мой плейлист
Посмотреть позже
Комментарии : 39   
@Devivl
@Devivl Месяц назад
Алексей, не являюсь разработчиком Python и JS, но смотрю твои видео с большим удовольствием. Просто как кино. Очень комфортная подача материала, чувствуется даже какое-то соучастие процессу. Спасибо. Круто, когда такой интересный материал подается с отличном картинкой и качественным звуком.
@MrSunTrope
@MrSunTrope 4 месяца назад
Леша, у тебя такая грамотная речь и внешка киноактера, в кино нужно сниматься))
@epifanovmaxim1
@epifanovmaxim1 7 месяцев назад
Леша, у тебя супер канал!пожалуйста, не останавливайся :)
@ОляСтогова
@ОляСтогова 3 месяца назад
спасибо большое! сейчас занимаюсь изучением самостоятельно, Вас очень приятно и, главное что, понятно!!! слушать. Очень интересно и все получается)
@Lancelot.Official
@Lancelot.Official 7 месяцев назад
Спасибо за бесценный урок. Жду с нетерпением второй части
@Lancelot.Official
@Lancelot.Official 7 месяцев назад
А нет, уже оказывается вышло. Бегу смотреть.
@kulichevskiy
@kulichevskiy 7 месяцев назад
Там и третья часть вышла :)
@nikitasherstianykh9155
@nikitasherstianykh9155 7 месяцев назад
Интересно - продолжайте пожалуйста) Особенно интересно как работать с случаем, когда данные появляются в всплывающем окне -> Например сайт где по нажатию кнопки "Контакты" всплывает окошко с контактами. Нажатие кнопки отправляет доп. запрос и по сути дополняет главный HTML блоком кода. Спасибо🙌🏻🙌🏻
@furniture202
@furniture202 7 месяцев назад
Пришел по настройке окружения, так дальше и остался, смотрю, все, что выходит! Спасибо! Парсить и сайты под логином и капчи - все интересно! а шлифовалок уже больше на сайте =)
@nikolaynikolay8019
@nikolaynikolay8019 3 месяца назад
Приятно слушать, классные усы
@kulichevskiy
@kulichevskiy 7 месяцев назад
🔥 Курс про автоматизацию рутины с помощью Python: python.smysl.io/
@greenanimal4596
@greenanimal4596 2 месяца назад
крутые усы, можно было бы получить данные с json файла и оттуда вытащить пагинацию
@ГенрихКраус-ч7г
@ГенрихКраус-ч7г 7 месяцев назад
Было бы славно посмотреть про капчи и прочие трудности, по типу ютуба
@ИгорьДобровольский-й1о
Cloudflare
@ИгорьДобровольский-й1о
а если у сайта защита cloudfare типо того то деать ? как это обойти
@sabirsadykov270
@sabirsadykov270 7 месяцев назад
опачки пошли просмотры👍🏻
@alexzakr
@alexzakr 7 месяцев назад
Я бы упростил условие для цикла while, посмотрев какой респонсе код выдаёт номер за границей диапазона.
@kulichevskiy
@kulichevskiy 7 месяцев назад
Хорошая идея, только там всегда 200 было. Страничка ж генерится, просто на ней нет ничего.
@alexzakr
@alexzakr 7 месяцев назад
@@kulichevskiy, посмотрел, как делают на форонде на нескольких сайтах. Заметил, что при превышении числа страниц часто возвращают последнюю. Может на этом условие сделать? В целом, очень хочется вас поблагодарить за мега профессиональный контент. Большое удовольствие и польза от вашего канала.
@bespalove4882
@bespalove4882 3 месяца назад
Добрый день! Подскажите, на какой должности можно работать с такими знаниями?
@kulichevskiy
@kulichevskiy 3 месяца назад
А на какой вы хотите?
@bespalove4882
@bespalove4882 3 месяца назад
Я не плохо знаю js и python . Умею работать с selenium и pandas. Нравится парсить сайты. Могу работать с бд. На какой должности можно работать с такими знаниями? Аналитика?
@kulichevskiy
@kulichevskiy 3 месяца назад
@@bespalove4882 Например, да. В общем, на какой хотите :)
@cryptohyde
@cryptohyde 7 месяцев назад
29:53 max_page последний элемент, зачем мудрить с дальнейшим переводом в интеджер всех элементов для поиска максимального. Ну и комент к концовке - про парсинг простых сайтов контента хоть отбавляй, как парсить сложные сайты?
@meodep
@meodep 7 месяцев назад
Здравствуйте. А парсить цены p2p на bybit или huobi так можно?
@kulichevskiy
@kulichevskiy 7 месяцев назад
Думаю да, но, наверное, есть более простой способ. У обеих бирж есть API.
@kulichevskiy
@kulichevskiy 7 месяцев назад
(бесстыжее промо) Приходите на курс, там будем учиться работать с API :)
@Anton-t2c
@Anton-t2c 7 месяцев назад
а как 403 сайты парсить? только не нужно про хэдерсы их замена не помогает как и замена ип
@kulichevskiy
@kulichevskiy 7 месяцев назад
Послушайте, надо разбираться. Вообще обычно подстановка cookie помогает. Возможно, стоит попробовать selenium - там прям логин и пароль ввести можно
@Anton-t2c
@Anton-t2c 7 месяцев назад
а как подставить куки в силениум чтобы браузер воспринимал пользователя как пользователя а не силениум чтобы обойти 403? @@kulichevskiy
@sledocktv7893
@sledocktv7893 7 месяцев назад
А когда набор на курс?
@kulichevskiy
@kulichevskiy 7 месяцев назад
Я думаю, что продажи откроются через 2-3 недели. Подпишитесь на сайте, я пришлю приглашение на вебинар
@art_alf-b9b
@art_alf-b9b 7 месяцев назад
где код?
@ГенрихКраус-ч7г
@ГенрихКраус-ч7г 7 месяцев назад
Что за тема в VsCode?
@kulichevskiy
@kulichevskiy 7 месяцев назад
Это Gruvbox :)
@timapigolev1640
@timapigolev1640 Месяц назад
Доктор кокс?
@Сергей-у5з6п
@Сергей-у5з6п 4 месяца назад
усы это треш какой-то...
@kulichevskiy
@kulichevskiy 4 месяца назад
👨🏻
@red8mark
@red8mark Месяц назад
Усы - топ. Не шаришь
Далее
Распаковка Monster High Potions №4
00:46
Просмотров 95 тыс.