Тёмный

ИЩЕМ КЭШБЕК И БОНУСЫ СБЕРСПАСИБО НА МЕГА МАРКЕТЕ | ПАРСЕР ТОВАРОВ МЕГАМАРКЕТ НА PYTHON 2024 

Артём Ипатов про IT
Подписаться 2,3 тыс.
Просмотров 28 тыс.
50% 1

В этом видео я показываю как можно написать парсер товаров с мегамаркета с кэшбеком и бонусами сберспасибо. И находить самые лучшие цены и большие проценты. Используя для этого python и библиотеки selenium и beautiful soup 4.
Курс "Разработка WЕB-парсеров на python" (Промокод "RU-vid" даст скидку 4900р) - clck.ru/3AgfAd
Приобрести актуальную версию программы (обн. 01.05.2024) - clck.ru/3AgfE4
Если вам нужен парсер, или какое-то программное решение - мой телеграмм t.me/ipatov_pr

Опубликовано:

 

12 апр 2024

Поделиться:

Ссылка:

Скачать:

Готовим ссылку...

Добавить в:

Мой плейлист
Посмотреть позже
Комментарии : 80   
@ipatov_program
@ipatov_program Месяц назад
Данный код из видео больше не работает, актуальную версию парсера можно приобрести по ссылке в описании или переписать код
@user-ld7iv5dz6i
@user-ld7iv5dz6i 17 дней назад
хитрый ход
@PURGEPRODS
@PURGEPRODS 16 дней назад
@@user-ld7iv5dz6iдля мамонтов
@bitokblg2518
@bitokblg2518 16 дней назад
Да там они код страницы обновили фикс - 2 мин делов
@PURGEPRODS
@PURGEPRODS 16 дней назад
@@bitokblg2518 chatgpt 4o в помощь. Легко пофиксит
@mrmotoron1719
@mrmotoron1719 16 дней назад
@@bitokblg2518 Что именно нужно пофиксить?
@hippogryph4793
@hippogryph4793 2 дня назад
Афигеть) Косарь запросить с работяг за скрипт на селениуме - это сильно. Сначала посмотрел и порадовался, что подрастает новые пытливые умы. Думаю, дай направлю на путь истинный, подскажу что делает не так, но как увидел ценник, благотворительностью заниматься тоже настроение упало. Скажу только что: 1. Правильно ниже писали, внутри товара может быть список цен где кэшбек может быть выгоднее 2. Людям интересно скорее всего получить стоимость товара с вычетом бонусов, простая формула в экселе уже сделала бы выгоднее визуально этот проект 3. Селениум пакет подходящий для тестирования событий на сайте, визуального наблюдения работы анимаций, для таких вещей нужен другой подход, по своей сути более примитивный, для понимания более сложный, на деле более производительный и надежный. И да, он на Python
@SbIrok_official
@SbIrok_official Месяц назад
Красавчик, заслуженная подписка
@vectorvrick7679
@vectorvrick7679 28 дней назад
Просто хорош, красава.
@7-rs8gb
@7-rs8gb 25 дней назад
Хоть и учу с# для геймдева, но всё равно подпишусь. Такое тоже интересно
@k_a_ivaschenko
@k_a_ivaschenko 28 дней назад
Хорошее видео, спасибо. Если можешь сделай с live кодингом, я бы с радостью посмотрел!
@hotperchik9521
@hotperchik9521 17 дней назад
Ты большой молодец, если б ещё на гитХабе проект этот переделал цены тебе не было. Но это всё равно подписка и лайк)))
@user-rz3go4ve3v
@user-rz3go4ve3v Месяц назад
Пишет ошибка в сертификации и эксель файлы сохраняются пустые((( Подскажите, как решить можно, пожалуйста
@InfluxOW
@InfluxOW Месяц назад
Решал для себя ту же самую задачу. Понял, что удобнее делать это на фронте, а не на бэке - проблем гораздо меньше. Открываешь любой поиск, категорию и так далее, вставляешь в консоль браузера JS-скрипт для сортировки и получаешь отсортированный каталог. К тому же так у тебя перед глазами ещё картинки товара, рейтинг, количество отзывов и другая информация - в общем, стандартный мегамаркетовский каталог, просто в отсортированном, как тебе надо, порядке (в моём случае это была сортировка по бонусной скидке или по цене с учётом бонусов). Да и не нужно все фильтры на бэк в код тащить. Да и потом мегамаркет воткнёт защиту от ботов, и будет гораздо сложнее это сделать на бэке. В общем, для личных покупок, а не для скраппинга вариант с сортировкой на фронте мне кажется более приемлемым.
@cryptorangers721
@cryptorangers721 Месяц назад
поделишься скриптом?
@user-uv5gu3gk6w
@user-uv5gu3gk6w Месяц назад
Скрипт можно пожалуйста
@dmitryshatalov6622
@dmitryshatalov6622 18 дней назад
А я делал js скрипт для нахождения товаров с кешбэком более 50% ну% там любой можно ставить
@popogo1788
@popogo1788 15 дней назад
Пробовал вб парсить?
@alexeyfilippov42
@alexeyfilippov42 15 дней назад
какая разница где респонс обрабатывать:) в лучшем варианте на беке конечно, память браузера ограничена
@jth.000
@jth.000 Месяц назад
Красава. Буду у компа, если не забуду, то звезду тебе на гите влеплю)
@ipatov_program
@ipatov_program Месяц назад
Спасибо))
@ravlxmaster2090
@ravlxmaster2090 29 дней назад
код еще работает?
@jth.000
@jth.000 29 дней назад
@@ravlxmaster2090 , лол тут всего 43 комментария + автор закрепил комментарий. Ты глупый или что-то?
@dmitriymiroshnichenko9257
@dmitriymiroshnichenko9257 Месяц назад
Легенда
@bakerof
@bakerof Месяц назад
Все хорошо, только выгрузка получается не очень репрезентативной. Внутри товара может быть вкладка "Цены" и там может быть докучи предложений этого товара по другим ценам и с другими кэшбеками. Т.е. мало пройтись по поисковой выдаче, нужно еще и в каждый товар упасть и найти там самое выгодное предложение.
@Dude.540
@Dude.540 Месяц назад
И что тебе мешает допилить скрипт?
@bakerof
@bakerof Месяц назад
@@Dude.540 ничего не мешает. это на заметку тем, кто будет этот скрипт использовать.
@Dude.540
@Dude.540 Месяц назад
@@bakerof Ну тогда потрындим ради комментов ))
@ipatov_program
@ipatov_program 18 дней назад
По логике, если есть такой же товар но по другим ценам и с отличным кэшбеком, то он скорее всего встретится на след страницах и будет добавлен в выгрузку. Ну даже если проваливаться и собирать еще там, в конечном файле появятся дубли 🧐
@hsqlk
@hsqlk 17 дней назад
Делал по этому сайту стат тесты, оказалось у Apple самый большой кэшбэк, в тоже время он самый дорогой бренд. P.S. Да были компы за 300 - 500 от Asus, но их количество очень маленькое
@ANDYGBOX112
@ANDYGBOX112 Месяц назад
Возможно ли так парсить в режиме -headless для Хрома в серверной версии ubuntu?
@ipatov_program
@ipatov_program Месяц назад
Да можно, только по оперативки нужно настроить, чтобы всю не сжирал)) а то было пару раз такое…
@ANDYGBOX112
@ANDYGBOX112 Месяц назад
@@ipatov_program я немного откорректировал код, но вот у меня почему-то файл пустой получается...
@ipatov_program
@ipatov_program Месяц назад
Забыл добавить в requirements две библиотеки (pandas и XlsxWriter). Уже обновил на гитхабе, спасибо)
@STAER2008
@STAER2008 19 дней назад
Привет, а что за программа где ты код писал , подскажи пожалуйста
@ipatov_program
@ipatov_program 18 дней назад
Привет, это PyCharm
@ALTAIR32
@ALTAIR32 Месяц назад
Выдает ошибку, создаёт пустой xls
@user-rg7jg9ub3c
@user-rg7jg9ub3c Месяц назад
день добрый,обновите прогу?
@edwardfreedom
@edwardfreedom 28 дней назад
Плати
@Vano-re8rn
@Vano-re8rn Месяц назад
Можете показать, как запустить и работать с winlows версией . Мне старому пердуну тяжеловато).
@ngt_asm6451
@ngt_asm6451 Месяц назад
Я тоже не понимаю, программу запустил ссылку вставил пишет "Ошибка! Возможно не верно указан раздел. Удалите все доп фильтры с ссылки", хотя ссылка просто на раздел
@ipatov_program
@ipatov_program Месяц назад
Попробуйте скачать ещё раз , обновил github.com/pythononpractice/megamarket_parser/releases/download/v1.0/megamarket_parser.exe
@Vano-re8rn
@Vano-re8rn Месяц назад
@@ipatov_program . СПС . Вечером проверим.
@himosa0284
@himosa0284 Месяц назад
AttributeError: 'Worksheet' object has no attribute 'set_column'. Did you mean: 'max_column'? Как это исправить?
@ipatov_program
@ipatov_program Месяц назад
Проверь что библиотека XlsxWriter установлена
@user-og9kx3xw2g
@user-og9kx3xw2g 17 дней назад
​@@ipatov_program а какие вообще нужны библиотеки для её работы, перечисли пожалуйста
@_test_test
@_test_test 16 дней назад
​@@user-og9kx3xw2gможно посмотреть в импортах?
@koldun_pupkin
@koldun_pupkin Месяц назад
Интересное видео, а еще интересно, можно ли парсить кэшбек через тот же реквест
@ipatov_program
@ipatov_program Месяц назад
Спасибо. Ну вроде да, сервер отдает html по get запросу. Нужно только поднастроить, добавить cookie и headers чтобы пропускал запросы и потом ещё не блочил)
@oldbobbymen351
@oldbobbymen351 19 дней назад
Код не работает, но на сайте поменялась всего лишь вёрстка. Фиксится изи
@999poll
@999poll Месяц назад
Может разберешь потом создание парсера binance p2p?)
@ipatov_program
@ipatov_program Месяц назад
А что интересно спарсить?
@999poll
@999poll Месяц назад
@@ipatov_program текущие цены продажа/покупка для usdt-eur с определённым методом оплаты (иногда он сильно влияет на цену)
@999poll
@999poll Месяц назад
@@ipatov_program минимальную цену на USDT за CNY с определённого метода оплаты и с фильтром по сумме. Например, кто-то хочет продать 1кк по низкой цене, а мы можем купить максимум 1к - получается этот вариант мы отбрасываем.
@999poll
@999poll Месяц назад
Блин, ютуб не пропускает описание задачи 😢
@_test_test
@_test_test 16 дней назад
для бинанса есть апиха. селениумом скорее всего не получится и капча задушит
@user-hw3sp2og5z
@user-hw3sp2og5z Месяц назад
Крутой софт! Лайк. А если я хочу ссылку на раздел указать. Как это можно сделать?
@ipatov_program
@ipatov_program Месяц назад
Спасибо, можно так же по всему разделу искать, только немного код дописать\изменить придется
@user-rg7jg9ub3c
@user-rg7jg9ub3c Месяц назад
будет ли обновление проги?
@edwardfreedom
@edwardfreedom 28 дней назад
Сам обнови, там 5 мин
@Nikolay-fm5iv
@Nikolay-fm5iv 19 дней назад
сколько стоит такой парсинг?
@ipatov_program
@ipatov_program 19 дней назад
Напишите мне в телеграм artmiptv
@Kkkk-nt9vb
@Kkkk-nt9vb Месяц назад
Уже пофиксили. Не работает.
@ipatov_program
@ipatov_program Месяц назад
Да, изменили структуру на сайте. Переписывать надо
@easychannel3370
@easychannel3370 Месяц назад
Только не ботОв, а бОтов.
@ipatov_program
@ipatov_program Месяц назад
Спасибо 🤝🏻
@kukurukuchudnoe
@kukurukuchudnoe 18 дней назад
Итак, наебос по-сбермаркетовски Присылают промокод на 1000 р от 2000 р. Типа мы скучали, дай на клык и все такое… Ты радостный такой им решил воспользоваться. Ага как бы не так. Ты оформил заказ. промокод прошел все хорошо. НО ! Следите за руками После того как заказ собран ваш заказ аннулируют, промокод естественно слетает. И с вас списывают полную сумму. С поддержкой можно потом бодаться до посинения - они посылают в пешее путешествие. В общем сбермаркет пошёл по кривой дорожке - «не на…брешь не проживаешь»
@AlbusLeos
@AlbusLeos 16 дней назад
Ни разу такого не было
@JustStef
@JustStef 15 дней назад
если сбермаркет, то скорее всего товара не было в наличии или весовой товар вышел дешевле и вышло меньше 2к, от чего промо и слетел. Нужно с запасом набирать и ставить "позвонить если товара нет в наличии"
@kukurukuchudnoe
@kukurukuchudnoe 14 дней назад
@@JustStef конечно. Но там было масло для машины. Они отменили заказ промик слетел. И тут же сами сделали заказ с этим маслом по полной стоимости и привезли его
@kukurukuchudnoe
@kukurukuchudnoe 14 дней назад
@@AlbusLeos ну вот теперь они так работают. Ставьте лимит на сумму операции по карте если через промик заказываете
@user-re1ys3hu8j
@user-re1ys3hu8j 14 дней назад
Этот магазин кидает на кэшбэк.
@SbIrok_official
@SbIrok_official Месяц назад
[+] Страница 1 [26392:27284:0415/203747.299:ERROR:cert_issuer_source_aia.cc(35)] Error parsing cert retrieved from AIA (as DER): ERROR: Couldn't read tbsCertificate as SEQUENCE ERROR: Failed parsing Certificate Что это значит? Так все страницы в консоли пишет
@SbIrok_official
@SbIrok_official Месяц назад
[+] Страница 38 [24196:24288:0415/204427.267:ERROR:ssl_client_socket_impl.cc(970)] handshake failed; returned -1, SSL error code 1, net_error -202
@ipatov_program
@ipatov_program Месяц назад
Ничего страшного, это драйвер логи выводит. Результат сохранится в любом случае
Далее
WHY DOES SHE HAVE A REWARD? #youtubecreatorawards
00:41
ДЕНЬ 2 | ПУТЬ МИЛЛИОНЕРА
6:29