Парсим товары Ozon с помощью Python 

Спасибо ☺️

Отличное решение 👍

Только undetected_chromedriver помог? без селениума совсем никак сейчас не распарсить?

@@user-gk1rn5lm6t без селениума не получилось, так же пытался воспользоваться cloudscraper (requests) и увы не вышло

Да, в парсинге постоянно всё меняется. Но это хорошая новость - без работы не останемся )

@@usota ждём видео как обойти))

Любое видео по selenium

Да, VS Code.

@@usota Евгений, спасибо большое за ответ. А есть ли какой-то простой алгоритм парсить json сразу множества товаров. Ну например по товарной группе.

Да, алгоритм такой же. Открываем товарную группу и смотрим, по какому запросу отдаётся список товаров.

Этот парсер уже не актуален, причина - в описании. Соответственно, ничего не получив, парсер и выдаёт ошибку)

Поверьте, я тоже знаю чуть больше 1%. Опыт приходит со временем.

Даже не представляю, когда это может потребоваться. Приведите пример задачи?

@@usota в моем случае поиск работы по стране (не РФ) так как отсуствует общий агрегатор и присутствует большое количество сайтов представляющие вакансии. Фактически они однообразные по структуре.

У меня много похожих проектов, но все делаю по одной схеме - под каждый сайт свой парсер с единой базой данных. Так проще обслуживать парсеры. А ломаются они регулярно )

Сделайте свой агрегатор 😁

@@usotaнапример агрегатор ставок букмекерских контор, - вилочники за это готовы платить гигантские деньги ))

У нас в телеграм-чате есть варианты решений, ссылка есть в описании, присоединяйтесь

Да, этот способ уже не актуальный.

Немного не понял вопрос… Окно поиска я вызываю комбинацией клавиш Ctrl + F

@@usota хотел узнать как вызывать окно поиска, благодарю!

В консоли есть иконка фильтра

Код из видео ещё не знал про блокировку, поэтому нужно доработать, может попробовать Селениум

@@usota то есть с момента записи и публикации видео Озон принял меры против парсинга?

Да, с 19 мая по моим ощущениям

@@usota ждём от вас новый видеоурок 😁

Будем разбираться ) Если будут идеи или другие вопросы - пишите в чат по парсингу, там обсуждаем эту тему.

Прямым запросом уже не получится, сайт обнаруживает скрипт.

@@usota спасибо за ответ, есть ли выход?

К сожалению, в php не знаю. Но мы разбирали этот вопрос в нашем чате t.me/proparsing

@@usota большое спасибо!

Не понял вопрос, уточните?

Да, в описании добавил об этом инфо

@@usota ааа, ок!

Я думаю не будет. В таких случаях остаётся использовать Селениум. А по селениуму полно видео уже снято, вряд ли я сделаю лучше.

@@usota Наверное вы правы, спасибо за ответ

@@usota cloufare не обходится sileniumom

Возможно вы правы.

Да, верно - с июня 2022 года сайт защитил доступ к api с помощью CloudFlare.

Отличная идея, спасибо 🙏

Разве парсинг - это нелегально?

@@usota сам парсинг нет, а вот использование того, что вы собрали в коммерческих целях - уже совсем другое. одно дело, если вы риэлтор, и собрали для себя свежую инфу автоматически, а если вы это завернули в проект, и продаете базу многим клиентам - это уже вам юристы гигантов объяснят. С авторскими правами і тд. Они живут с платных услуг, которые вы у них отбираете. Но все зависит от ваших юристов). Если наложат арест на ваше имущество на время рассмотрения в суде, и не будут никуда спешить. Вам это не понравится. именно по этому он серый))) и лучше делать это не публично. И именно поэтому парсеры только парсят, и дальше не идут(или говорят что не идут). Как и вся муть в телеграм каналах ведь уголовно не наказуемая. Пока вы понемногу стрижете пассивных пользователей. Но когда потери будут у гигантов, сразу найдутся инструменты познакомится с вами)) тоже с серого инструментария.. А дальше у кого шары прочнее. Не каждый умный айтишник - морально крепкий айтишник). Особенно если о нем много информации и рычагов влияния. Или поработаете на дядю на его условиях, если вы хороший спец)). Сейчас люди пропадают даже на высоких должностях, а какого там айтишника удалить не сложно. Или идти в паблик максимально. Но паблик не про парсинг. Там вашим действиям понимания не будет. А если еще подсветят типа "из-за ваших действий сайт лежал 2 дня", ищите где это опровергнуть(на такую же аудиторию).

@canal-bx8wr вы правы на 100%. Я к тому, что парсинг - это легально. Использовать данные парсинга в коммерческих целях - тоже легально, если все стороны согласны, как например поставщик, который предоставляет данные по API, например тот же Озон для своих селлеров. Парсинг - это обычный легальный бизнес, как и фермерство. Просто нужно знать, какие растения можно сажать, а от выращивания, обработки и продажи каких лучше отказаться. Спасибо за развернутый комментарий. Не понял только про паблик. Что значит идти в паблик максимально?

@@usota то что поставщик сам дает - это понятно, это детский сад)) но вот если поставщик тратит на защиту от другого парсинга огромные средства, а его данные продают - это уже не хорошо) И за это по рукам дают. И если пришли уже по бесприделу (не спрашивая законен ли ваш парсинг или нет) - иногда публичность может откатить назад подобный наезд. Или вас по тихому закроют, и об этом никто не узнает. Но для этого нужны независимые СМИ.