Бот ВКонтакте на Python #1 | Парсинг ВКонтакте 

Спасибо большое за фидбэк 💪

Благодарю за фидбэк 💪

Благодарю 💪

Благодарю 💪

Благодарю 💪

Благодарю! Рад что полезно

Благодарю за фидбэк 💪

как прогресс?

Спасибо за поддержку!

Спасибо 💪

Благодарю 💪

Большое спасибо за фидбэк! В то время материал совсем не зашел, если увижу активность под роликами, сразу возьмусь за продолжение.

@@PythonToday сейчас материалы про работу с ВК и создание инструментов для блогерской темы будет залетать! К примеру я очень жду от Вас видео, потому что очень всё хорошо показываете и объясняете!

Благодарю за фидбэк

Благодарю за фидбэк 💪

Благодарю

Спасибо

Спасибо за фидбэк 💪 Не копался в нем, посмотрю

Спасибо большое за фидбэк! Все руки не дойдут продолжить)

Дайте проект посмотреть😉

@@Noable увы, но он мне нужен для комм. цели)

Спасибо за фидбэк 💪 А посты переделываешь? В том смысле может текст какой накладываешь с помощью pillow или opencv, или просто репост готовых с выборкой? Солидарен с Ильей, было бы интересно посмотреть код, если ещё и самописный то вообще огонь.

@@PythonToday если говорить про ту, что автоматизированная, то тут просто парс случайной цитаты с сайта, а затем выбор рандомной фотографии из уже заготовленных. 60 фотографий для цитат в принципе достаточно, и проблем не вызывает. А если говорить про ту, что полностью парси, то я выбираю в рандомно группу из списка, затем выбираю рандомный пост за последнее время с высокой активностью, беру оттуда текст, и фотографии. Косяк в том, что если открыть фотографию, то показывается группа из которой было спаршено, зато проблем с разрешением, и порядком фото нет. А на счет кода, я сейчас скину ниже, но должен предупредить что я новичок, и строго не судите :D

Вот код который парсит у меня текст и фото: def random_post_get(url_group): data = { 'access_token': config.ACC_TOK, 'domain': url_group, 'count': 100, 'v': 5.124} r = requests.post('api.vk.com/method/wall.get', data).json() r = r['response'] r = r['items'] cnv = 0 while cnv

Благодарю за фидбэк и информацию!

@@PythonToday Сейчас можно этот массив перебирать внутри по "type" z - где z оригинал файла, и брать [-1] т.к сейчас оно не соответствует максимальному значению, там рандом стало.

а можно подробнее? сейчас как раз на этом этапе встал. не понимаю, какой алгоритм лучше, чтобы извлечь url именно наибольшего размера. я новичок. Удается вывести все данные sizes, а начинаю писать условия и получается очень много веток if, от которых голова пухнет и сам путаюсь в своих же if.

@@el.cheshire В документации же всё есть. Если тебе нужно фото с максимальным разрешением указывай в параметре fields, либо photo_max_orig, либо photo_max

@@fantomasray не могу понять, в какой строке кода что надо изменить. вместо photo1280 прописать еще один фильтрующий цикл?

Большое спасибо за поддержку!

Спасибо за фидбэк. А что не понятно?

Что там разжевывать? Знания элементарные, учите основы)

Поддерживаю, сегодня первый раз запустил питон, поэтому и мне тоже непонятно

Благодарю за фидбэк) Извините, но я не беру сейчас заказы. Не хватает времени

Спасибо за ответ, надеюсь вернуться к теме, когда у вас появится возможность. Мне особо спешить некуда...;-)

Пожалуйста!

Привет, а на кой оно? Чем плох Firefox и Chromium? На сколько знаю, раньше были костыли с запуском Opera, сейчас вроде их устранили, но её никто и не юзает в тестах либо прям очень маленький процент, может ошибаюсь конечно.

@@PythonTodayУ меня нет Chrome или Firefox, а для тестов не хочется ставить.

Т.е этот вариант проще?))

@@PythonToday ну вроде бы быстрее, чем вложенные циклы и ифки)

Благодарю за фидбэк! На момент написания кода, проблем не было

@@PythonToday а задать вопрос, по этому коду можно? Именно по ошибке

У меня получился вот такой код. Это на 15.03.2022. Версия вк 5.131 Тут сразу с учетом множественности фото в постах. Но не учтено, что это может быть репост. Если это репост, то он просто не найдет "attachments" и пойдет дальше. Мб это учтут в следующих видео, а мб надо самим дописывать. Но от этого увеличивается лишь путь поиска "attachments". Я не стала его включать ( т.к. писала код для себя для понимания. И мне этого хватает) # извлекаем данные из постов for post in posts: post_id = post['id'] print(f'Открываю пост с ID {post_id}') try: if "attachments" in post: post = post["attachments"] #начинаем забирать фото попорядку. с начала 1, потом много for post_item_photo in post: if post_item_photo["type"] == "photo": # выясняем тип в посте height = 0 # для хранения макс высоты ( а занчит макс разрешение) h_max = 0 # для хранения индекса ячейки с макс разрешением for h in range(len(post_item_photo["photo"]["sizes"])): # ходим по всем разрешениям if post_item_photo["photo"]["sizes"][h]['height']>height: # если оно больше данного height = post_item_photo["photo"]["sizes"][h]['height'] # то запоминаем высоту h_max = h # и запоминаем, где он расположен post_photo = post_item_photo["photo"]["sizes"][h_max]["url"] # забираем юрл из макс разрешения print(f'Фото с расширением {height}') print(post_photo) else: print('Линк или аудио пост') break except Exception: print(f"Что-то посшло не так с постом ID {post_id}!")

@@juiwas_morori спасибо большое, скопировал вашу "портянку" и теперь получаю фото в макс. разрешении🤗 Можно у вас поинтересоваться, где вы обучались программированию?

WebStorm для JS

@@PythonToday спасибо

PyCharm

Думаю если API позволяет, соберем. Уже задумал проект по распознованию лиц, точнее по поиску аккаунтов в ВК 👍

Готовая библиотека конечно хорошо, но мне интересно разбираться в коде самому, пробовать что-то новое.

@@PythonToday Сложно не согласиться ))) Если не трудно, можете оставлять ссылки на pypi.org в телеграме в постах с тегам #tipsandtricks ? Классный формат постов, нравится! Было бы удобно с ходу на pypi заходить!

@@user-lb3wo7xe4s Да, конечно) Спасибо за фидбэк 👍

есть решение?

@@user-bp5en6pr7t была такая же проблема, стал вставлять короткую ссылку группы и все заработало

Как у фото нет расширения? Оно в base64? Если да, то можно без проблем декодировать в изобрежение. В google "base64 to img python". Но прям сомневаюсь что ты столкнулся с этим. По поводу качества конечно по ширине и высоте проще, мы этим собственно и занимались. В общем не понял вопроса.

@@PythonToday Я имею ввиду что у меня в json файле вообще нет "photo_2560", "photo_1280" и тд. Вот этих расширений, из-за чего код попросту работает не корректно

Просто как один из вариантов

Когда-нибудь и я познаю регулярки)

Тоже сразу заметил, что вручную набивать разрешения непрактично и теряется универсальность. Оформил как функцию, работает на ура

Сотрудничество: @web_runner в телеграм

@@PythonToday мне почему то не даёт написать тебе вот мой ID @sokolandrey1234

В domain точно имя группы передаешь, а не ID? Покажи ссылку по которой запрос формируешь

@@user-oh4fc4rw4d group_name какой, скинь. Попробую и отпишусь

@@PythonToday от group_ name ничего не зависит. Пробовал подставлять разные значения, проверяется наличие и создаётся директория, файл, идёт запись номеров постов в файл, а парсит все равно мою стену. Может имеет значение рабочая среда? Убунту + терминал + sublime text 3. Python 3, все пакеты установлены .

Ну а группу для примера парсил Joomla Russia

@@user-oh4fc4rw4d Скорее всего неверно сформировал запрос на получение токена. Попробуй заново создать приложение, и использовать эту ссылку для получения токена: oauth.vk.com/authorize?client_id=СЮДА_ID_СВОЕГО_ПРИЛОЖЕНИЯ&display=page&redirect_uri=oauth.vk.com/blank.html&scope=wall,video,offline&response_type=token&v=5.52

В ошибке явно сказано, что с проблемы с токеном

удалось решить ? у меня такая же фигня , в переменную токен записываю полностью ссылку токен которая сформировалась , что не так не пойму

@@PythonToday чуть по медленее между действиями , чуть помедленнее. Час убил

Я начал вести канал, т.к не хватало практики. Если у тебя есть опыт в программировании, есть проекты, обязатально снимай видео и делись опытом. Результат не заставит себя ждать и получишь отклик. Главное не останавливайся, цифровизация и как следствие программирование популярны как никогда.

@@PythonToday можешь посмотреть последнее видио. Дать совет что так что нетак