ИЩЕМ КЭШБЕК И БОНУСЫ СБЕРСПАСИБО НА МЕГА МАРКЕТЕ | ПАРСЕР ТОВАРОВ МЕГАМАРКЕТ НА PYTHON 2024
Vložit
- čas přidán 12. 04. 2024
- В этом видео я показываю как можно написать парсер товаров с мегамаркета с кэшбеком и бонусами сберспасибо. И находить самые лучшие цены и большие проценты. Используя для этого python и библиотеки selenium и beautiful soup 4.
Курс "Разработка WЕB-парсеров на python" (Промокод "CZcams" даст скидку 4900р) - clck.ru/3AgfAd
Приобрести актуальную версию программы (обн. 01.05.2024) - clck.ru/3AgfE4
Если вам нужен парсер, или какое-то программное решение - мой телеграмм t.me/ipatov_pr
Данный код из видео больше не работает, актуальную версию парсера можно приобрести по ссылке в описании или переписать код
хитрый ход
@@user-ld7iv5dz6iдля мамонтов
Да там они код страницы обновили фикс - 2 мин делов
@@bitokblg2518 chatgpt 4o в помощь. Легко пофиксит
@@bitokblg2518 Что именно нужно пофиксить?
Красавчик, заслуженная подписка
Просто хорош, красава.
Хоть и учу с# для геймдева, но всё равно подпишусь. Такое тоже интересно
Хорошее видео, спасибо. Если можешь сделай с live кодингом, я бы с радостью посмотрел!
Ты большой молодец, если б ещё на гитХабе проект этот переделал цены тебе не было. Но это всё равно подписка и лайк)))
Пишет ошибка в сертификации и эксель файлы сохраняются пустые(((
Подскажите, как решить можно, пожалуйста
Решал для себя ту же самую задачу. Понял, что удобнее делать это на фронте, а не на бэке - проблем гораздо меньше. Открываешь любой поиск, категорию и так далее, вставляешь в консоль браузера JS-скрипт для сортировки и получаешь отсортированный каталог. К тому же так у тебя перед глазами ещё картинки товара, рейтинг, количество отзывов и другая информация - в общем, стандартный мегамаркетовский каталог, просто в отсортированном, как тебе надо, порядке (в моём случае это была сортировка по бонусной скидке или по цене с учётом бонусов). Да и не нужно все фильтры на бэк в код тащить. Да и потом мегамаркет воткнёт защиту от ботов, и будет гораздо сложнее это сделать на бэке. В общем, для личных покупок, а не для скраппинга вариант с сортировкой на фронте мне кажется более приемлемым.
поделишься скриптом?
Скрипт можно пожалуйста
А я делал js скрипт для нахождения товаров с кешбэком более 50% ну% там любой можно ставить
Пробовал вб парсить?
какая разница где респонс обрабатывать:) в лучшем варианте на беке конечно, память браузера ограничена
Красава. Буду у компа, если не забуду, то звезду тебе на гите влеплю)
Спасибо))
код еще работает?
@@ravlxmaster2090 , лол тут всего 43 комментария + автор закрепил комментарий. Ты глупый или что-то?
Легенда
Все хорошо, только выгрузка получается не очень репрезентативной. Внутри товара может быть вкладка "Цены" и там может быть докучи предложений этого товара по другим ценам и с другими кэшбеками. Т.е. мало пройтись по поисковой выдаче, нужно еще и в каждый товар упасть и найти там самое выгодное предложение.
И что тебе мешает допилить скрипт?
@@Dude.540 ничего не мешает. это на заметку тем, кто будет этот скрипт использовать.
@@bakerof Ну тогда потрындим ради комментов ))
По логике, если есть такой же товар но по другим ценам и с отличным кэшбеком, то он скорее всего встретится на след страницах и будет добавлен в выгрузку. Ну даже если проваливаться и собирать еще там, в конечном файле появятся дубли 🧐
Делал по этому сайту стат тесты, оказалось у Apple самый большой кэшбэк, в тоже время он самый дорогой бренд.
P.S. Да были компы за 300 - 500 от Asus, но их количество очень маленькое
Привет, а что за программа где ты код писал , подскажи пожалуйста
Привет, это PyCharm
Возможно ли так парсить в режиме -headless для Хрома в серверной версии ubuntu?
Да можно, только по оперативки нужно настроить, чтобы всю не сжирал)) а то было пару раз такое…
@@ipatov_program я немного откорректировал код, но вот у меня почему-то файл пустой получается...
Забыл добавить в requirements две библиотеки (pandas и XlsxWriter). Уже обновил на гитхабе, спасибо)
день добрый,обновите прогу?
Плати
Выдает ошибку, создаёт пустой xls
Можете показать, как запустить и работать с winlows версией . Мне старому пердуну тяжеловато).
Я тоже не понимаю, программу запустил ссылку вставил пишет "Ошибка! Возможно не верно указан раздел. Удалите все доп фильтры с ссылки", хотя ссылка просто на раздел
Попробуйте скачать ещё раз , обновил github.com/pythononpractice/megamarket_parser/releases/download/v1.0/megamarket_parser.exe
@@ipatov_program . СПС . Вечером проверим.
AttributeError: 'Worksheet' object has no attribute 'set_column'. Did you mean: 'max_column'?
Как это исправить?
Проверь что библиотека XlsxWriter установлена
@@ipatov_program а какие вообще нужны библиотеки для её работы, перечисли пожалуйста
@@user-og9kx3xw2gможно посмотреть в импортах?
Интересное видео, а еще интересно, можно ли парсить кэшбек через тот же реквест
Спасибо. Ну вроде да, сервер отдает html по get запросу. Нужно только поднастроить, добавить cookie и headers чтобы пропускал запросы и потом ещё не блочил)
Крутой софт! Лайк. А если я хочу ссылку на раздел указать. Как это можно сделать?
Спасибо, можно так же по всему разделу искать, только немного код дописать\изменить придется
Код не работает, но на сайте поменялась всего лишь вёрстка. Фиксится изи
будет ли обновление проги?
Сам обнови, там 5 мин
Может разберешь потом создание парсера binance p2p?)
А что интересно спарсить?
@@ipatov_program текущие цены продажа/покупка для usdt-eur с определённым методом оплаты (иногда он сильно влияет на цену)
@@ipatov_program минимальную цену на USDT за CNY с определённого метода оплаты и с фильтром по сумме.
Например, кто-то хочет продать 1кк по низкой цене, а мы можем купить максимум 1к - получается этот вариант мы отбрасываем.
Блин, ютуб не пропускает описание задачи 😢
для бинанса есть апиха. селениумом скорее всего не получится и капча задушит
сколько стоит такой парсинг?
Напишите мне в телеграм artmiptv
Этот магазин кидает на кэшбэк.
Уже пофиксили. Не работает.
Да, изменили структуру на сайте. Переписывать надо
Только не ботОв, а бОтов.
Спасибо 🤝🏻
Итак, наебос по-сбермаркетовски
Присылают промокод на 1000 р от 2000 р. Типа мы скучали, дай на клык и все такое…
Ты радостный такой им решил воспользоваться. Ага как бы не так.
Ты оформил заказ. промокод прошел все хорошо. НО ! Следите за руками
После того как заказ собран ваш заказ аннулируют, промокод естественно слетает. И с вас списывают полную сумму.
С поддержкой можно потом бодаться до посинения - они посылают в пешее путешествие.
В общем сбермаркет пошёл по кривой дорожке - «не на…брешь не проживаешь»
Ни разу такого не было
если сбермаркет, то скорее всего товара не было в наличии или весовой товар вышел дешевле и вышло меньше 2к, от чего промо и слетел. Нужно с запасом набирать и ставить "позвонить если товара нет в наличии"
@@JustStef конечно. Но там было масло для машины. Они отменили заказ промик слетел. И тут же сами сделали заказ с этим маслом по полной стоимости и привезли его
@@AlbusLeos ну вот теперь они так работают. Ставьте лимит на сумму операции по карте если через промик заказываете
[+] Страница 1
[26392:27284:0415/203747.299:ERROR:cert_issuer_source_aia.cc(35)] Error parsing cert retrieved from AIA (as DER):
ERROR: Couldn't read tbsCertificate as SEQUENCE
ERROR: Failed parsing Certificate
Что это значит?
Так все страницы в консоли пишет
[+] Страница 38
[24196:24288:0415/204427.267:ERROR:ssl_client_socket_impl.cc(970)] handshake failed; returned -1, SSL error code 1, net_error -202
Ничего страшного, это драйвер логи выводит. Результат сохранится в любом случае