Русский ИТ бизнес 👨
Подписаться
Статья про парсинг. Питон. Обход защиты и т.п.

"Универсальный парсинг сайтов на Python: requests vs headless, токены, куки, прокси и ротация IP"

Но я вот так скажу, это все конечно здорово, но когда к вам приходят клиенты и говорят, что нам надо делать в сутки около 3 млн. запросов на каждый маркетплейс, начинаешь понимать, что речь идет о совершенно других мощностях- ресурсах - подходах ит.п.

Вообще маркетплейсам пора просто продавать дампы своей базы и будет им счастье :)

Русский ИТ бизнес

Комментарии (0)

  • e23book
    Низкотехнологичная статья) Я вам говорю как человек, который в сутки парсил на Python в разы больше. Скажем к примеру все открытые данные одной социальной сети.
    • McConst
      соцсеть карьерного роста?
      • e23book
        Нет, больше. На тот момент там помню было 190млн пабликов из которых 20-30 стоили внимания. Но по резюме были партнеры…для сопоставлений
    • lord_markus
      Вся соль в СЕОшке чтобы привлечь кого угодно, от клиентов, до начинающих программистов.
  • KTarasov
    Так у большинства МП сейчас есть платное API, по которому можно всё получать.
    • GroupAnonymousBot
      Полагаю вопрос цены ?
  • vladrad
    Странная статья. Ничего не сказано про продукт, который продвигается. Что это такое и как им пользоваться
  • ftpoleg
    Дожились... Заворачиваем статью с хабра в PDF и получаем новый пост для канала
    • Ifrolove
      это топ, реально)
    • uglev
      Ай, да Максим тут бывает и запрещенку прорекламирует, нашли повод охереть 🤣
      • ftpoleg
        Что рекламировать - эт дело хозяйское. А тут я открыл файл и почувствовал себя идиотом
    • irtek_dev
      Подождите, на CD дисках распространять будут.