Telega.FM Лента новостей из телеграмм по темам
Русский ИТ бизнес 👨
Подписаться
Post media
Ежемесячные платеж за сервера. У нас bare metal для парсинга. Chrome потребляет много ресурсов в процессе работы, поэтому и остановились на таком решении. Раньше были облака, убежали сохранив бабульки и рады :)

p.s. я не против облаков, но для целей парсинга они не айс.

Русский ИТ бизнес
2077/13 Открыть в Telegram

Комментарии (19)

  • insomnia_db
    купи серваки и поставь в офисе, дешевле будет
    • DrDSmith
      Ну да, все равно проксю используют
    • GroupAnonymousBot
      угу. а шум? тепло?
      • btrzen
        В подвал
        • GroupAnonymousBot
          у нас нет тут подвала
      • Mrlackride
        А какие характеристики снимаете на baremetal vps или вдс,сколько ядер память и прочее если не секрет
      • insomnia_db
        в кладовку поставить внутрь шумоизоляционного бокса + вентиляцию на улицу. было бы желание
      • rznvlxndr
        снять неотапливаемое помещение под офис, будет тепло)
  • mur_mur_orel
    Хммм, лично мы купили под парсинг мини пк (квадратики). Шума мало, тепла мало. А парсит в три-четыре потока спокойно
  • 1684794669
    А причем тут Chrome? У вас серваки с графикой ?
    • dmitry236
      так хромом парсят, не?
      • 1684794669
        Я полный ноль в парсинге. Всегда считал что прасят каким-нибудь пайтон+селениум
        • dmitry236
          селениум как раз и используется для автоматизации работы браузера, просто он может запускаться в headless режиме и его не видно. А если в обычном режиме, то откроется обычная вкладка браузера
        • nutanix
          Так селениум и запускает хром
      • McConst
        Хромом неудобно. Есть способы, но по умолчанию там политика безопасности не разрешает делать запросы к сайтам, которые сервером не разрешены. localhost тоже по умолчанию блокируется.
        Есть способы отключить, но в целом парсить удобнее из NodeJS.
    • rusrich1
      Продвинутый парсинг через хром только
  • sot1red
    процик и раму жрет мама не горюй
  • nutanix
    Headless часто проверяют
  • nutanix
    Приходится запускать реальный браузер, и даже по кривым специальным мышку двигать, эмулируя юзера.