Русский ИТ бизнес
Русский ИТ бизнес

Ежемесячные платеж за сервера

Ежемесячные платеж за сервера
Ежемесячные платеж за сервера. У нас bare metal для парсинга. Chrome потребляет много ресурсов в процессе работы, поэтому и остановились на таком решении. Раньше были облака, убежали сохранив бабульки и рады :)

p.s. я не против облаков, но для целей парсинга они не айс.

Русский ИТ бизнес

Комментарии (19)

  • Светящийся Хирург
    Светящийся Хирург
    купи серваки и поставь в офисе, дешевле будет Ответить
    раскрыть ветку (7)
    • Оранжевый Агент
      Оранжевый Агент
      Ну да, все равно проксю используют Ответить
    • Автор канала
      Автор канала
      угу. а шум? тепло? Ответить
      раскрыть ветку (5)
      • Авангардный Философ
        Авангардный Философ
        В подвал Ответить
        раскрыть ветку (1)
        • Автор канала
          Автор канала
          у нас нет тут подвала Ответить
      • Взволнованный Грузчик
        Взволнованный Грузчик
        А какие характеристики снимаете на baremetal vps или вдс,сколько ядер память и прочее если не секрет Ответить
      • Светящийся Хирург
        Светящийся Хирург
        в кладовку поставить внутрь шумоизоляционного бокса + вентиляцию на улицу. было бы желание Ответить
      • Пепельный Червь
        Пепельный Червь
        снять неотапливаемое помещение под офис, будет тепло) Ответить
  • Кислый Демон
    Кислый Демон
    Хммм, лично мы купили под парсинг мини пк (квадратики). Шума мало, тепла мало. А парсит в три-четыре потока спокойно Ответить
  • Ворчливый Монстр
    Ворчливый Монстр
    А причем тут Chrome? У вас серваки с графикой ? Ответить
    раскрыть ветку (6)
    • Раздражительный Жираф
      Раздражительный Жираф
      так хромом парсят, не? Ответить
      раскрыть ветку (4)
      • Ворчливый Монстр
        Ворчливый Монстр
        Я полный ноль в парсинге. Всегда считал что прасят каким-нибудь пайтон+селениум Ответить
        раскрыть ветку (2)
        • Раздражительный Жираф
          Раздражительный Жираф
          селениум как раз и используется для автоматизации работы браузера, просто он может запускаться в headless режиме и его не видно. А если в обычном режиме, то откроется обычная вкладка браузера Ответить
        • Арктический Хореограф
          Арктический Хореограф
          Так селениум и запускает хром Ответить
      • Океанический Гоблин
        Океанический Гоблин
        Хромом неудобно. Есть способы, но по умолчанию там политика безопасности не разрешает делать запросы к сайтам, которые сервером не разрешены. localhost тоже по умолчанию блокируется.
        Есть способы отключить, но в целом парсить удобнее из NodeJS. Ответить
    • Пухлый Воробей
      Пухлый Воробей
      Продвинутый парсинг через хром только Ответить
  • Буржуазный Фермер
    Буржуазный Фермер
    процик и раму жрет мама не горюй Ответить
  • Арктический Хореограф
    Арктический Хореограф
    Headless часто проверяют Ответить
  • Арктический Хореограф
    Арктический Хореограф
    Приходится запускать реальный браузер, и даже по кривым специальным мышку двигать, эмулируя юзера. Ответить