Русский ИТ бизнес
Русский ИТ бизнес

Парсинг xmldatafeed.com - каждый бы день да так :) Но мы постепенно делаем новый сайт, где люди

Парсинг xmldatafeed.com - каждый бы день да так :) Но мы постепенно делаем новый сайт, где люди
Парсинг xmldatafeed.com - каждый бы день да так :) Но мы постепенно делаем новый сайт, где люди смогут работать с парсингом (не сложным) как SAAS - на вход домен, на выходе контент.

Причем по направлениям - 2GIS/WB/OZON и т.п. И оказалось, что это совсем не простая задача, мягко говоря. Думал будет проще :) Никто из крупных не любят, когда их парсят...

tg / max

Комментарии (19)

  • Полевой Пёс
    Полевой Пёс
    ваши методы парсинга секретные или где то расписано в двух словах суть? Ответить
    раскрыть ветку (5)
    • Раздражительный Жираф
      Раздражительный Жираф
      в ИИ, приходишь и говоришь: вот тебе пул мобильных прокси, подними какой-то антидетект браузер, покрути поверти, обрати внимание на соответствие времени прокси и докер контейнера, положи всё в табличку сделай заебись

      и он сделает Ответить
      раскрыть ветку (4)
      • Автор канала
        Автор канала
        да да. попробуй ozon так парсить 1000+ товаров каждый день и взвращайся сюда снова Ответить
        раскрыть ветку (2)
        • Раздражительный Жираф
          Раздражительный Жираф
          да ты, блять, даже кнопку не смог с ИИ сделать, конечно, какой с тебя спрос) Ответить
          раскрыть ветку (1)
          • Автор канала
            Автор канала
            сделал. при росте проекта мой вайб-кодинг начинает кашлять. контекст слишком больой. Ответить
      • Модный Шериф
        Модный Шериф
        ша есть МСП уже ниче писать не надо все за тебя сделает) Ответить
  • Бодрствующий Геймер
    Бодрствующий Геймер
    Сколько источников в чеке? Ответить
    раскрыть ветку (11)
    • Автор канала
      Автор канала
      там сложный сбор, цепочка. больше не могу сказать Ответить
      раскрыть ветку (10)
      • Скрипучий Миротворец
        Скрипучий Миротворец
        А юридическая сторона как поживает? Парсинг же запрещен со стороны озона и вб юридически, если собираешься в чистую продавать услуги по парсингу или данные от него, то это будет незаконно и озон/вб и остальные могут кинуть жалобу Ответить
        раскрыть ветку (9)
        • Автор канала
          Автор канала
          очень хороший вопрос - но это открытые данные. и мы продаем услугу сбора. Ответить
          раскрыть ветку (8)
          • Раздражительный Жираф
            Раздражительный Жираф
            Мне, кстати, кажется там всё не так просто. Вы же вроде поменяли формулировку на poisk.im и теперь не пишете "купить базу магазина ...". У вас там теперь "аналитика".

            Я делаю ставку, что вопрос полноты данных.

            Если ты отдаешь базу товаров с характеристиками, то уже она является объектом авторского права. Я как-то видел дело о банкротстве интернет-магазина и там каталог был натурально оценен в несколько млн.

            Как ты его там у себя в документах назвал дело десятое, хоть "аналитика". Если ты отдал sku, название, цену - это факты. Если с характеристиками, то мне кажется залёт Ответить
            раскрыть ветку (2)
            • Автор канала
              Автор канала
              характеристики не объект права. картинка + описание = объект Ответить
              раскрыть ветку (1)
              • Раздражительный Жираф
                Раздражительный Жираф
                объектом права является база, т.е. совокупность категорий и товаров Ответить
          • Скрипучий Миротворец
            Скрипучий Миротворец
            У меня тоже сейчас дилемма, я хочу репрайсер написать для озона, у меня уже есть система готовая для продавцов на озоне, но цены, которые видны пользователям парсить нельзя юридически, потому что озон может докопаться, но некоторые из этой ниши парсят без проблем, и я на знаю что делать, использовать доп сервер для Парсинга, чтобы на основной, который зарегистрирован в ркн не подали жалобу или вообще не делать ничего. Как думаешь, как поступить? Хочется услышать мысли и совет твой Ответить
            раскрыть ветку (4)
            • Раздражительный Жираф
              Раздражительный Жираф
              это цена до авторизации или после? Ответить
              раскрыть ветку (3)
              • Скрипучий Миротворец
                Скрипучий Миротворец
                Без разницы, она одна показывается, что до авторизации, что после Ответить
                раскрыть ветку (2)
                • Раздражительный Жираф
                  Раздражительный Жираф
                  ну если до авторизации, то озон может что угодно писать, считаю, что сама связка sku - категория - название - цена не должны защищаться. Другой вопрос, что у них юристы и так заряжены и мозги могут поебать обычному разрабу) Но все сервисы мониторинга цен на этом построены и работают, в судах не утонули Ответить
                  раскрыть ветку (1)
                  • Скрипучий Миротворец
                    Скрипучий Миротворец
                    Понял) спасибо Ответить
  • Колеблющийся Фазан
    Колеблющийся Фазан
    Сделал парсинг wb для личных нужд. Покритикуйте.
    nt.orino.keenetic.pro Ответить