Русский ИТ бизнес
Русский ИТ бизнес

Будни парсинга xmldatafeed.com - ВБ наконец (!) решил немного усложнить жизнь парсерам и ввел лимиты. Может быть ребята найдут варианты собирать все товары из категории, но тут уже надо проводить НИОКР :)

Ожидаемо, надо признать. Никакой человек не будет просматривать дальше 5-6 страницы в каталоге - проще поиском воспользоваться.

Команда ставил грустные смайлики :) - надо общаться с клиентами и обьяснять ситуацию. Переписка в mattermost - там все работаем, локальный мессенджер.

Русский ИТ бизнес
  • Раздражительный Жираф
    Дед, ну какие, блядь, НИОКР? Вы просто будете дрочить фильтры в категориях пока не вытряхнете её полностью
    • Автор канала
      можно идти от продавцов. парсить их товары. и запоминать категории
      • Раздражительный Жираф
        о, значит исследования уже ведутся
  • Экологичный Священник
    я этот человек. Поиск-то там работает примерно как у вас, да еще и карточки заполнены криво. Сейчас проверил - листает и дальше шестой страницы.
  • Сумеречный Единорог
    ElasticSearch внедрили?
    • Автор канала
      у нас был.
      • Сумеречный Единорог
        я о том что ES больше 10к записей в ответе не отдает