Русский ИТ бизнес
Русский ИТ бизнес

Kimi K3 — это 2,8 трлн параметров; на данный момент это самая мощная модель в открытом доступе

Kimi K3 — это 2,8 трлн параметров; на данный момент это самая мощная модель в открытом доступе
Kimi K3 — это 2,8 трлн параметров; на данный момент это самая мощная модель в открытом доступе. А значит, она появится у множества провайдеров, и можно будет выбирать поставщика услуг.

Китайцы снова давят на США, ведь, по утверждению Илона Маска в интервью The Economist, у них в 2,5 раза больше электроэнергии, чем у США и Европы вместе взятых.

Эта модель обходит Claude Fable и Opus 5.0 по некоторым тестам. Сбер разрабатывает свою LLM на базе Qwen 3.6, но она морально устаревает быстрее, чем они успевают дорабатывать её в «суверенную модель РФ». Уже есть GLM 5.2 и вот K3 — очень крутые модели.

tg / max

Комментарии (27)

  • Аметистовый Колдун
    Аметистовый Колдун
    Помимо этого модели китайцев в несколько раз экономичнее

    Илон сказал что если дать им мощностя которые есть у США, китайцы станут лидерами Ответить
    раскрыть ветку (1)
    • Заляпанный Сухарь
      Заляпанный Сухарь
      откуда она экономичней? уровень Терры или Соннета, таже цена, уровень потребления токенов между этими 2 моделями. А вот с качеством не сильно все однозначно. Дистилят он и в африке дистилят. Ответить
  • Философский Археолог
    Философский Археолог
    у официальных крупных поставщиков одинаковые цены по апи потому что kimi берут с них деньги за лицензирование и выставляют условия. $5 input, $15 output за 1 млн токенов по апи. Хорошо что есть неофициальные поставшики где цена $1/$4.5 за 1 млн токенов Ответить
  • Пухлый Воробей
    Пухлый Воробей
    а как работает контекстное окно у кими если его на сервак повесить? тот же 1млн или как то своими мощностями его можно разгонять? Ответить
    раскрыть ветку (4)
    • Полуночный Архитектор
      Полуночный Архитектор
      есть 1.4 ТБ памяти? и это в квантовании... Ответить
      раскрыть ветку (3)
      • Невидимый Гриб
        Невидимый Гриб
        И все это ради тупых видосиков с котами которыми засрали весь инет Ответить
      • Пухлый Воробей
        Пухлый Воробей
        имеете ввиду ГПУ нужно оч много? не оч понимаю что значит в квантовании?)) Ответить
        раскрыть ветку (1)
        • Полуночный Архитектор
          Полуночный Архитектор
          это значит что ZIP версия, с потерей качества для уменьшения требований к памяти. Да, видеокарт надо очень много, очень. Во всем мире 100-200 компаний, кто может запустить такое Ответить
  • Чесночный Режиссер
    Чесночный Режиссер
    квантование это значит что если в полной модели миллиарды коэффициентов вида 5,35646489432184965, то в обрезанной версии хранится менее точные числа следовательно тербуется меньше памяти для их хранения. Но потеря качества - она приемлемая. Грубо говоря уменьшили модель в 2 раза - потеряли качества на 1%. Это все условно.
    Это типа как одна машина быстрее другой, но потом когда начинаешь проверять у одной 5 сек до 100 а у другой 5,1. Пофиг блин. Нормально. Ответить
    раскрыть ветку (1)
    • Океанический Гоблин
      Океанический Гоблин
      При перемножении матриц с миллиардом столбцов эти параметры охрененно сказываются на результате вычислений. По факту там же идёт суммирование произведений строки на столбец и ошибка при суммировании миллиард раз накапливается. Ответить
  • Сумеречный Наемник
    Сумеречный Наемник
    Не люблю лезть в политику, но почему-то приятно, когда у openai и иже с ними бомбят пуканы. А там реально подгорает если почитать источники. Даже запретить хотят. Ответить
    раскрыть ветку (1)
    • Океанический Гоблин
      Океанический Гоблин
      Прикольно. От тиктока больше подгорало. Там до реальных запретов доходило. Ответить
  • Сумеречный Наемник
    Сумеречный Наемник
    "ой у нас украли", "они хуже, мы первые придумали", "они шпиёны!". кстати дистиллировать за такое короткое время невозможно. Ответить
  • Сквознячный Судья
    Сквознячный Судья
    У Сбера гибрид вроде на архитектуре DeepSeek с линейным вниманием, как у квена. Ответить
  • Сквознячный Судья
    Сквознячный Судья
    Это у Яндекса qwen Ответить
    раскрыть ветку (6)
    • Сумеречный Наемник
      Сумеречный Наемник
      Не, там они хорошо подзаморочились.

      https://habr.com/ru/companies/yandex/articles/974594/ Ответить
      раскрыть ветку (5)
      • Океанический Гоблин
        Океанический Гоблин
        Прошлогодняя инфа.
        Буквально месяц или два назад яндекс заявил, что они останутся на qwen. И в Сбере подтвердили, что они последние, кто ИИ занимается с нуля Ответить
        раскрыть ветку (4)
        • Сумеречный Наемник
          Сумеречный Наемник
          Понял, принял. Спасибо! Ответить
        • Океанический Гоблин
          Океанический Гоблин
          Кстати да. Прикольная задача.
          При численном решении нелинейной системы уравнений решение скатывается в локальный минимум. Идеально найти глобальный минимум, но гарантий никаких нет. Ответ может зависеть от начальных параметров, взятых для решения. Параметры от qwen скорее всего приведут к результатам, близким к тому, что даёт qwen Ответить
          раскрыть ветку (2)
          • Сумеречный Наемник
            Сумеречный Наемник
            Ну я кстати по "бытовым вопросам" или "сделай мне сводку новостей по такой то теме" давно на алисе сижу. Вполне хватает. Ответить
            раскрыть ветку (1)
            • Океанический Гоблин
              Океанический Гоблин
              Алиса неплохая, если иметь ввиду, что она не помнит контекста разговора Ответить
  • Сумеречный Наемник
    Сумеречный Наемник
    А то что там квен или что-то ещё — вопрос больше религиозный, нежели практический. Ответить
  • Пепельный Витязь
    Пепельный Витязь
    А гугл? Автор верит только в гугла же) Ответить
  • Океанический Гоблин
    Океанический Гоблин
    Я наверное с ней без авторизации на яндексе общался. Ответить
    раскрыть ветку (2)
    • Сумеречный Наемник
      Сумеречный Наемник
      Кстати у всех бомбит, что траф падает. Я кстати тоже уже почти не захожу на сайты.

      https://3dnews.ru/1145831/iiotveti-google-zahvatili-pochti-polovinu-vseh-poiskovih-zaprosov-izdateli-teryayut-trafik Ответить
      раскрыть ветку (1)
      • Океанический Гоблин
        Океанический Гоблин
        У меня каталог с базой данных. Инфа оттуда доступна только по подписке. Поэтому ИИ просто так у меня инфу не заберёт. Ответить