Kimi-K3
Самая крупная открытая модель каталога по числу параметров. Её продают шлюзы, а запуск у себя — задача кластера, а не одной машины: сравнение «API или своё» здесь самое наглядное.
Модель на 2 779,9 млрд параметров. При режиме «INT8, контекст 8192 токена, восемь одновременных запросов» нужно 3 342,9 ГБ памяти — это 12× NVIDIA B300. Доступ к весам: веса скачиваются свободно. Лицензия: в карточке заявлено «other», нашего разбора ещё нет. Внимание: это MoE-модель — в памяти обязаны лежать все веса, а не только активные. Проверить сценарий до закупки можно на арендованной карте.
Характеристики
Сняты роботом из карточки модели и файла конфигурации, которые публикует сам автор.
Ревизия f831ab668142. Проверено 14.10.2026.
Сколько нужно памяти
Считается по снятой архитектуре модели: веса плюс KV-кэш под контекст, с надбавкой на накладные расходы рантайма. Меняются только длина контекста и число одновременных запросов — и требование к железу уезжает в разы. Именно поэтому «столько-то гигабайт под модель» без указания нагрузки ничего не значит.
| Сценарий | Контекст | Одновременно | FP16 / BF16 | FP8 / INT8 | INT4 |
|---|---|---|---|---|---|
| Один пользователь, короткий запрос | 4 096 | 1 | 6 672,3 ГБ 24× NVIDIA B300 | 3 336,4 ГБ 12× NVIDIA B300 | 1 668,4 ГБ 6× NVIDIA B300 |
| Небольшая группа | 8 192 | 4 | 6 675,3 ГБ 24× NVIDIA B300 | 3 339,4 ГБ 12× NVIDIA B300 | 1 671,5 ГБ 6× NVIDIA B300 |
| Отдел, длинные документы | 32 768 | 8 | 6 699,9 ГБ 24× NVIDIA B300 | 3 364 ГБ 12× NVIDIA B300 | 1 696 ГБ 6× NVIDIA B300 |
| Много пользователей, длинный контекст | 32 768 | 32 | 6 784,2 ГБ 24× NVIDIA B300 | 3 448,3 ГБ 12× NVIDIA B300 | 1 780,3 ГБ 7× NVIDIA B300 |
Это MoE-модель: считается полный размер весов, потому что в памяти обязаны находиться все эксперты — маршрутизатор выбирает их на лету. Число активных экспертов влияет на скорость, а не на память. KV-кэш считается в 16 битах даже там, где веса ужаты сильнее: кэш почти никогда не квантуется вместе с весами. Подбор карт — оценка сверху по памяти из нашего справочника ускорителей; скорость ответа, питание и охлаждение считаются отдельно. Подбор идёт по объёму памяти и не учитывает программный стек: Ascend и AMD требуют другого инференс-сервера, чем NVIDIA, и это отдельный разговор при проектировании.
Во что обходится миллион токенов
Сколько просят за токены этой модели наблюдаемые поставщики. Цена снята с прайса, у неё есть дата и источник.
Вторая половина счёта пустая намеренно: в один узел из 8 карт модель не помещается ни на одной карте нашего справочника. Умножать ставку на три десятка карт мы не станем — такой сборкой не торгуют, её проектируют, и цена там считается не тарифом. Расчёт идёт по средней нагрузке из таблицы выше: INT8, контекст 8192 токена, восемь одновременных запросов. Свои условия — в расчёте под нагрузку. Вся картина по токенам — на странице цены миллиона.
Что разрешает лицензия
Нашего разбора этой лицензии по первоисточнику пока нет. В карточке модели заявлено «other» — это метаданные, а не прочитанный нами текст лицензии, и на них нельзя опираться в корпоративном решении. Разобранные лицензии — здесь.
Самая тяжёлая модель класса «языковая модель» в каталоге
Размер решает, на чём модель поедет: 2 779,9 млрд параметров — это больше, чем у всех остальных 21 моделей этого класса. Ряд ниже — модели того же класса по числу параметров; расчёт памяти у каждой свой.
Что дальше
Сколько памяти нужно этой модели
Расчёт под ваш контекст и число одновременных запросов: сколько видеопамяти займут веса и кэш и на скольких картах это поместится.
Контекст и batch учитываются в KV-кэше для инференса; кэш считается для архитектуры GQA — так устроены все актуальные открытые модели. Оценка ориентировочная (rule-of-thumb), не профилировщик.
- Все площадки с B300 (3) →
- Все площадки с H100 (18) →
- Все площадки с H200 (12) →
- Все площадки с A100 (22) →
- Все площадки с L40S (9) →
- Все площадки с RTX PRO 6000 Blackwell (5) →
- Все площадки с L4 (8) →
- Все площадки с RTX 5090 (5) →
- Все площадки с RTX 4090 (10) →
- Все площадки с RTX 3090 (3) →
- Все площадки с RTX A4000 (7) →
Инференс: веса ×1,2 (overhead рантайма) + оценка KV-кэша по контексту и батчу. Архитектура модели здесь неизвестна — вы задаёте только размер, — поэтому она угадывается по числу параметров и предполагается GQA: так устроены Llama 3, Qwen 2.5, Mistral и другие актуальные открытые модели. Сверка по 11 моделям нашего каталога 26.08.2026: у моделей на полном внимании MHA кэш выходит примерно в 10 раз больше оценки, у DeepSeek-V3 со сжатым вниманием MLA — в 21 раз меньше. Если модель известна, точное число есть на её странице в каталоге.