Наскільки велике контекстне вікно Kimi K3?

Kimi K3 підтримує контекстне вікно на 1M токенів, що дає змогу працювати з великими репозиторіями, довгими колекціями документів, тривалими дослідженнями та збереженими історіями агентів.

Чи підтримує Kimi K3 зображення та відео?

Так. Kimi K3 має вбудоване візуальне розуміння та може міркувати на основі скріншотів, зображень і відео в мультимодальних робочих процесах для програмування, досліджень і творчості.

Що означає «16 із 896 експертів»?

K3 використовує Stable LatentMoE з 896 доступними експертами, але ефективно активує 16 для кожного токена, підвищуючи розрідженість без потреби щоразу задіювати всю мережу.

Кому варто використовувати Kimi K3?

K3 особливо підходить інженерним командам, командам досліджень і аналітики та креативним технічним командам, які працюють над тривалими, складними, мультимодальними або інструмент-орієнтованими завданнями.

Kimi K32.8T
Відкритий фронтирний інтелект

Флагманська відкрита модель Moonshot AI — контекстне вікно 1M токенів, вбудоване візуальне розуміння, довготривале міркування та архітектура, створена для програмування, агентів і роботи зі знаннями.

Що таке Kimi K3?

Kimi K3 — найпотужніша флагманська модель Moonshot AI на сьогодні. Із 2.8 трлн параметрів це перша у світі модель з відкритим кодом у класі 3-трильйонних моделей. Її архітектура поєднує Kimi Delta Attention, Attention Residuals, Stable LatentMoE та вбудоване мультимодальне розуміння.

Модель орієнтована на сценарії фронтирного інтелекту, а не на короткі ізольовані запити. Вона створена, щоб лишатися ефективною під час тривалих інженерних сесій, роботи з великими дослідницькими корпусами, скріншотами, зображеннями, відео, інструментами в терміналі та робочими процесами зі знаннями, що потребують планування й доопрацювання.

Для тих, хто порівнює просунуті відкриті моделі, Kimi K3 вирізняється масштабом, контекстним вікном на 1M токенів, вбудованим зором і виразною агентною спрямованістю.

2.8T параметрів

Відкрита модель фронтирного масштабу, що розширює прорив Moonshot AI за межі трильйонного класу параметрів.

Контекст 1M токенів

Розроблена для роботи з масштабними кодовими базами, документами, дослідницькими архівами та тривалими історіями агентів.

Вбудоване візуальне розуміння

Обробляє скріншоти, зображення та відео як частину робочих процесів для програмування, досліджень, творчих завдань і роботи з інструментами.

Інженерні команди

Довготривале програмування та робота на рівні репозиторію для розробників, інфраструктурних команд і технічних лідерів — навігація у великих репозиторіях, оркестрація терміналу та інструментів, а також візуальний фідбек під час реалізації.

Команди досліджень і аналітики

Робота зі знаннями, що спирається на докази, для аналітиків, консультантів і науковців — синтез даних із багатьох документів, робочі процеси від дослідження до коду, а також звіти, дашборди й візуалізації в межах контексту 1M токенів.

Креативні та технічні команди

Вбудоване бачення в робочому циклі для команд, які поєднують інженерію із зображеннями, відео та скріншотами — візуальні ітерації та дебаг, робота з рухом і взаємодією, а також швидке прототипування у візуальних і технічних доменах.

Перша відкрита модель із 2.8T параметрів

Kimi K3 позначає різке розширення межі відкритих моделей — від 1T параметрів у Kimi K2 до 2.8T за дванадцять місяців, і це перша модель з відкритими вагами, що досягла класу 3-трильйонних параметрів.

Як Kimi K3 переносить інформацію на масштабі

Архітектура K3 покращує потік інформації на довгих послідовностях і на глибині моделі, зберігаючи ефективність розріднених обчислень експертів. Kimi Delta Attention (KDA) — гібридний механізм лінійної уваги для масштабування на довгих послідовностях; Attention Residuals вибірково витягує представлення з попередніх блоків; а Stable LatentMoE активує 16 із 896 експертів на токен — разом це дає приблизно 2.5× ефективність масштабування порівняно з Kimi K2.

FAQ про модель Kimi K3

Kimi K3 — флагманська відкрита модель Moonshot AI з 2.8 трлн параметрів, створена для довготривалого програмування, міркування, вбудованого візуального розуміння та наскрізної роботи зі знаннями.
Kimi K3 підтримує контекстне вікно на 1M токенів, що дає змогу працювати з великими репозиторіями, довгими колекціями документів, тривалими дослідженнями та збереженими історіями агентів.
Так. Kimi K3 має вбудоване візуальне розуміння та може міркувати на основі скріншотів, зображень і відео в мультимодальних робочих процесах для програмування, досліджень і творчості.
Kimi Delta Attention — це гібридний механізм лінійної уваги в K3. Attention Residuals вибірково витягує представлення на різних рівнях глибини моделі, щоб покращити потік інформації.
K3 використовує Stable LatentMoE з 896 доступними експертами, але ефективно активує 16 для кожного токена, підвищуючи розрідженість без потреби щоразу задіювати всю мережу.
K3 особливо підходить інженерним командам, командам досліджень і аналітики та креативним технічним командам, які працюють над тривалими, складними, мультимодальними або інструмент-орієнтованими завданнями.

Kimi K32.8T
Відкритий фронтирний інтелект