Токени й вікно контексту. Що це таке і що займає місце, ще до вашого першого слова
Що таке токен, що таке вікно контексту моделі AI, що його заповнює і що стається, коли воно повне, у чаті, в API і в Claude Code.
У цьому тексті
Коротко
Токен це шматок тексту, у якому модель рахує все, що читає й пише, а вікно контексту це її робоча пам'ять, тобто весь текст, який вона має перед собою для однієї відповіді. У вікно потрапляють системні інструкції, файли, результати інструментів, уся розмова і сама відповідь. Нинішні моделі Claude мають вікно на 1 мільйон токенів, а Claude Code сам стискає розмову, перш ніж вікно заповниться.
Хтось вставляє в чат три договори, питає про одну дату, а за кілька повідомлень модель плутає договори між собою, і ліміт закінчується. Більшість таких ситуацій пояснюють два поняття, токен і вікно контексту. Що це таке, пояснюємо нижче без формул.
Про те, чому довга розмова псується і як економити ліміт, у нас є окремі тексти. Тут ми лишаємося при самих поняттях і при тому, що відбувається, коли вікно заповнюється. Текст належить до посібника з Claude Code, станом на 10 листопада 2026.
Що таке токен
Модель не читає ні літер, ні слів. Перш ніж текст потрапить до моделі, його ділять на токени. За словничком Anthropic, токен може бути словом, частиною слова, окремим символом і навіть байтом. Короткі часті слова бувають одним токеном, довгі й рідкісні діляться на кілька.
Скільки символів припадає на токен, залежить від моделі й мови. Anthropic пише, що на старіших моделях Claude токен у середньому це близько 3,5 символу англійського тексту. Моделі від Claude Opus 4.7 мають новий токенізатор, який з того самого тексту робить приблизно на 30 відсотків більше токенів. Точну кількість для конкретної моделі дає функція підрахунку токенів в API.
У токенах рахують майже все. Довжину розмови, яку модель тягне, ліміти в застосунку, а в API ще й рахунок. Коротке визначення є в нашому словнику AI.
Вікно контексту, тобто робоча пам'ять моделі
Вікно контексту це весь текст, на який модель може спиратися, коли пише відповідь, разом із самою відповіддю. Anthropic називає його робочою пам'яттю моделі й відрізняє від даних, на яких модель навчали. Навчання дає загальні знання. Вікно це те, що модель має перед собою зараз.
Модель не пам'ятає розмову між повідомленнями. Для кожної відповіді вона знову отримує всю розмову від початку, а її відповідь стає частиною того, що вона отримає наступного разу. Тому вміст вікна росте з кожним обміном.
Розміри вікон є в документації Claude. Нинішні моделі Claude, від найсильнішої до найлегшої, мають вікно на 1 мільйон токенів. Старіші, наприклад Claude Sonnet 4.5, мають 200 тисяч. За оглядом моделей, 1 мільйон токенів на новому токенізаторі це приблизно 555 тисяч англійських слів.
Що заповнює вікно контексту
У вікно потрапляє більше, ніж видно на екрані. Документація перелічує системну інструкцію, кожне повідомлення разом з результатами інструментів, зображеннями й документами, описи доступних інструментів і, нарешті, відповідь моделі разом з її міркуваннями.
Що заповнює вікно контексту
Перші два шари зайняті ще до вашого першого слова. Висота шарів не показує пропорцій.
У Claude Code частина вікна зайнята ще до вашого першого слова. На старті підвантажуються CLAUDE.md або AGENTS.md, автоматична пам'ять, назви інструментів із серверів MCP і короткі описи скілів. Потім кожне читання файлу й кожен результат команди додають своє. Документація попереджає, що один великий файл або команда з довгим виводом може за один крок зайняти тисячі токенів.
Що займає місце у вашій сесії, показує команда /context. Вона ділить зайняте місце на категорії й підказує, що скоротити. Наперед допомагають дві речі. Повний текст скіла підвантажується тільки тоді, коли скіл використовують. Субагент читає файли у власному вікні й повертає в розмову тільки підсумок, про що ми пишемо в тексті про субагентів у Claude Code.
Що стається, коли вікно заповнюється
Залежить від того, де ви працюєте. В API, коли вже сам запит довший за вікно, Anthropic повертає помилку з повідомленням prompt is too long. Застосунок Claude може зсувати вікно так, що найстаріші повідомлення випадають першими.
Claude Code не закінчує сесію, коли вікно повне. Наближаючись до межі, він сам стискає розмову в підсумок, це називають компактуванням. Підсумок зберігає ваші прохання й головні шматки коду, але детальні вказівки з початку розмови можуть загубитися.
Після компактування частина речей повертається сама. CLAUDE.md з головної папки й автоматична пам'ять знову читаються з диска, а Claude Code перечитує до п'яти файлів, які нещодавно читав або змінював. Те, що прозвучало тільки в розмові, лишається лише в підсумку. Ці команди вводять там, де звичайне повідомлення.
# що займає вікно зараз
/context
# підсумок, який зберігає вказане
/compact зосередься на змінах у формі замовлень
# компактувати раніше, при заданій кількості токенів
/autocompact 500k
# нова розмова з порожнім вікном
/clearПравила, які мають пережити стискання, записуйте у файл CLAUDE.md, а не в розмову. Як його написати, ми описали в тексті CLAUDE.md, як його написати, а всі команди з косою рискою в тексті про slash-команди.
Вікно контексту й ліміт
Більше вікно не означає, що його варто заповнювати. Документація Anthropic прямо каже, що з ростом кількості токенів слабшають точність і пригадування деталей. Що з цього випливає для довгих розмов, ми описали в тексті чому ChatGPT забуває.
Вікно це ще й ліміт або рахунок. Оскільки модель з кожним повідомленням отримує всю розмову, кожне повідомлення в довгій сесії несе з собою всю цю сесію. На платних планах Claude це з'їдає ліміт, в API гроші. Що ще його з'їдає, ми описали в тексті чому ліміт Claude швидко закінчується.
Коли змінюєте тему, починайте нову розмову, а в Claude Code набирайте /clear. Вікно велике, але модель працює найкраще, коли в ньому тільки те, що стосується задачі.
Якщо хочете знати, де AI може зняти роботу з вашої фірми, замовте безкоштовний аудит AI. Ми переглянемо ваші задачі й скажемо, з чого почати.
Що хочете змінити у своїй фірмі?
Залиште номер. Поговоримо про ваш процес і перевіримо, чи можемо допомогти. Перша розмова безкоштовна.
Послуга, про яку цей текст
Автоматизація та AI / OCRАвтоматизація переписування документів, OCR і правила перевірки, а дані лишаються у вас.