Товарищи, айтишники, можете пояснить как эта пежня работает?
Ковырялся в Курсоре, он пишет, что использовано чуть больше четверти токенов и при этом в какой-то лимит упираюсь. Это что вообще? Или эта цифра, в 200К - просто нарисованная, типа за платную подписку (у меня бес)?
Что означает каждое поле
System prompt — базовая системная инструкция модели: правила поведения, стиль ответа, ограничения.
Tool definitions — описания доступных инструментов и их схемы вызова.
Rules — дополнительные правила проекта или workspace, которые Cursor подмешивает в контекст.
Skills — подключённые навыки/специализированные инструкции, если они есть.
MCP — данные и инструкции от подключённых MCP-серверов/интеграций.
Subagent definitions — описания субагентов, если Cursor использует несколько ролей или агентов.
Conversation — вся текущая переписка и введённые сообщения.
Как читать числа
27% Full означает, что использовано примерно 27% от доступного контекстного окна.
~53.5K / 200K Tokens означает, что Cursor оценивает текущий контекст примерно в 53.5 тысячи токенов при лимите 200 тысяч.
Числа справа от строк показывают, сколько токенов занимает каждый блок.
Как Cursor считает токены
Cursor обычно считает токены не по словам и не по символам, а по внутренней токенизации модели, похожей на разбиение текста на смысловые фрагменты. Поэтому:
короткое английское слово может быть 1 токеном;
длинное слово или слово с редкими символами может быть разбито на несколько токенов;
пробелы, знаки препинания, код и JSON тоже влияют на разбиение.
Практически это значит
Код обычно «дороже» текста и съедает токены быстрее.
Длинная переписка может незаметно раздувать контекст.
Инструкции, правила и tool schemas тоже занимают заметную часть лимита, даже если ты их не видишь в чате.
не благодари )))))
Фома Киняев,
Фома Киняев, а ответ то в итоге где?)
Контекст и лимит вроде разные вещи.
Здесь на скрине указан лимит контекста в 200к токенов, то есть твоя единая переписка без "перезапуска" разговора. А вот лимиты на само кол-во токенов где-то ещё должно быть прописано.
ЖульOps, а вот это уже ответ!
ЖульOps, там хуй проссышь как они лимиты считают. При любом удобном случае пишут, что есть сложная схема оценки количества токенов на каждый запрос. А про то, сколько дают - вообще ни слвоа
Войдите на сайт, чтобы оставить свой комментарий...