AIFUSION Назад к исследованиям
Нейросетевая симуляция

Коллапс контекста

Визуализация того, как перегрузка контекстного окна (Context Window) приводит к галлюцинациям и утрате выравнивания (Alignment) в LLM.

Выберите сценарий

Индекс энтропии контекста

1.0 - 1.4+
Коллапс модели
Чистая галлюцинация. Разрушение.
0.8 - 1.0
Критический дрейф
Вывод с высокой перплексией.
0.5 - 0.8
Шум контекста
Деградация связности.
0.0 - 0.5
Выровненное состояние
Оптимальное внимание.

Диагностика

G = 1.28

I. Среда (нагрузка)

НАГРУЗКА КОНТЕКСТА (Ctx) 0.80
СМЕЩЕНИЕ RLHF (S) 0.50

II. Параметры модели

ВНИМАНИЕ (Attn) 0.40
РАЗМЕР МОДЕЛИ (P) 1.00
СТОХАСТИЧЕСКАЯ ОШИБКА (B_err) 0.10
РАССУЖДЕНИЕ (CoT) 0.50
ФИЛЬТР БЕЗОПАСНОСТИ (Saf) 0.50
СМЕЩЕНИЕ ДАННЫХ (Bias) 0.20

Когнитивная топология

ICEBA Профиль
Сред Соц Внут