Практическое тестирование J-Space: как Anthropic ловит галлюцинации в Qwen3-4B на 7 датасетах

Практическое тестирование J-Space: как Anthropic ловит галлюцинации в Qwen3-4B на 7 датасетах
Загрузите Qwen3-4B через Hugging Face и подготовьте 7 датасетов с фактологическими вопросами.
Рассчитайте entropy и logprobs для каждого ответа — это baseline для сравнения.
Реализуйте вычисление матрицы Якопи для функции потерь относительно скрытых состояний последнего слоя.
Сравните пороговые значения: на каких примерах J-Space находит галлюцинации, а entropy — нет.
Добавьте J-Space в ваш пайплайн детекции галлюцинаций для сложных кейсов.
Читать статью →

Подписаться на канал