Qwen3.5-4B дообучили в NLI-верификатор

Qwen3.5-4B дообучили в NLI-верификатор — openjev

Александр Вортега (AlexWortega) выложил на Hugging Face модель openjev: Qwen3.5-4B, дообученную как NLI-кросс-энкодер, которая вместо генерации ответов верифицирует утверждения и с эталоном достигает 0.974 на MMLU и 0.996 на GSM8K.

Автор Sergey KostenchukОпубликовано 2026-09-16Обновлено 2026-09-18

2026-09-16 Исследования HuggingFace

🤖 Qwen3.5-4B дообучили в NLI-верификатор — openjev

Александр Вортега (AlexWortega) выложил на Hugging Face модель openjev: Qwen3.5-4B как NLI-кросс-энкодер. На вход — пара «посылка — гипотеза», на выход — вероятности entailment, contradiction, neutral. С эталоном grading: 0.974 MMLU, 0.996 GSM8K; без эталона rerank — 0.472; во Flappy Bird — 28 труб из 28.

🌍 В reranker- и модерационных пайплайнах дорогие LLM-вызовы можно заменить 4B-кросс-энкодером: один forward на пару, ~57 мс. Но grading легче генерации — высокие цифры не значат, что модель «знает» ответы; guardrails пока гипотеза без замеров.

👤 Веса открыты под MIT (наследуют условия Qwen3.5 — для коммерции проверьте отдельно). В repo — modeling_openjev.py с predict/rerank/grade: rerank и grading проверяются на своих данных парой строк.

Источник 1: https://huggingface.co/AlexWortega/openjev Источник 2: https://huggingface.co/AlexWortega/openjev/raw/main/results/full_report.md

Источники