DPO

Как снизить токсичность языковых моделей

Разбираем методы снижения токсичности LLM: от фильтрации данных и RLHF до DPO и управляемой …