/

/

dpo

Обзор ДокументацияВойти

/

/

dpo

Аналитика

Безопасность

dpo

Публичный

Описание

Reference implementation for DPO (Direct Preference Optimization)

47 KiB

Лицензия

В избранном1

Языки

Python100%

Сообщить о нарушении

Коммиты:

Eric Mitchell

Updated bibtex entry for NeurIPS.

14 дек 2023, 22:47

14 дек 2023, 22:47f8b8c0f

Rename eps -> label_smoothing.

3 года назад

3 года назад

Updated bibtex entry for NeurIPS.

3 года назад

preference_datasets.py

Fixed tokenization bug causing incorrect loss masking.

3 года назад

requirements.txt

3 года назад

Added conservative DPO and IPO losses.

3 года назад

Rename eps -> label_smoothing.

3 года назад

Updated launch logic to auto-discover a free FSDP port if none is specified (and made this behavior the default).

3 года назад

README.md