gitextract_z9_xsnea/

├── .gitignore
├── .gitmodules
├── LICENSE
├── README.md
├── examples/
│   ├── alpaca.yml
│   ├── capybara.yml
│   ├── config.toml
│   ├── config_dpo.toml
│   ├── converted_dpo_dataset.yml
│   ├── ds_config.json
│   └── ultrafeedback.yml
├── kernels/
│   ├── cross_entropy_loss.py
│   └── utils.py
├── models/
│   ├── layers.py
│   ├── models.py
│   └── pipeline_model.py
├── pyproject.toml
├── requirements.txt
├── tools/
│   ├── convert_dpo_dataset_to_chat_format.py
│   ├── convert_ds_checkpoint_to_lora.py
│   ├── merge_lora.py
│   └── test_sampling.py
├── train.py
└── utils/
    ├── dataloader.py
    ├── dataset_utils.py
    ├── engine.py
    ├── hqq_utils.py
    ├── saver.py
    ├── unsloth_utils.py
    └── utils.py