mlx mistral mlabonne/Marcoro14-7B-slerp dpo rlhf dataset:mlabonne/chatml_dpo_pairs base_model:mlabonne/Marcoro14-7B-slerp base_model:finetune:mlabonne/Marcoro14-7B-slerp license:apache-2.0 region:us
Small (<1GB)