Open Models, Ready for Production

sft_gsm8k_llama-3.1-8b_as_olmo-3-7b_seed42

sft_gsm8k_aya-expanse-8b_as_nemotron-nano-30b-a3b_seed42

sft_gsm8k_llama-3.1-8b_as_llama-3.3-70b_seed42

sft_gsm8k_llama-3.1-8b_as_nemotron-nano-30b-a3b_seed42

sft_gsm8k_aya-expanse-8b_as_phi-4_seed42

sft_gsm8k_aya-expanse-8b_as_qwen3.6-35b-a3b_seed42

qwen3-8b-aaai27-flagship-ht-mnpo-helpfulness-s44

sft_gsm8k_llama-3.1-8b_as_nemotron-super-120b_seed42

sft_gsm8k_aya-expanse-8b_as_gemma-4-e4b_seed42

sft_gsm8k_llama-3.1-8b_as_aya-expanse-8b_seed42

sft_gsm8k_llama-3.1-8b_as_ministral-8b_seed42

HCY123902

llama-3-8b-inst-otpo

dpo_gsm8k_llama-3.1-8b_as_gemma-4-e4b_seed42

dpo_gsm8k_aya-expanse-8b_as_gemma-4-e4b_seed42

dpo_gsm8k_aya-expanse-8b_as_phi-4_seed42

dpo_gsm8k_aya-expanse-8b_as_gemma-4-31b_seed42

dpo_gsm8k_aya-expanse-8b_as_ministral-8b_seed42

dpo_gsm8k_aya-expanse-8b_as_llama-3.3-70b_seed42

dpo_gsm8k_llama-3.1-8b_as_qwen3.6-35b-a3b_seed42

dpo_gsm8k_llama-3.1-8b_as_nemotron-super-120b_seed42

dpo_gsm8k_aya-expanse-8b_as_gpt-oss-20b_seed42

dpo_gsm8k_llama-3.1-8b_as_aya-expanse-8b_seed42

dpo_gsm8k_aya-expanse-8b_as_llama-3.1-8b_seed42

voxium-1

dpo_gsm8k_llama-3.1-8b_as_llama-3.3-70b_seed42

dpo_gsm8k_llama-3.1-8b_as_nemotron-nano-30b-a3b_seed42

dpo_gsm8k_aya-expanse-8b_as_gpt-oss-120b_seed42

dpo_gsm8k_llama-3.1-8b_as_ministral-8b_seed42

dpo_gsm8k_aya-expanse-8b_as_nemotron-super-120b_seed42

dpo_gsm8k_llama-3.1-8b_as_phi-4_seed42

dpo_gsm8k_aya-expanse-8b_as_olmo-3-7b_seed42

gemma-4-12B-it

partipro-base-lora

dpo_gsm8k_aya-expanse-8b_as_nemotron-nano-30b-a3b_seed42

dpo_gsm8k_aya-expanse-8b_as_qwen3.6-35b-a3b_seed42

Llama-3.1-8B-bad-medical-advice-last-third-kld

dpo_gsm8k_llama-3.1-8b_as_gemma-4-31b_seed42

dpo_gsm8k_llama-3.1-8b_as_gpt-oss-120b_seed42

dpo_gsm8k_llama-3.1-8b_as_granite-4-h-small_seed42

dpo_gsm8k_llama-3.1-8b_as_olmo-3-7b_seed42

dpo_gsm8k_aya-expanse-8b_as_granite-4-h-small_seed42

FlameF0X

TinyMoE-Coder-100m-8exp