Eğitim verisi
- Dataset:
enes1863/turkish-foreigners-labor-law-benchmark
- Config: yalnız
sft
- Train: 2188
- Validation: 116
- Benchmark
bilgi ve vaka config'leri eğitime dahil edilmedi.
- Açık scrape gürültüsü kayıtları eğitim öncesinde filtrelendi.
Eğitim ayarları
- LoRA rank: 16
- LoRA alpha: 16
- Epoch: 1
- Learning rate: 2e-4
- Effective batch size: 8
- Max sequence length: 2048
- Assistant yanıtlarında loss
- Train loss: 0.8454056203800396
- Validation loss: 0.6911059617996216
- Tarih: 2026-07-28
Bağımsız değerlendirme
Fine-tune sonrası değerlendirme, eğitimde kullanılmayan bilgi ve vaka
config'leri üzerinde aynı prompt ve decoding ayarlarıyla yapılmalıdır.
Sınırlılıklar
Model hukuki danışmanlık sağlamaz. Mevzuat değişiklikleri nedeniyle çıktılar
kaynak ve tarih kontrolü olmadan kullanılmamalıdır.
Bağımsız benchmark sonuçları
Model, eğitimde kullanılmayan bilgi ve vaka config'lerindeki toplam
200 soruda greedy decoding ve exact-match accuracy ile değerlendirilmiştir.
Table with columns: Model, Doğru, Toplam, Başarı| Model | Doğru | Toplam | Başarı |
|---|
enes1863/gemma3-4b-turkish-foreigners-labor-law-lora | 120 | 200 | %60.00 |
Test türüne göre
Table with columns: benchmark, sum, count, accuracy| benchmark | sum | count | accuracy |
|---|
| bilgi | 59 | 100 | 59 |
| vaka | 61 | 100 | 61 |
- Geçersiz yanıtlar yanlış sayıldı.
max_new_tokens=8
- Test tarihi: 2026-07-28