Model performansı
Tek bir başarılı kolon yerine, çekilişten önce kilitlenmiş geçmiş testlerin toplu performansını gösteriyoruz. Deneysel yöntemler mümkün olduğunda aynı çekilişte ve benzer kolon sayısıyla oluşturulan Rastgele Kontrol ile karşılaştırılır.
Yöntem özeti
Ortalama isabet yalnız score şemasında tanınan metrik bulunan gruplarda hesaplanır; kapsama oranı bunu açıkça gösterir.
Rastgele Kontrol karşılaştırması
Aynı oyun/çekiliş/tarih içinde hem deneysel model hem Rastgele Kontrol metriği varsa fark hesaplanır.
| Tarih | Oyun | Yöntem | Model ort. | Random ort. | Fark | Kolon |
|---|---|---|---|---|---|---|
| Bu dönem için karşılaştırılabilir model/random metriği yok. | ||||||
Model performansı nasıl okunur?
Önce karşılaştırmanın aynı oyun, hedef çekiliş ve benzer kolon sayısı üzerinde yapıldığını kontrol edin. Ardından tek bir en iyi sonuç yerine ortalama isabeti, kapsama oranını, örneklem büyüklüğünü ve rastgele kontrol farkını birlikte okuyun.
Rastgele kontrol grubu neden kullanılır?
Modelin görünen başarısının yalnız daha fazla kolon üretmekten veya rastlantısal dalgalanmadan kaynaklanıp kaynaklanmadığını anlamak için aynı oyun, çekiliş ve dönemde tarafsız bir temel çizgisi sağlar.
Pozitif model farkı başarı kanıtı mıdır?
Tek başına değildir. Örneklem büyüklüğü, kolon sayısı, güven aralığı, çoklu deneme düzeltmesi ve yeni çekilişlerde tekrar üretilebilirlik birlikte değerlendirilmelidir.
Backtest ile canlı performans arasındaki fark nedir?
Backtest geçmiş veri üzerinde zaman sıralı bir simülasyondur. Canlı performansta tahmin çekilişten önce kilitlenir ve sonuç sonradan gelir; bu nedenle sonuçtan sonra seçim yapma riskini daha iyi sınırlar.
Küçük örneklem neden yanıltıcı olabilir?
Az sayıda çekilişte tek bir sıra dışı sonuç ortalamayı belirgin biçimde değiştirebilir. Daha fazla bağımsız ve kilitli gözlem, belirsizliği daha sağlıklı değerlendirmeye yardım eder.
Model performansı kazanma garantisi verir mi?
Hayır. Bu sayfa araştırma kaydı ve şeffaf karşılaştırma sunar. Geçmişte ölçülen fark, gelecekteki bağımsız çekilişte kazanç veya üstünlük garantisi değildir.