Ana sayfa / Rehberler / Örneklem dışı test
Trading stratejileri için örneklem dışı test
Örneklem dışı test (out of sample), sadece geriye dönüp bakınca işe yarayan bir stratejiye karşı en basit savunmadır. Bu rehber aşırı uyumu, temiz bir ayrımın nasıl yapıldığını, walk forward analizinin neler kattığını ve sonucun nasıl okunacağını açıklıyor.

Sorun: aşırı uyum
Bir parayı yüz kez attığınızı ve sonra bu atışları tahmin edebilecek bir kural aradığınızı düşünün. Seçebileceğiniz yeterince kural varsa, harika görünen birini bulursunuz. Sonraki yüz atışta hiçbir değeri olmaz, çünkü bulunacak bir şey yoktu. Sadece geçmişi ezberlemiştir.
Trading stratejilerinde de aynı sorun var. Fiyatlar tekrar eden örüntüler ve tekrar etmeyen çok fazla gürültü içerir. Birçok ayar üzerinde yapılan bir arama gürültüye seve seve uyum sağlar. Sonuca aşırı uyumlu (overfitted) strateji denir: kusursuz bir backtest ve zayıf bir canlı performans. Bir arama ne kadar çok ayar denerse ve bir stratejinin ne kadar çok düğmesi olursa, aşırı uyum o kadar kolaylaşır.
Aşırı uyumu, onu üreten backtestin kendisine bakarak göremezsiniz. Strateji gerçek bir örüntü de bulmuş olsa, sadece gürültü de bulmuş olsa eğri aynı görünür. Aramanın kullanmadığı verilere ihtiyacınız var.
Örneklem içi ve örneklem dışı
Örneklem içi (in sample) veri, stratejiyi geliştirmek ya da ayarlamak için kullanılan bölümdür. Örneklem dışı (out of sample) veri ise bir kenarda tutulan ve sadece bir kez, son kontrol için kullanılan bölümdür. Kurallar bu kontrolden önce sabitlenir ve sonrasında hiçbir şey değiştirilmez.
Fikir basit: örneklem dışı bölüm geleceğin rolünü oynar. Arama onu göremedi, bu yüzden orada da işe yarayan bir örüntünün saf tesadüf olma ihtimali daha düşüktür. Bu bir kanıt değildir. Ama herhangi bir örneklem içi sonuçtan çok daha iyi bir işarettir.

M Alpha Core veriyi nasıl ayırır: 65/35
M Alpha Core'daki her tarama, seçilen zaman diliminde yaklaşık bir yıllık veri kullanır. İlk %65 örneklem içidir. Tarama orada yerleşik stratejinin binlerce ayarını test eder ve en iyisini seçer. Son %35 örneklem dışıdır. Seçilen ayarlar onun üzerinde bir kez, değiştirilmeden çalışır. Rapor iki sonucu yan yana gösterir, böylece onları bir bakışta karşılaştırabilirsiniz.
Neden bu paylar? Aramanın farklı piyasa dönemlerini kapsayan ayarları bulabilmesi için yeterli veriye ihtiyacı var. Kontrolün de bir şey söyleyebilmesi için yeterli işleme ihtiyacı var. Bir yılda 65/35 ile kontrol yine de yaklaşık dört ayı kapsar. Altın örneğimizde yıl 153 işlem içeriyordu, yani görülmemiş bölümde de anlamlı sayıda işlem vardı.
Zaman sırası neden önemli
Ayrım zamanı takip etmelidir. Örneklem dışı bölüm, örneklem içi bölümden sonra gelir, tıpkı yarının bugünden sonra gelmesi gibi. Kontrol için rastgele günler ya da aylar seçerseniz, sonraki dönemlerden gelen bilgiler aramaya karışır. Piyasa dönemleri haftalar ya da aylar sürer, bu yüzden komşu günler birbirine benzer. O zaman rastgele bir ayrım, stratejiyi ayarlandığı günlere neredeyse tıpatıp benzeyen günlerde test eder ve sonuç olduğundan daha iyi görünür. Bu, veri sızıntısının bir biçimidir.
Walk forward analizi
Walk forward analizi, örneklem içi ve örneklem dışı fikrini birkaç kez tekrarlar. Bir pencerede arama yaparsınız, hemen ardından gelen dönemde test edersiniz, sonra iki pencereyi de ileri kaydırır ve aynısını yeniden yaparsınız. Sonunda tüm örneklem dışı dönemleri tek bir sonuçta birleştirirsiniz.
Avantajı: daha fazla örneklem dışı veri elde edersiniz ve piyasa değiştikçe stratejinin çalışmaya devam edip etmediğini görürsünüz. Bedeli: çok daha fazla hesaplama süresi gerektirir ve ayarlar pencereden pencereye değişir, bu da canlı stratejiyi takip etmeyi zorlaştırır.
M Alpha Core'daki 65/35 ayrımı tek bir walk forward adımıdır: bir arama penceresi, ardından bir test penceresi. Daha sonra daha yeni verilerle yeni bir tarama çalıştırdığınızda, aslında bir sonraki adımı atmış olursunuz. Bu taramaların raporlarını zaman içinde karşılaştırmak, bir piyasanın stratejinin ihtiyaç duyduğu şekilde davranmaya devam edip etmediğini size söyler.
Örneklem dışı sonuç nasıl okunur
| Altın, 1 saat: kâr faktörü örneklem içi / örneklem dışı | 2,53 / 2,81 |
| Nvidia: kâr faktörü örneklem içi / örneklem dışı | 2,19 / 4,90 |
| Nasdaq 100: kâr faktörü örneklem dışı | 2,17 |
| Altın: test dönemindeki işlemler | 153 |
| Nvidia: test dönemindeki işlemler | 89 |
Değerler, 65/35 ayrımıyla yaptığımız kendi taramalarımızdan.
- Örneklem dışında benzer ya da biraz daha iyi, altında olduğu gibi: ayarlar aramanın tam olarak hangi aylarda yapıldığına bağlı değildi. Bu bir geçiştir.
- Örneklem dışında çok daha iyi, Nvidia'da olduğu gibi: bu da bir geçiş, ama dikkatli olun. Örneklem dışı bölüm daha kısadır ve daha az işlem içerir, bu yüzden birkaç şanslı işlem daha ağır basar. Yüksek değerin devam etmesini beklemeyin.
- Örneklem dışında belirgin şekilde daha kötü: arama büyük ihtimalle gürültüye uyum sağladı. Yaklaşık 2,5'ten yaklaşık 1'e düşüş, örneklem içi eğri ne kadar iyi görünürse görünsün açık bir başarısızlıktır.
- Örneklem dışında 1'in altında: ayarlar görmedikleri verilerde para kaybetti. Onlarla işlem yapmayın.
Her bölümdeki işlem sayısına da bakın. Bir düzine işlemden çıkan kâr faktörü tesadüfen çok dalgalanabilir.
Testi bozan tuzaklar
- Gizlice bakmak. Örneklem dışı sonuca bakarsınız, bir ayarı değiştirirsiniz ve yeniden bakarsınız. Birkaç turdan sonra örneklem dışı bölüm örneklem içi olmuştur.
- Piyasalar arasında olta atmak. Yirmi piyasa tararsınız ve sadece en iyi örneklem dışı sonucu olanı tutarsınız. Bunun bir kısmı şanstır. Önce piyasanıza karar verin.
- Çok kısa bir kontrol. Birkaç haftalık örneklem dışı veri çoğu zaman çok az işlem içerir.
- Kurallarda ileriyi görme. Bir kural gelecekten veri kullanıyorsa, kusursuz bir ayrım bile testi kurtaramaz.
- Maliyet yok. Komisyonlar, kayma ve funding iki bölümde de yer almalı.
Örneklem dışı test ve kaldıraç
Görülmemiş veride geçmek, kuralların gerçek bir şey bulduğunu söyler. Ne kadar kaldıraç taşıyabileceklerini söylemez. Bunun için tek bir işleme karşı en kötü harekete bakın. Bir ETH örneğinde en kötü hareket %15,64 idi, yani 6,39x üzerindeki her şey o işlemi likide ederdi. Altında sınır 18,2x, Nvidia'da 9,03x idi. M Alpha Core bu sınırı her raporda gösterir ve kaldıraç ve likidasyon hesaplayıcısı bu ilişkiyi kendiniz test etmenizi sağlar.

Testten sonra: deneme çalışması ve canlı
Geçilen bir örneklem dışı test başlangıçtır, son değil. Bir sonraki kontrol, canlı fiyatlarla bir deneme çalışmasıdır: bot emir göndermeden ne yapacağını kaydeder. Sonra küçük bir canlı tutar gelir. M Alpha Core tam olarak bu sırayı izler ve her pazar botun kendi başına ne kazanacağını hesabınızda gerçekte olanla karşılaştırır. Sıralamanın tamamı için kripto trading botu nasıl test edilir rehberini okuyun.
Sık sorulan sorular
Örneklem dışı test nedir?
Bir stratejiyi, onu geliştirmek ya da ayarlamak için kullanılmamış veriler üzerinde test etmek. Kurallar testten önce sabitlenir ve testten sonra değiştirilmez.
Örneklem içi veri nedir?
Verinin bir stratejiyi geliştirmek ya da ayarlamak için kullanılan bölümü. M Alpha Core yılın ilk %65'ini kullanır.
Trading'de aşırı uyum (overfitting) nedir?
Tekrar eden bir örüntü yerine geçmiş fiyatların gürültüsüne uyum sağlayan bir strateji. Backtestte harika görünür, sonrasında başarısız olur.
Walk forward analizi nedir?
Aramayı ve testi zaman içinde kayan pencerelerde tekrarlamak ve tüm test dönemlerini tek bir sonuçta birleştirmek.
65/35 ayrımı bir walk forward testi mi?
Tek bir walk forward adımıdır: bir arama penceresi ve hemen ardından gelen bir test penceresi.
Veri neden rastgele ayrılmamalı?
Komşu günler birbirine benzer, bu yüzden rastgele bir ayrım test döneminden aramaya bilgi sızmasına yol açar.
Örneklem dışı sonuç daha iyiyse ne olur?
Bu bir geçiştir, ama daha kısa dönem daha az işlem içerir. Yüksek değerin devam etmesini beklemeyin.
Örneklem dışı sonuca bakıp ayarlama yapabilir miyim?
Testi bozmadan hayır. Onun üzerinde ayar yaptığınız anda örneklem içi veriye dönüşür.
Örneklem dışında geçmek kârı garanti eder mi?
Hayır. Güçlü bir işarettir, ama piyasalar değişir ve hiçbir backtest bir söz değildir.
Ne kadar örneklem dışı veri yeterlidir?
Anlamlı sayıda işlem içerecek kadar. Bir yıl ve %35 payla kontrol yaklaşık dört ayı kapsar.
M Alpha Core'u karşılaştırın
Diğer bot araçlarıyla yan yana, onlar hakkındaki her ifade için kaynaklarla.
M Alpha Core'daki borsalar: Binance · Bybit · Bitget · OKX · MEXC · Gate · BingX · KuCoin · Crypto.com · Hyperliquid
İlgili sayfalar
Tüm rakamlar geçmiş piyasa verileri üzerindeki backtestlerden gelir. Hiçbir sonuç gelecekte kâr vaadi değildir. İşlem yapmak, özellikle kaldıraçla, yüksek risk taşır. M Alpha Core bir yazılım aracıdır, yatırım tavsiyesi değildir.