Backtestlerin çoğu neden yalan söyler — ve bunu yakalayan altı kontrol

Yükselen bir sermaye eğrisi trading'de üretmesi en kolay şeydir. Yeterince veride yeterince parametre birleşimi dene, biri parlak görünecektir. O eğri gelecek ay hakkında neredeyse hiçbir şey söylemez. İşte bir backtestin en sık yalan söyleme biçimlerini yakalayan altı kontrol.

1. Çok az işlem

9 işlemi ve %78 kazanma oranı olan bir strateji hiçbir şey göstermemiştir: birkaç şanslı işlem bunu açıklar. Kabaca 30 işlemin altındaki her sonucu bir anekdot olarak gör. Evident her sonucun yanında işlem sayısını gösterir ve sayı küçükse güvenilirlik etiketini düşürür.

2. Hiç çalışmayan ya da hep çalışan kurallar

AI'ın yazdığı stratejilerde sık sık her mumda doğru olan (yani hiçbir şeyi süzmeyen) ya da hiç doğru olmayan (yani stratejinin bir kolu ölü olan) bir koşul bulunur. Sermaye eğrisi bunu göstermez. Evident her kuralı veriye karşı denetler ve örneğin "RSI 5'in altında" koşulunun test döneminde hiç gerçekleşmediğini söyler.

3. Maliyetler

Birçok backtest komisyon ve kaymayı yok sayar. Sık işlem yapan bir strateji, her yönde %0,1 ödediğinde kârdan zarara dönebilir. Evident her backtestte komisyon ve kaymayı hesaba katar; borsana göre değiştirebilirsin.

4. Örneklem dışı davranış

Bir stratejiyi tüm geçmiş üzerinde ayarlarsan, geçmişe ne kadar iyi uydurabildiğini ölçmüş olursun. Dürüst soru, stratejinin görmediği veride ne olduğudur. Evident verinin en yeni kısmını ayırır ve stratejinin orada nasıl davrandığını ayrıca raporlar. Örneklem dışında çöken bir strateji keşfedilmemiş, uydurulmuştur.

5. İşlem sırasındaki şans

Aynı işlemler farklı sırayla farklı bir düşüş üretir. Monte Carlo işlemleri defalarca karıştırır ve aralığı gösterir: "düşüş %12'ydi" değil, "sıralamaların çoğunda %9 ile %24 arasındaydı". Aralığın kötü ucu hesabını bitirecekse, ortalaması ne olursa olsun strateji fazla risklidir.

6. Çok fazla fikir denemek

Olağan %5 eşiğinde 40 gösterge test et, yalnızca şanstan yaklaşık ikisi anlamlı görünür. Bu varsayımsal değil: açık gösterge araştırmamızda 40 gösterge–piyasa birleşiminin 5'i kanıt eşiğimizi geçti ve yaklaşık 2'sinin şanstan beklenebileceğini açıkça yazıyoruz. Ne kadar çok fikir denersen, her "keşif" o kadar şüpheyi hak eder.

İyi bir sonuç neye benzer

Kusursuz bir eğriye değil. İyi bir sonucun yeterli işlemi vardır, maliyetlerden sağ çıkar, görmediği veride benzer davranır, Monte Carlo'da katlanılabilir bir en kötü durumu vardır ve gerçekten çalışan kurallar kullanır. Bunlar uyuştuğunda kâğıt üzerinde denemeye değer bir şeyin olur. Uyuşmadığında bir backtestin sana söyleyebileceği en değerli şey "yapma"dır.

Evident'te her strateji bu kontroller ve sade bir güvenilirlik etiketiyle gelir. AI kuralları yazar; motor ölçer.

Buradaki hiçbir şey yatırım tavsiyesi değildir. Bir backtest yalnızca geçmişi anlatır.