Tuliskan aturan terlebih dahulu
Tentukan sampel, batas data, fungsi perbandingan, dan ukuran hasil sebelum mengevaluasi keberhasilan. Simpan catatan perubahan agar metode yang direvisi tidak disalahartikan sebagai pengujian awal.
Gunakan evaluasi walk-forward
Pada setiap batas waktu historis, batasi pencarian pada informasi yang tersedia saat itu. Evaluasi periode berikutnya tanpa membiarkannya memengaruhi pemilihan.
Pilih tolok ukur
Klaim riset memerlukan perbandingan. Bergantung pada pertanyaan, tolok ukur mungkin berupa distribusi imbal hasil sederhana atau sampel historis tanpa syarat. Jelaskan mengapa tolok ukur sesuai.
Perhitungkan ketergantungan
Jendela bertumpang tindih, instrumen berkorelasi, dan percobaan parameter berulang dapat membuat bukti tampak lebih kuat daripada sebenarnya. Perhitungkan ketergantungan ini dan hindari memperlakukan setiap baris sebagai eksperimen independen.
Laporkan kegagalan maupun keberhasilan
Terbitkan periode evaluasi, penanganan data hilang, distribusi kesalahan, dan pengujian sensitivitas. Jika strategi diuji, biaya transaksi dan asumsi penerapan juga penting.