چگونه یک استراتژی معاملاتی را بدون فریب بک تست کنیم

بک تست چیست و چرا مهم است؟

بک تست فرآیند اعمال یک استراتژی معاملاتی بر روی داده های قیمت تاریخی برای ارزیابی عملکرد آن در گذشته است. این نزدیکترین چیزی است که یک معامله گر به یک آزمایش آزمایشگاهی دارد: شما مجموعه ای از قوانین را تعریف می کنید، داده های بازار تاریخی را به آنها می دهید و نتایج را اندازه گیری می کنید. بدون بک تست، شما اساساً با سرمایه خود بر اساس احساسات و شواهد حکایتی قمار می کنید.

هدف از بک تست پیش بینی آینده نیست. بازارها غیر ایستا هستند و هیچ مقدار آزمایش تاریخی نتایج آینده را تضمین نمی کند. در عوض، بک تست سه عملکرد حیاتی را انجام می دهد. اول، به شما می گوید که آیا یک استراتژی اصلاً برتری آماری دارد یا خیر. اگر یک استراتژی نتواند انتظار مثبتی را در داده های تاریخی ایجاد کند، دلیلی وجود ندارد که باور کنیم در آینده کارساز خواهد بود. دوم، ویژگی های رفتاری یک استراتژی را آشکار می کند: عمق دراودان ها چقدر است، چه مدت رگه های باخت طول می کشد و منحنی اکویتی چقدر نوسان دارد. این اطلاعات برای تعیین اینکه آیا می توانید از نظر روانی از پس معامله سیستم برآیید یا خیر، ضروری است. سوم، یک معیار برای مقایسه عملکرد زنده در برابر آن ارائه می دهد. اگر نتایج زنده شما به طور قابل توجهی از انتظارات بک تست منحرف شود، چیزی تغییر کرده است و باید بررسی کنید.

هر شرکت معاملاتی حرفه ای، صندوق پوشش ریسک و میز معاملاتی قبل از اختصاص سرمایه واقعی، استراتژی ها را بک تست می کند. معامله گران خرده فروشی که از این مرحله صرف نظر می کنند، در یک ضرر بزرگ قرار دارند. با این حال، بک تست ضعیف بدتر از عدم بک تست است، زیرا اعتماد کاذبی به استراتژی هایی ایجاد می کند که در بازارهای زنده شکست می خورند.

اشتباهات رایج بک تست که نتایج را متورم می کند

خطرناک ترین اشتباه در بک تست، برازش منحنی است که به عنوان بیش برازش یا داده کاوی نیز شناخته می شود. این زمانی رخ می دهد که شما پارامترهای یک استراتژی را به قدری تهاجمی بهینه می کنید که کاملاً با داده های تاریخی مطابقت داشته باشد اما به جای الگوهای واقعی بازار، نویز را ثبت می کند. یک استراتژی برازش شده با منحنی ممکن است نرخ برد 80٪ و بازده های دیدنی را در داده های تاریخی نشان دهد، اما در معاملات زنده به طرز اسفناکی شکست خواهد خورد زیرا برای مطابقت با نوسانات تصادفی که تکرار نمی شوند، تنظیم شده است.

برازش منحنی موذی است زیرا مانند تحقیقات قانونی به نظر می رسد. شما یک تقاطع میانگین متحرک را با دوره های 10 و 20 آزمایش می کنید و خوب کار می کند. شما 12 و 23 را امتحان می کنید و بهتر کار می کند. شما 13 و 27 را امتحان می کنید و حتی بهتر کار می کند. قبل از اینکه متوجه شوید، صدها ترکیب را آزمایش کرده اید و یکی را انتخاب کرده اید که بهترین نتایج تاریخی را به دست آورده است. اما تمام کاری که واقعاً انجام داده اید این است که پارامترهایی را پیدا کرده اید که اتفاقاً با نویز گذشته همسو شده اند. هرچه پارامترهای بیشتری را بهینه کنید، خطر بیش برازش بیشتر می شود. یک استراتژی با دو پارامتر بسیار قوی تر از یک استراتژی با دوازده پارامتر است.

سوگیری نگاه به آینده یکی دیگر از مشکلات رایج است. این زمانی رخ می دهد که بک تست شما از اطلاعاتی استفاده می کند که در زمان معامله در دسترس نبوده است. به عنوان مثال، استفاده از قیمت بسته شدن روزانه برای تصمیم گیری معاملاتی در طول روز معاملاتی، یا گنجاندن انتشار داده های اقتصادی قبل از اینکه واقعاً منتشر شود. معرفی سوگیری نگاه به آینده به طور تصادفی آسان است، به خصوص در بک تست های مبتنی بر صفحه گسترده. همیشه از خود بپرسید: در لحظه دقیق فعال شدن این سیگنال معاملاتی، آیا واقعاً به تمام داده هایی که مدل استفاده می کند دسترسی داشتم؟

سوگیری بقا در درجه اول بر معامله گران سهام و سهام تأثیر می گذارد، اما می تواند بر معامله گران forex که سبدهایی از جفت ارزها را بک تست می کنند نیز تأثیر بگذارد. سوگیری بقا زمانی رخ می دهد که مجموعه داده شما فقط شامل ابزارهایی باشد که هنوز امروز وجود دارند، به استثنای ابزارهایی که از فهرست حذف شده اند، ادغام شده اند یا به طور دیگری حذف شده اند. در forex، این زمانی آشکار می شود که شما فقط جفت ارزهایی را آزمایش می کنید که در حال حاضر نقدینگی خوبی دارند، و این واقعیت را نادیده می گیرید که برخی از این جفت ارزها ممکن است ویژگی ها یا spread های بسیار متفاوتی در دوره های قبلی داشته باشند. همیشه اطمینان حاصل کنید که داده های تاریخی شما به طور دقیق شرایطی را که در آن زمان وجود داشته است منعکس می کند.

اگر بک تست شما بیش از حد خوب به نظر می رسد، تقریباً به طور قطع همینطور است. کوانت های حرفه ای به هر استراتژی که نسبت Sharpe بالاتر از 2.0 را در بک تست نشان می دهد مشکوک هستند، زیرا اصطکاک دنیای واقعی تقریباً همیشه عملکرد را کاهش می دهد.

راه اندازی یک بک تست مناسب

یک بک تست دقیق با قوانین واضح و بدون ابهام شروع می شود. هر جنبه از استراتژی باید از قبل مشخص شود: شرایط ورود، شرایط خروج، محل قرارگیری stop-loss، اهداف take-profit، اندازه موقعیت و هرگونه فیلتر یا شرایطی که از معامله جلوگیری می کند. اگر هر بخشی از استراتژی شما نیاز به قضاوت ذهنی دارد (مانند "روند قوی به نظر می رسد" یا "الگوی کندل تمیز است")، نمی توان آن را به درستی بک تست کرد. عناصر اختیاری باید به قوانین قابل اندازه گیری تبدیل شوند.

ابزارهای حرفه‌ای معاملاتی رایگان

بیش از 18 ماشین‌حساب، سیگنال و تحلیل

کیفیت داده های شما بسیار مهم است. برای بک تست forex، اگر در حال آزمایش استراتژی های روزانه هستید، به داده های تیک یا حداقل میله های یک دقیقه ای نیاز دارید. میله های روزانه برای سیستم های معاملاتی نوسانی و موقعیتی کافی هستند، اما می توانند عملکرد قیمت روزانه را که باعث فعال شدن stop ها می شود، پنهان کنند. از spread آگاه باشید: بسیاری از منابع داده رایگان فقط قیمت میانی را ارائه می دهند، اما در واقع شما با قیمت پیشنهادی می خرید و با قیمت پیشنهادی می فروشید. برای جفت ارزهای اصلی مانند EUR/USD، یک pip spread 1 ممکن است بی اهمیت به نظر برسد، اما در طول صدها معامله به طور قابل توجهی بر نتایج تأثیر می گذارد. برای جفت ارزهای عجیب و غریب، spread ها می توانند 5-15 pip باشند و به طور جدی بر عملکرد تأثیر می گذارند.

هزینه های تراکنش قاتل خاموش استراتژی های بک تست شده هستند. بک تست شما باید spread ها، کمیسیون ها، لغزش و نرخ های سواپ را برای موقعیت های شبانه در نظر بگیرد. لغزش به ویژه برای استراتژی هایی که در طول رویدادهای با نوسان بالا معامله می کنند یا از سفارش های بازار استفاده می کنند مهم است. یک تخمین معقول برای جفت ارزهای اصلی 0.5-1 pip لغزش در هر معامله در شرایط عادی و 3-5 pip در طول رویدادهای خبری است. اگر برتری استراتژی شما با اضافه کردن هزینه های تراکنش واقعی از بین می رود، هیچ برتری قابل معامله ای ندارد.

تعریف دوره نمونه: حداقل از 5-10 سال داده برای استراتژی های روزانه یا حداقل 2-3 سال برای استراتژی های روزانه استفاده کنید. نمونه باید شامل رژیم های مختلف بازار باشد: روند، محدوده، نوسان و دوره های آرام.
داده های خود را تقسیم کنید: حداقل 30٪ از داده های خود را برای آزمایش خارج از نمونه رزرو کنید. هرگز روی مجموعه داده کامل بهینه سازی نکنید.
همه چیز را مستند کنید: هر قانون، پارامتر و فرضیه را قبل از شروع ثبت کنید. اگر چیزی را در اواسط آزمایش تغییر دادید، با جداسازی تمیز داده های داخل نمونه و خارج از نمونه دوباره شروع کنید.
از فرضیات پر کردن واقع بینانه استفاده کنید: فرض نکنید که همیشه می توانید با قیمت دقیقی که می خواهید پر شوید. سفارش های محدود ممکن است پر نشوند. سفارش های stop ممکن است بلغزند.

تجزیه و تحلیل گام به جلو توضیح داده شد

تجزیه و تحلیل گام به جلو استاندارد طلایی برای اعتبارسنجی یک استراتژی معاملاتی و موثرترین دفاع در برابر برازش منحنی است. این مفهوم ساده است: به جای بهینه سازی استراتژی خود بر روی کل مجموعه داده، شما روی یک پنجره غلتکی از داده ها بهینه سازی می کنید و سپس پارامترهای بهینه شده را روی داده های دیده نشده بعدی آزمایش می کنید. این فرآیند چندین بار تکرار می شود و پنجره های بهینه سازی و آزمایش را در طول زمان به جلو می لغزاند.

در اینجا نحوه عملکرد آن در عمل آمده است. فرض کنید 10 سال داده از سال 2014 تا 2024 دارید. ممکن است استراتژی خود را در 2 سال اول (2014-2015) بهینه کنید، سپس پارامترهای حاصل را در 6 ماه آینده (ژانویه-ژوئن 2016) آزمایش کنید. سپس پنجره را به جلو می لغزانید: از اواسط سال 2014 تا 2016 بهینه سازی کنید، در نیمه اول سال 2017 آزمایش کنید. شما این فرآیند را ادامه می دهید تا زمانی که استراتژی را در کل مجموعه داده باقیمانده با استفاده از پارامترهایی که همیشه روی داده های قبلی بهینه شده اند، آزمایش کنید.

بینش کلیدی تجزیه و تحلیل گام به جلو این است که شبیه سازی می کند که شما در واقع در معاملات واقعی چه می کنید: به طور دوره ای استراتژی خود را بر اساس داده های اخیر دوباره بهینه می کنید و سپس آن را به جلو معامله می کنید. اگر یک استراتژی به طور مداوم نتایج مثبتی را در چندین پنجره گام به جلو تولید کند، استحکام واقعی را نشان می دهد. اگر فقط در پنجره های خاصی کار می کند، احتمالاً استراتژی برای شرایط خاص بازار بیش از حد برازش شده است. تجزیه و تحلیل گام به جلو همچنین نشان می دهد که هر چند وقت یکبار باید پارامترها را دوباره بهینه کنید، که اطلاعات عملی ارزشمندی برای معاملات زنده است.

استراتژی که تجزیه و تحلیل گام به جلو را با معیارهای سازگار در تمام پنجره ها پشت سر می گذارد، به طور چشمگیری احتمال موفقیت در معاملات زنده بیشتر از استراتژی است که به سادگی روی مجموعه داده کامل بهینه شده است. گام به جلو برای توسعه استراتژی جدی اختیاری نیست. این یک الزام است.

تست خارج از نمونه و چرا حیاتی است

تست خارج از نمونه عمل رزرو بخشی از داده های تاریخی شما است که هرگز در طول توسعه یا بهینه سازی استراتژی استفاده نمی شود. این مجموعه داده دست نخورده به عنوان یک اعتبارسنجی مستقل از استراتژی شما عمل می کند. اگر استراتژی در داده هایی که هرگز "ندیده" به خوبی عمل کند، شواهد بسیار قوی تری دارید که یک الگوی واقعی بازار را به جای نویز تصادفی ثبت می کند.

رایج ترین رویکرد این است که داده های خود را به سه بخش تقسیم کنید: یک دوره داخل نمونه برای توسعه و بهینه سازی، یک دوره اعتبارسنجی برای آزمایش اولیه و اصلاح پارامترها، و یک دوره نهایی خارج از نمونه که دقیقاً یک بار آزمایش می کنید. تست خارج از نمونه امتحان نهایی شماست. شما نمی توانید آن را دوباره امتحان کنید. اگر از نتایج خارج از نمونه برای بازگشت و تنظیم استراتژی خود استفاده می کنید، این نتایج دیگر خارج از نمونه نیستند. آنها به بخشی از فرآیند بهینه سازی شما تبدیل شده اند و آزمایش خود را آلوده کرده اید.

این نظم و انضباط از نظر روانی دشوار است. پس از صرف هفته ها برای توسعه یک استراتژی که در داخل نمونه امیدوارکننده به نظر می رسد، وسوسه "فقط نگاه کردن" به داده های خارج از نمونه شدید است. کاملاً در برابر آن مقاومت کنید. بسیاری از کوانت های حرفه ای داده های خارج از نمونه را از نظر فیزیکی جدا می کنند، آنها را در مکان دیگری ذخیره می کنند یا از یک همکار می خواهند که آن را نگه دارد، به طور خاص برای جلوگیری از نگاه کردن خودشان. یکپارچگی تست خارج از نمونه شما ارزشمندترین مدرکی است که در مورد قابلیت حیات استراتژی خود دارید.

ایده‌های معاملاتی زنده را مرور کنید

ببینید معامله‌گران باتجربه چه چیزی را دنبال می‌کنند

یک تکنیک مرتبط اعتبارسنجی متقابل است که از یادگیری ماشین گرفته شده است. به جای یک تقسیم آموزش-آزمون واحد، داده ها را به چند برابر تقسیم می کنید و می چرخید که کدام برابر به عنوان مجموعه آزمایشی عمل می کند. در حالی که پیچیده تر است، اعتبارسنجی متقابل می تواند سوگیری نگاه به آینده ظریفی را در داده های سری زمانی ایجاد کند، اگر به دقت اجرا نشود، زیرا داده های مالی دارای وابستگی های زمانی هستند که جابجایی تصادفی می تواند آنها را نقض کند. از روش های اعتبارسنجی متقابل مسدود شده یا پاک شده استفاده کنید که به ترتیب زمانی داده های شما احترام می گذارند.

معیارهای کلیدی برای ارزیابی یک بک تست

بسیاری از معامله گران بر روی نرخ برد به عنوان معیار اصلی کیفیت یک استراتژی تمرکز می کنند. نرخ برد به تنهایی بی معنی است. استراتژی که 90٪ مواقع برنده می شود اما 10 برابر میانگین برد را در هر باخت از دست می دهد، به طور فاجعه باری غیر سودآور خواهد بود. برعکس، استراتژی های دنبال کننده روند به طور معمول فقط 30-40٪ از معاملات خود را برنده می شوند اما به دلیل اینکه برندگان آنها چند برابر بازنده هایشان هستند، بسیار سودآور باقی می مانند. شما باید نرخ برد را در کنار اندازه میانگین برد و اندازه میانگین باخت ارزیابی کنید تا تصویر کامل را درک کنید.

نسبت Sharpe بازده تعدیل شده با ریسک را با تقسیم بازده اضافی استراتژی (بالاتر از نرخ بدون ریسک) بر انحراف معیار بازده اندازه گیری می کند. نسبت Sharpe بالاتر از 1.0 قابل قبول، بالاتر از 1.5 خوب و بالاتر از 2.0 عالی در نظر گرفته می شود. با این حال، نسبت های Sharpe بک تست شده بالاتر از 2.5 را با تردید در نظر بگیرید. آنها تقریباً همیشه در معاملات زنده کاهش می یابند. نسبت Sharpe فرض می کند که بازده ها به طور معمول توزیع شده اند، که برای اکثر استراتژی های معاملاتی صادق نیست، بنابراین آن را با معیارهای دیگر تکمیل کنید.

حداکثر دراودان بزرگترین کاهش از اوج به دره در منحنی اکویتی شما است که به صورت درصد اندازه گیری می شود. این احتمالاً مهمترین معیار برای معاملات عملی است زیرا بدترین دردی را که تجربه کرده اید به شما می گوید. اگر بک تست شما حداکثر دراودان 40٪ را نشان می دهد، باید انتظار دراودان های 50-60٪ را در معاملات زنده داشته باشید (زیرا معاملات زنده تقریباً همیشه بدتر از بک تست ها عمل می کنند). صادقانه از خود بپرسید: آیا می توانید پس از تماشای تبخیر شدن نیمی از حساب خود به اجرای استراتژی ادامه دهید؟ اگر پاسخ منفی است، باید اندازه موقعیت ها را کاهش دهید تا زمانی که دراودان قابل تحمل شود.

ضریب سود: سود ناخالص تقسیم بر زیان ناخالص. ضریب سود بالاتر از 1.5 محکم است. زیر 1.2 ممکن است از هزینه های تراکنش و لغزش در معاملات زنده جان سالم به در نبرد.
انتظار: میانگین مقدار دلاری که انتظار دارید در هر معامله به دست آورید. محاسبه شده به عنوان (نرخ برد x میانگین برد) منهای (نرخ باخت x میانگین باخت). باید مثبت و به اندازه کافی بزرگ باشد تا هزینه های تراکنش را پوشش دهد.
ضریب بازیابی: سود خالص تقسیم بر حداکثر دراودان. ضریب بازیابی بالاتر از 3.0 نشان می دهد که استراتژی نسبت به بدترین دراودان خود به اندازه کافی درآمد کسب می کند تا انعطاف پذیر باشد.
تعداد معاملات: اهمیت آماری به اندازه نمونه بزرگ نیاز دارد. استراتژی آزمایش شده روی 30 معامله بی معنی است. هدف حداقل 200-300 معامله برای نتیجه گیری قابل اعتماد است.
حداکثر زیان های متوالی: مهم برای انعطاف پذیری روانی. اگر بک تست شما 12 زیان متوالی را نشان می دهد، باید برای 15-20 مورد پشت سر هم در معاملات زنده آماده باشید.

از بک تست تا زنده: معامله کاغذی و مقیاس بندی تدریجی

حتی یک استراتژی کاملاً بک تست شده و اعتبارسنجی شده نباید بلافاصله با اندازه کامل مستقر شود. انتقال از بک تست به معاملات زنده نیاز به مراحل میانی دارد که بسیاری از معامله گران به ضرر خود از آن صرف نظر می کنند. اولین قدم معامله کاغذی است که به آن آزمایش رو به جلو یا معامله آزمایشی نیز می گویند. استراتژی خود را در زمان واقعی در یک حساب آزمایشی حداقل به مدت 2-3 ماه اجرا کنید و هر سیگنال را دقیقاً همانطور که قوانین شما دیکته می کنند اجرا کنید. معامله کاغذی چندین هدف را دنبال می کند: تأیید می کند که فرآیند اجرای شما در زمان واقعی کار می کند، هرگونه مشکل عملی (مانند فعال شدن سیگنال ها در ساعات غیر نقد) را نشان می دهد و شروع به ایجاد آشنایی روانی می کند که برای معامله سیستم با نظم و انضباط به آن نیاز دارید.

در طول معامله کاغذی، نتایج خود را به طور دقیق با انتظارات بک تست خود مقایسه کنید. همان معیارها را پیگیری کنید: نرخ برد، میانگین برد و باخت، نسبت Sharpe و حداکثر دراودان. مقداری کاهش انتظار می رود زیرا spread های زنده، لغزش و زمان بندی با فرضیات بک تست متفاوت خواهد بود. اگر نتایج در 15-20٪ انتظارات بک تست باشد، استراتژی طبق انتظار عمل می کند. اگر نتایج به طور چشمگیری متفاوت است، قبل از به خطر انداختن سرمایه واقعی، دلیل آن را بررسی کنید. علل شایع واگرایی شامل فرضیات پر کردن غیر واقعی در بک تست، تغییرات در رژیم بازار یا خطاهای اجرایی است.

هنگامی که معامله کاغذی تأیید کرد که استراتژی در زمان واقعی کار می کند، معاملات زنده را با حداقل اندازه شروع کنید. lot های میکرو یا کوچکترین اندازه موقعیتی که کارگزار شما اجازه می دهد معامله کنید. هدف کسب درآمد در این مرحله نیست. این است که تأیید کنیم که استراتژی با پول واقعی و احساسات واقعی کار می کند. بسیاری از معامله گران متوجه می شوند که نمی توانند استراتژی خود را با وفاداری اجرا کنند وقتی پول واقعی در خطر است: آنها از معاملات صرف نظر می کنند، stop ها را جابه جا می کنند، خیلی زود سود می برند یا در ورود تردید می کنند. این انحرافات رفتاری عملکرد را کاهش می دهد و باید قبل از افزایش مقیاس مورد توجه قرار گیرد.

اندازه موقعیت خود را به تدریج در طول 3-6 ماه مقیاس کنید و فقط پس از جمع آوری تعداد قابل توجهی از معاملات زنده که انتظارات بک تست را تأیید می کنند، افزایش دهید. یک پیشرفت معقول ممکن است این باشد: lot های میکرو برای 50 معامله اول، lot های مینی برای 100 معامله بعدی و اندازه کامل مورد نظر فقط پس از 200+ معامله نتایج سازگار را نشان می دهد. این رویکرد از سرمایه شما در آسیب پذیرترین مرحله استقرار استراتژی محافظت می کند و اعتماد به نفس و نظم و انضباط مورد نیاز برای موفقیت طولانی مدت را ایجاد می کند.

پلی بین بک تست و معاملات زنده سودآور با صبر و حوصله هموار شده است. معامله گرانی که از یک بک تست امیدوارکننده به معاملات زنده با اندازه کامل می شتابند، همان کسانی هستند که حساب های خود را منفجر می کنند. با این انتقال به عنوان فرآیندی که ماه ها طول می کشد، نه روزها، رفتار کنید.