בדיקה היסטורית בלי הונאה עצמית

כתבו את הכלל לפני שתבחנו את התשובה

בדיקה היסטורית מחילה כללי החלטה מוגדרים על נתונים היסטוריים ומחשבת מה היה מניב רצף עסקאות ממודל. ערכה הוא בהעמדת השערה למבחן הראיות. אם הכלל משתנה בכל פעם שמופיעה דוגמה מפסידה, התרגיל הופך לדרך לתאר את העבר במקום לבחון תהליך החלטה שניתן לחזור עליו.

התחילו בקבוצת המכשירים, מרווח התצפית, תנאי הכניסה, תנאי היציאה, שיטת קביעת הגודל ומודל העלויות. הגדירו מתי המידע נעשה זמין ומתי הוראה יכולה להתבצע לראשונה. אסטרטגיה המבוססת על מחיר סגירה אינה יכולה בדרך כלל להניח שידעה מראש את מחיר הסגירה הסופי והתבצעה בדיוק באותו מחיר ללא הצדקה נוספת.

היזהרו מזליגת מידע לאחור בזמן

הטיית מבט לעתיד מתרחשת כשההדמיה משתמשת במידע שלא היה זמין בעת ההחלטה. דוגמאות כוללות נתונים כלכליים מתוקנים, הודעת רווח מאוחרת יותר או רשימת חברות עתידית במדד. מסד נתונים היסטורי יכול להיות מדויק לחלוטין היום ובכל זאת לא להתאים לשחזור מה שאדם ידע בפועל בתאריך מוקדם יותר.

הטיית הישרדות נוצרת כאשר יקום הבדיקה אינו כולל מכשירים שנעלמו. אסטרטגיה שנבדקת רק על חברות שעדיין קיימות עלולה להחמיץ פשיטות רגל, מחיקות ממסחר ורכישות שהשפיעו על מערך ההזדמנויות ההיסטורי. אותה בעיה יכולה להופיע בטוקני קריפטו שנכשלו או בקרנות שנסגרו. תעדו כיצד מאגר הנתונים מטפל בהיעלמויות במקום למחוק בשקט רשומות קשות.

בפיצול של שתי מניות תמורת אחת, מאה מניות במחיר 40 דולר הופכות למאתיים במחיר של כ־20, לפני תנועות שוק נוספות. הפיצול עצמו אינו מוחק מחצית מהשווי. ערבוב מחיר מתואם עם כמות לא מתואמת מייצר תוצאה מדומה; הוספת דיבידנד לסדרה שכבר כוללת השקעתו מחדש סופרת אותו פעמיים.

מידלו את הביצוע, אל תניחו שיעשו לכם טובה

נר שנוגע במחיר הגבלה אינו מוכיח שכל ההוראה שלכם הייתה מתבצעת. המיקום בתור, הכמות הזמינה והמסלול בתוך הנר חשובים. אם גם עצירה וגם יעד ננגעים באותו נר, הנר לבדו עשוי לא לחשוף מה קרה קודם. התייחסו לעמימות הזאת בשמרנות או השתמשו בנתונים שיכולים להבהיר את הרצף.

כללו מרווח, עמלות, מימון, עלויות שאילה כשיש לכך רלוונטיות, וגלישת מחיר סבירה. הטיפול במס תלוי בתחום השיפוט ובנסיבות, ולכן סימולציה כללית צריכה לציין אם התוצאות הן לפני מס במקום להמציא שיעור אחיד. השוו תוצאות תחת כמה הנחות עלות. שיטה שמצליחה רק בביצוע חינמי ומיידי היא שברירית.

הפרידו בין גילוי להערכה

ניסיון של מאות צירופי פרמטרים והצגת הטוב ביותר יוצרים בעיית ברירה. צירוף כלשהו יכול להיראות מצוין במקרה. שמרו נתונים שלא שימשו לפיתוח הכלל, והימנעו מהיוועצות חוזרת במאגר הזה עד שיהפוך למדגם אימון נוסף. בדיקה קדימה על הנייר מציעה בדיקה אחרת כי תצפיות חדשות מגיעות אחרי קיבוע הכללים.

דווחו על גרסאות שנכשלו, גודל מדגם, טווח תאריכים ומספר ניסויים, ולא רק על הגרף המנצח. בדקו אם בחירות פרמטרים סמוכות מתנהגות באופן דומה או אם הגדרה בודדת מבודדת מפיקה את כל הרווח. תוצאות היפותטיות נותרות היפותטיות גם כשהגיליון מדויק למספר ספרות אחרי הנקודה. נזילות, רגשות ובעיות תפעול אינם משוחזרים במלואם בחשבון היסטורי.

נהלו יומן מחקר של גרסאות נתונים ושינויים בחישוב. תיקון התאמה לפיצול מניות או הוספת מחיקה ממסחר עשויים לשנות מהותית את התוצאה, והתיקון צריך להישאר גלוי. שחזוריות פירושה שאדם אחר יכול לשחזר את אותה תשובה מהקלטים ומהכללים שצוינו. אין פירושה שהתשובה מועילה כלכלית, אך זה צעד הכרחי לבירור.

שחזרו עסקה אחת לפני שתאמינו לאלף

בנו לעסקה נבחרת ציר זמן: מועד הנתון, מועד זמינותו בפועל, ההחלטה, הגעת ההוראה והביצוע. הודעה שהתפרסמה אחרי סגירת יום שלישי לא יכלה להצדיק החלטה בבוקר אותו יום. גם אזורי זמן ושעון קיץ עלולים להכניס מידע עתידי בלי סימן ברור.

התאימו את החשבון כולו, לא רק עסקאות שנסגרו. המזומן ההתחלתי, התזרימים החיצוניים, התוצאות שמומשו ושווי הפוזיציות הפתוחות צריכים להסביר את ההון הסופי. כמה אותות בו־זמניים אינם יכולים להוציא כל אחד את אותה יתרת מזומן.

בדקו סדרות מלאכותיות קצרות עם תשובה ידועה. מחיר קבוע ללא עמלות אינו אמור ליצור רווח מסחר; פיצול בלבד צריך לשמר הון. הגדלת עמלה ברשימת עסקאות קבועה צריכה להפחית בדיוק את העלות הנוספת. מחיר חסר דורש טיפול מתועד, לא ביצוע שקט באפס.

בחרו אמת מידה בהתאם לשאלה. אסטרטגיית קנייה בלבד עשויה להרוויח מעליית השוק כולו. השוו על אותם תאריכים ובטיפול אחיד בדיבידנדים ובמזומן; יתרה סופית גבוהה יותר אינה מוכיחה כשלעצמה יכולת תזמון.