第 26 课:前向测试和最小样本量

一句话:前向测试验的是行情没走出来前,你认不认得出信号、下不下得去手。先锁死规则,信号账和执行账分开记,按要回答的问题定笔数。最后报误差范围,只要范围跨着零,就接着攒。

本文是《交易决策与训练系统》30 课的第 26 课。

本课结构图

第26课结构图:用版本和日期锁死规则,按要回答的问题定样本量,信号账和执行账分开,事先写停机线,然后报告期望值区间;区间不含零才从模拟升到极小实盘再放大

图的文字版:①先锁死规则,标好版本号和日期。②想清这轮测什么:光验“认不认得出”,几十笔且零违规就够;要验“有没有期望值”,按目标精度定样本,跑完报误差范围。③符合条件的信号全进信号账,实际下单进执行账。④开跑前写死单日和整体停机线。⑤到笔数看误差范围:下限没过零就不升档,按预设复查点决定继续、改版或停掉;扣费后下限大于零,才按预设门槛从模拟升极小真仓,再到放大。

开场:考 12 次,为什么只过了一半

先算笔假设账(非任何考核公司的真实通过率):假定单次通过率 15%,同一人一年考 12 次。若各次独立且通过率不变,12 次全失败的概率是 0.85¹²,约 14.2%;至少过一次是 1 − 0.85¹²,约 85.8%,说成约 86%。45% 不是这个公式算出来的。

倘若另一份假设数字是 45% 的人过关,那也只是另一笔假设,不能当成已测的通过率,更不能单凭和 86% 的落差断定大家没长进。水平参差、次数不一、中途退场、规则调整与相关性,都会让独立抽签模型失灵。未经核实的群体数据更不能折算成个人通过率。

前向测试的要害,是在开跑前把规则、样本计划和停机线写死。考砸一次不必急着改规则,先分清正常波动和有实据的硬伤。真要改就另开新版本,留好旧结果。

这一课就讲怎么给自己排这场考试,算清考多少题分数才作数。

原理

前向测试回答回测回答不了的问题

回测是摊开历史图往回看,后续走势就摆在右边,形态自然好认。前向测试没这视角。先把规则锁死,K 线一根根往后走,你得在不知道结局时当场拍板算不算信号,该进就进,该砍就砍。

算胜率、平均盈利和平均亏损,有历史数据就回测老案例;没有就做前向测试,拿模拟盘或极小仓位蹲预设条件,边记边算。两边守同一条底线:别为凑漂亮结果挑样本,凡符合预设条件的都收进来。

十几张图是门票,不是证明

建图库按步来:形态归类、截图、存盘。攒够十几张图(越多越好),再拆解哪些变量提效、哪些拖后腿,定好进场、止损和止盈。规则落纸后再回测或前向测试,验出正期望,才配给真实风险额度。

十几张图顶多够立项研究,离证明优势还隔着整套检验。

两本账:信号账和执行账

  • 信号账:凡符合预设条件的机会全记,漏看的、没成交的、手软放过的也记,写清照规则做会怎样。
  • 执行账:记你实际干了什么,什么价位、多少成本、有无违规。

只记成交单,等于每晚偷偷抹掉最难下手的那几个信号,再拿漂亮剩菜估期望值。信号账验规则底子,执行账照你自己的手。两本账差得越远,病根越在人不在规则。

拿组自拟数字算算:30 天出 40 个信号,你做了 26 个。信号账 40 笔照规矩走,平均 +0.4R;执行账 26 笔平均仅 +0.1R。漏掉的 14 笔里,偏偏藏着好几单最难扣扳机、跑得最远的肉。这时去改规则纯属找错地方,该治的是下单的手。

最小样本,取决于你问什么问题

样本量没万能数,问法不同,笔数不同。

你想回答的问题大致量级用法
我认不认得出这个形态,能不能按规则走完流程一个月几十笔,一次都不违反风险规则先过这一关,再谈赚钱
这个形态值不值得研究十几张图起,越多越好建库,找变量
这到底算不算一个策略按效应大小、波动、相关性和精度规划;100 笔仅作本课起始检查点不能以固定笔数保证结论

100 笔只是本课起始检查点,不算通关金牌。按第 25 课那套自拟规则算:70% 赚 9 美元,30% 亏 15 美元,单笔期望值 +1.80 美元。优势挺扎实,可光靠样本把它从波动里筛出来,笔数远超直觉。

假设每笔独立同分布,这已知二点分布的单笔标准差约 11 美元。用已知均值和标准差看样本均值的近似抽样波动(标准差除以笔数平方根再乘 1.96;注意它并非实盘后自动成立的置信区间,更不是保证检验有 95% 把握过关的样本量):

  • 20 笔:误差约 ±4.8 美元,均值可落在 −3.0 到 +6.6,跨着零。
  • 100 笔:误差约 ±2.2 美元,范围 −0.4 到 +4.0,还是跨着零。
  • 约 144 笔:误差约 ±1.8 美元,下限贴近零。
  • 300 笔:误差约 ±1.2 美元,范围 +0.6 到 +3.0。

若波动及其他条件不变,单笔优势砍半到 +0.90 美元,所需笔数可不止翻倍,得翻约四倍,直奔 600 笔。实盘扣完佣金滑点,净优势往往比纸面薄。单看这算例,100 笔常分不清微弱优势与噪声;换别的策略同样不能光凭笔数过关。实盘样本要估波动,算上厚尾、相关性和重复试验,区间算法与复查次数也得开测前敲定。别干那种每天重算普通 95% 区间、熬到刚转正就宣布过关的事。

证据阶梯:模拟、极小真仓、放大

没证明有优势就押真钱,是这行最贵的学费之一。分三步走:

  1. 先跑模拟,不担真钱风险,数据全记。
  2. 模拟看出优势再上实盘,用尽量少的钱确认真实撮合下策略仍成立。
  3. 真仓能赚,再逐级加量。

模拟有个坑:成交偏理想,也未必扣足佣金杂费;但再怎样也比拿真钱交学费便宜。

两档测的不是一回事。模拟测眼力和流程,一千万美元的模拟户头没痛感,没人手抖,自然试不出真亏钱时的手。试手靠极小真仓,哪怕只买一股、单笔担一美元风险,也不至于吓得不敢点。偏偏多数人在模拟和最小仓位上都待不住,个个急着抢跑。

方法:一份能执行的前向测试协议

  1. 冻结规则。 写清版本号和日期,把形态条件、进场、止损、目标和不做的情形钉死。测试期只记不改。
  2. 先定用途,再定笔数。 测“认不认得出”,几十笔且零违规就行;测“有没有期望值”,按目标精度定样本,本课以 100 笔作起始检查点,跑完报误差范围,不只报均值。
  3. 双账本。 信号账一笔不漏,执行账记价位、成本和违规。
  4. 预设停止线。 单日亏多少碰线收工,累计违规几次、成本超多少整轮暂停。线要在开测前画好,别等亏钱时再想。先拿连亏计算器估正常连亏笔数,若正常波动已超承受预算,就缩仓或留模拟,绝不能抬高预算迁就策略。
  5. 升级门槛。 模拟升极小真仓:笔数够、零违规、扣费后期望值区间下限大于零。极小真仓升放大:实盘成交与模拟无明显走样。每档过关线事先落纸。
  6. 改规则就换版本。 半途发现条件卡壳能改,但改完算新版本,计数归零,旧样本只留着提假设。
  7. 结束出一页报告。 列清信号覆盖率、执行率、违规笔数、扣费后期望值与误差范围,拍板下一步(继续、退回、放大或停止)。

股票一百股或期货一张微型都不自动等于安全。按标的、止损宽度和可承受预算选单位;最小单位仍超预算就留模拟。

更多真实案例

一百股,十个月

第 13 课那位做空抛物线股的交易员,刚入行就清楚头阵子做不好,只下最小一手:没数据撑着不配放大。熬了约十个月账户才转正,此后好几年无亏损月,仓位却一直克制。同批进门的十几个人,一两年里陆续走光了。

聊新手预期时他提过,不少人头一个月就大赚一笔,反而栽在这上头。以为钱好赚便猛推仓位,冷不丁砸出爬不出来的大坑还硬顶。搁在前向测试里也一样,开头三笔连赢最容易让人飘。

希望是最贵的东西

一位老交易员回忆,大学刚学做盘时见个指标就当灵丹妙药,可真围着指标搭规则实测,十有八九全失灵。都是一套套测出来的,光靠想看不破。

他的药方就两样:记日志持续跟踪,每天给评分卡打分。圈里常说,靠希望麻痹自己是世上最贵的瘾。前向测试就是逼你把“我觉得管用”,压成 N 笔跑完后的硬数字。

一个小库,让异常自己站出来

第 24 课那份亏 9 美元却拿 A 的复盘里,交易者翻出库里 35 个同类老案例,发现多数“首个阴线日”不会先横盘三四个小时才破位;他这单拖到下午一点才跌,搁库里明显反常。

攒样本还能立条基准线,让反常现形。没那 35 个案例,下午一点破位只当寻常波动,抓不住这反常信号。

别人的业绩,是一份没有前向记录的回测

挑付费交易服务,验货标准跟给别人做前向测试差不离:

  • 经审计的对账单、报税单、直连券商的验证平台或实盘录屏。
  • 教的信号自己敢不敢拿真钱做。
  • 带出来的学生有无经核验的实盘盈亏。
  • 有无亏损和回撤。有回撤反倒是好事;号称从不挣扎、从不亏钱的得格外防备,要么改了图,要么极端挑过样本。
  • 最要紧的一条:两到六个月后,你自己有无真实、具体、摸得着的长进,哪怕眼下还没赚钱。

最后一条把准星拉回你自己身上。花钱买的东西管不管用,翻自己的记录才算数,别人的曲线替不了你。如今不少日志软件支持表格导入交易,晒张仪表盘截图证明不了什么。市面上绝大多数交易信息没优势,你亲手记的前向记录,才是手里唯一修不了图的硬证据。

最容易错的地方

1. 赢了三笔就放大。 照前头算的,20 笔误差范围照样跨着零。改法:加仓门槛开测前就写成笔数和违规数,别写“感觉差不多了”。

2. 只记成交单。 漏记放过的信号等于挑样本,必须把信号账和执行账拆开,对不上的缺口才是最该深挖的病根。

3. 把模拟成交当真。 模拟撮合偏理想,还可能漏扣杂费;跑模拟时先手动扣笔保守成本,进极小真仓再换实盘真实损耗。

4. 中途改规则,样本照混。 规则一动,前头样本测的还是旧规矩,得另起新版本、计数归零,旧样本只留着提假设。

5. 把 100 笔当许可证。 凑够固定笔数不保过关。按预定样本和复查计划报区间,扣费后下限没过零就别升档,照预案继续、改版或停手。

6. 失败后机械重考或机械改规则。 测砸先查是撞上预设否决线,还是落在正常波动里。真有规则缺陷再改版另开;否则照预注册计划继续或停掉,别为刷过关反复改题。

适用边界

  • 低频策略耗不起。一周才出一个信号,攒 100 笔得两年。这类只能靠历史数据搭极小仓位验,结论要降级,也别拿去垫高其他策略的风险额度。
  • 恐慌后反转这类事件型形态,一年没几回,样本永远做不大,只能靠大批历史案例配极轻真仓。
  • 市场结构变了,老样本照样失效,留到下一课讲。
  • 本课样本量针对“估期望值”。若只验“认不认得出信号”,几十笔就够露马脚。

外汇和差价合约有便利也有坑。便利在模拟盘普及、不少经纪商支持极小手数,跨到极小真仓几无门槛;坑在模拟盘点差和成交(尤其数据公布前后)常比实盘好得多,有的还不扣隔夜利息。模拟期成本栏得按实盘典型点差手动加,极小真仓期专门核对两边成交差。

练习:三十天双账本协议

材料: 挑个已有规则的形态。没有的话,第一部分先拿第 25 课的假设分布做概率模拟:70% 赚 9 美元,30% 亏 15 美元,期望值 +1.80 美元。这只是分布而非入场策略,不能直接拿去跑第三部分的实盘测试;先回第 4、5 课写出可观察的规则。

第一部分,算。 照文中算法,算出 20 笔、100 笔、300 笔时 +1.80 的 95% 范围;再算优势砍半后,要多少笔才跟零撇清。

第二部分,写协议。 一页纸写清:规则版本和日期、要回答的问题、目标笔数、单日和整体停机线、升档门槛、失败处置(退回或换版本)。

第三部分,跑 30 天。 出信号记信号账,下单记执行账。跑完交一页报告:信号覆盖率、执行率、违规笔数、扣费后期望值和范围、下一步。

评分(满分 10):

  • 2 分:协议在开跑前定稿,带版本和日期。
  • 2 分:信号账没漏记放过的信号。
  • 2 分:停机线和升档门槛全是硬数字,能强制执行。
  • 2 分:结论报了误差范围,且与样本厚度相称。
  • 2 分:中途没偷改规则;改了的已另开版本。

参考: 把升档钉死在三条(按目标精度排够笔数、违规 0、扣费后区间下限大于零),补齐相关性、重复检验与风险预算核对,全过关才动用扛得住的最小真仓,可拿满分。刚赢三笔就写“看着能加仓”,最多 4 分。

开跑前,先用连亏计算器按胜率估 100 笔里正常的最长连亏,超风险预算就缩仓或留模拟;跑完把两本账的胜率和盈亏分别填进期望值计算器,再用蒙特卡洛模拟器跑几千条路径,看看同一套优势在 30 笔、100 笔、300 笔上会被随机性扯多宽。

用得上的工具

  • 连亏计算器:按胜率和笔数估正常最长连亏,核对风险预算,绝不能借机放宽最大可承受亏损。
  • 期望值计算器:分开算信号账和执行账的期望值,看差距在规则还是在手。
  • 蒙特卡洛模拟器:看小样本结果能被随机波动甩多远。

模拟器边界: 当前工具按固定胜率、固定盈亏比及每笔占当前权益的一定比例生成独立交易;不做逐笔历史收益重采样,也不直接输出本课固定美元算例的均值置信区间。固定美元算例请按文中公式或另写脚本验算;模拟只展示假设路径,验证不了真实优势。

和其他课的关系

  • 上游:第 25 课讲回测怎样防偷看未来,本课顺着讲规则锁死后的实时验证;第 4 课把盘感写成可检验假设,给本课当输入。
  • 下游:第 27 课讲样本攒出后怎样察觉策略变质;第 13 课讲仓位怎样随证据放大;第 29 课把这份协议排进 60 天训练表;第 30 课凭这里的账本决定继续、暂停还是退出。
  • 同一条线:第 3 课教从样本算期望值,第 24 课教给过程打分,第 18 课讲考核公司那套“一手、碰线就锁”的规矩。

用 NQ Replay 练这一课

回放替不了实盘前向测试,但在没见过的交易日上按死规矩先练,是上正式前向测试前更便宜的垫脚石。NQ Replay 是我们自己做的应用,在模拟环境里逐笔回放过去的纳指期货(NQ)交易日,带括号单、考核式亏损限额和逐笔复盘。可申请 7 天免费试用,需自备有授权的 NQ 逐笔数据。

上一课和下一课


本文仅作交易教育用途,不构成任何投资建议,也不承诺任何收益。真实案例中的股票代码、日期和行情来自公开资料;文中交易者的个人盈亏与统计数字经过调整;示意算例的数字为作者自拟。交易有亏损风险,请按自己的情况独立判断。

在计算器里验证

测试期里,多长的连亏算正常

按你的胜率,100 笔里最长连亏大概有多长?

例(数字自拟):胜率 45%、100 笔,最长连亏的中位数是 6,均值大约 7,出现 8 笔或更长的概率大约 30%。停机线要设在这之外。

打开连败概率计算器