训练段成绩再漂亮,换一段没参与过拟合的数据,才知道方法站不站得住。
28预测心得里最容易被忽略的是更新:开奖在继续,样本在移动,昨天算出来的分布今天就会变一点点。算法要按固定节奏重算,模型要定期复核权重,页面要把更新时间和样本窗口一起标出来,读者才知道自己在看哪一段。
方法第一步:先定口径
把算法步骤拆开,通常是四步:清洗记录、统计频率、计算遗漏、按区间加权。每一步都要留下中间结果,否则出了问题无法定位。28预测心得的方法页把四步分开写,是为了让读者能逐步复核。模型接在第四步之后,读取加权后的特征并输出概率。算法保证可复现,模型保证可比较,两者缺一不可。
口径要写在结果前面。样本窗口、分桶边界、遗漏起点、验证方式,这四项定完再开始算。28预测心得里如果先看结果再补口径,很容易不自觉地挑一个好看的窗口。
样本窗口怎么切
把100期按每20期一段切成五段,逐段看均值,会发现段与段之间有差别,但多数差别落在标准差范围内。模型如果对每一段都重新调参,很容易把正常波动当成结构变化,参数也会越调越多。
号码频次表里,出现次数最多的几个通常只比平均值高一点。以100期、28个和值计算,理论平均每个和值出现三四次,最高与最低差几次属于正常。把这个差值当成冷或热,是把随机波动读成了信号。
算法步骤拆开看
回测记录是检验算法与模型的唯一凭据。一条完整记录至少要包含期号、窗口、参数、模型输出、实际结果和是否命中。28预测心得页面展示的准确率三卡,分别对应总体命中、趋势方向和精确值命中,按历史回测口径统计。模型在训练段定参数,在验证段只验收,不调参,这样得到的数字才有参考价值。
模型的输出需要校准。一个模型说某和值有三成概率,实际出现频率是否接近三成,要用一段独立样本检验。没校准的概率排序,只能当相对参考,不能当绝对数字用。
- 时间序列模型:按时间顺序读取和值序列,提取趋势与周期成分,输出下一期的概率分布。
- 马尔可夫链模型:把和值划分成状态,统计状态之间的转移频率,用转移矩阵给出概率。
- 神经网络模型:用多层非线性结构拟合特征组合,适合处理频率、遗漏与区间厚度的交互。
- 蒙特卡洛模型:通过大量随机模拟逼近分布,检验其他模型输出的稳定性与尾部风险。
- 回归模型:用均值、标准差、遗漏等变量解释和值位置,输出带置信区间的估计。
哪些操作容易过拟合
只报命中次数、不报样本期数,是另一种常见偏差。命中10次听起来不错,如果一共预测了200期,这个数字就要重新看。分子和分母要一起出现。
读28预测心得的页面,建议按这个顺序:先看更新时间和样本窗口,再看分布特征,然后看概率表和准确率卡,最后才看结论性描述。算法输出和模型输出应该能相互印证;如果两者矛盾,优先检查口径,而不是急着相信其中一个。这个顺序能过滤掉大部分情绪化解读。
常见问题
把28预测心得当成一套可复核的记录方法,比把它当成预测神器更有用。样本、口径、算法、模型,四样东西都写清楚,结论才有讨论的基础。页面展示的数字会随样本更新,读法不变:先看口径,再看分布,最后看概率。
模型不是越多越好。模型池里的每个模型都有自己的假设,时间序列模型假设趋势可延续,马尔可夫链模型假设状态转移稳定,神经网络模型假设特征之间存在非线性关系。把这些模型放在一起,先看它们的输出是否互补,再谈权重。权重定好以后,还要用样本外数据验收,否则融合只是把同一种偏差平均一遍。
算法与模型的关系,可以理解为“算法管过程,模型管排序”。算法负责清洗、统计和分桶,模型负责在特征之上输出概率。任何一个模型输出异常,都应该能顺着算法记录回溯到具体步骤。模型可替换,算法记录不可省,这是整套方法能复算的前提。
概率描述的是可能性,不是结果;样本量越小,概率的波动越明显。
28预测的讨论应该建立在可复核的样本上,而不是单次结果上。
把28预测当成记录方法,比当成确定答案更有用。
术语一致性比术语数量更重要。同一篇文章里,概率、频率、比例应该各有明确所指;算法、模型、参数也不应该混着用。读者不需要记住所有术语,但需要知道每个数字是怎么算出来的。
对普通读者来说,最实用的动作不是背结论,而是学会提问题:样本多长、窗口怎么选、概率怎么算、模型权重怎么定。问题问对了,数字才有意义;问题不问,再漂亮的图表也只是装饰。
复盘记录的价值,在于它保留了当时的判断。只记结果不记过程,事后很容易把运气解释成能力;把期号、参数、预测值和实际结果一起记下来,才能看出某个方法在什么条件下有效、在什么条件下失效。
读表的顺序建议固定下来:先看时间和窗口,再看均值和标准差,然后看区间厚度与概率排序,最后才看结论性描述。顺序固定以后,不同页面之间的数字才有可比性;顺序一乱,很容易把描述当成预测。
样本量决定了结论能说多满。100期可以看清分布的大致形态,但不足以证明某个比例长期稳定;30期能看近期方向,却更容易被偶然波动带偏。把样本量和比例一起报,是避免过度解读的最简单办法。
结论要有边界。页面能说的是:在这段样本、这套口径、这组参数下,分布呈现什么形态,概率排序是什么样。页面不能说的是:下一期一定会怎样。把能说的和不能说的分开,读者才不会把统计描述当成承诺。