同一张表,先看更新时间还是先看概率排序,得出的印象可以完全相反。
很多讨论从一张截图开始:某一期和值落在尾部,配一句「果然」。单期结果说明不了方法好坏;要判断方法,至少要看几十期的连续记录,以及同一套口径下不同窗口的表现。算法能把记录整理成表,模型能把表变成概率,但样本量和口径仍然要人来定。
方法第一步:先定口径
方法最容易出问题的地方,是偷偷调参。看到某段回测成绩不好,就换窗口、换边界、换权重,直到数字好看为止,这不是优化,是过拟合。28预测心得的做法是先把参数写进记录,再跑样本外验证;验证不通过就承认不通过,而不是回头改参数。算法和模型都应该接受这个约束,否则方法只是事后解释。
方法要能接受反向检验:如果这套方法无效,数据应该呈现什么样子?先把否证条件写下来,再看结果,比事后找理由可靠得多。
样本窗口怎么切
号码频次表里,出现次数最多的几个通常只比平均值高一点。以100期、28个和值计算,理论平均每个和值出现三四次,最高与最低差几次属于正常。把这个差值当成冷或热,是把随机波动读成了信号。
最近一期第3501218期的和值落在主体区间内,这个信息本身价值有限。有价值的是它相对于近30期重心的位置:偏高还是偏低,以及这种偏移在过去100期里出现过多少次、后续如何回落。
算法步骤拆开看
算法与模型的分工,可以拆成两层:算法负责把原始记录变成特征,模型负责把特征变成概率。28预测心得常见的特征包括近50期频率、当前遗漏、区间厚度和相邻期差值;常见的模型包括时间序列、马尔可夫链、神经网络、蒙特卡洛和回归。五类模型各有假设,单模型容易在某个窗口里表现好,换个窗口就回落,所以多模型融合比单模型更稳。
回测记录是检验算法与模型的唯一凭据。一条完整记录至少要包含期号、窗口、参数、模型输出、实际结果和是否命中。28预测心得页面展示的准确率三卡,分别对应总体命中、趋势方向和精确值命中,按历史回测口径统计。模型在训练段定参数,在验证段只验收,不调参,这样得到的数字才有参考价值。
- 时间序列模型:按时间顺序读取和值序列,提取趋势与周期成分,输出下一期的概率分布。
- 马尔可夫链模型:把和值划分成状态,统计状态之间的转移频率,用转移矩阵给出概率。
- 神经网络模型:用多层非线性结构拟合特征组合,适合处理频率、遗漏与区间厚度的交互。
- 蒙特卡洛模型:通过大量随机模拟逼近分布,检验其他模型输出的稳定性与尾部风险。
- 回归模型:用均值、标准差、遗漏等变量解释和值位置,输出带置信区间的估计。
哪些操作容易过拟合
只报命中次数、不报样本期数,是另一种常见偏差。命中10次听起来不错,如果一共预测了200期,这个数字就要重新看。分子和分母要一起出现。
过度自信往往来自一次成功。一次命中会让人记住方法、忘记概率;十次落空又会让人彻底否定方法。把每次结果都记下来,情绪才不会被单次结果牵着走。
常见问题
如果只能带走一句话:把每次判断的条件写下来。条件写清楚了,命中可以复盘,落空也能复盘;条件不写,两个结果都只能算运气。
模型不是越多越好。模型池里的每个模型都有自己的假设,时间序列模型假设趋势可延续,马尔可夫链模型假设状态转移稳定,神经网络模型假设特征之间存在非线性关系。把这些模型放在一起,先看它们的输出是否互补,再谈权重。权重定好以后,还要用样本外数据验收,否则融合只是把同一种偏差平均一遍。
算法与模型的关系,可以理解为“算法管过程,模型管排序”。算法负责清洗、统计和分桶,模型负责在特征之上输出概率。任何一个模型输出异常,都应该能顺着算法记录回溯到具体步骤。模型可替换,算法记录不可省,这是整套方法能复算的前提。
概率描述的是可能性,不是结果;样本量越小,概率的波动越明显。
把概率和样本量一起报,是避免误读的最简单办法。
28预测的讨论应该建立在可复核的样本上,而不是单次结果上。
把28预测当成记录方法,比当成确定答案更有用。
28预测里真正能复算的部分,是样本、口径和参数,而不是结论。
写28预测的文章,先交代样本窗口,再谈分布和概率排序。
28预测的每一次判断,都应该能追溯到具体期号和参数。
对普通读者来说,最实用的动作不是背结论,而是学会提问题:样本多长、窗口怎么选、概率怎么算、模型权重怎么定。问题问对了,数字才有意义;问题不问,再漂亮的图表也只是装饰。
术语一致性比术语数量更重要。同一篇文章里,概率、频率、比例应该各有明确所指;算法、模型、参数也不应该混着用。读者不需要记住所有术语,但需要知道每个数字是怎么算出来的。
复盘记录的价值,在于它保留了当时的判断。只记结果不记过程,事后很容易把运气解释成能力;把期号、参数、预测值和实际结果一起记下来,才能看出某个方法在什么条件下有效、在什么条件下失效。
读表的顺序建议固定下来:先看时间和窗口,再看均值和标准差,然后看区间厚度与概率排序,最后才看结论性描述。顺序固定以后,不同页面之间的数字才有可比性;顺序一乱,很容易把描述当成预测。
样本量决定了结论能说多满。100期可以看清分布的大致形态,但不足以证明某个比例长期稳定;30期能看近期方向,却更容易被偶然波动带偏。把样本量和比例一起报,是避免过度解读的最简单办法。