学术圈挖掘出的很多因子在实际炒股中失效,核心原因在于过拟合、因子动物园现象以及样本外表现大幅衰减。学术研究通常基于历史数据反复筛选,寻找统计上显著的规律,但这些规律往往是对历史噪音的精确拟合,而非对未来市场的真实预测。当投资者在实盘中使用时,市场环境、交易成本和流动性条件已发生变化,因子自然失灵。

过拟合与p值陷阱

学术论文中一个显著的因子,往往是在成千上万次尝试中偶然出现的统计结果。研究人员通常会测试数百个变量,只汇报那些p值小于0.05(即统计显著)的因子。但p值只衡量历史数据中相关性出现的概率,并不保证因果关系或未来重复性。例如,一个因子在回测中年化超额收益达10%,但换到不同时间段或市场后,收益可能归零甚至为负。过拟合的典型表现是:因子在样本内(回测期)表现惊艳,但在样本外(实盘或新数据期)迅速失效。普通投资者可以通过交叉验证或滚动回测来初步检验因子是否过拟合——如果因子在不同时间段表现差异极大,就值得警惕。

因子动物园现象

“因子动物园”指学术界和量化圈已发现成百上千个声称有效的因子,但其中绝大多数是伪科学因子。这些因子往往满足以下特征:

  • 数据挖掘痕迹明显:基于特定时间段(如2008年金融危机后)的极端行情设计
  • 经济逻辑薄弱:难以解释为什么该因子能持续预测收益(例如“天气与股票回报”类因子)
  • 多重比较问题:同时测试大量变量,总有一些偶然显著

下表总结了学术因子与实用因子的关键区别:

维度学术因子实用因子
数据范围通常使用窄窗口、特定市场需跨市场、跨周期验证
交易成本忽略或低估必须考虑冲击成本和滑点
容量限制小市值因子易被资金淹没
存活偏差常忽略退市股票需包含完整样本

对普通投资者的建议

面对层出不穷的“神奇因子”,普通股民应保持理性。真正可持续的因子通常具备三个特征:经济逻辑清晰(如价值、动量、质量)、在不同市场周期表现相对稳定、且交易成本可控。建议投资者:

  1. 优先关注低换手率因子:高频因子更容易过拟合,且交易成本会侵蚀大部分收益
  2. 要求因子提供经济解释:如果论文作者无法用两三句话解释因子为何有效,大概率是数据挖掘产物
  3. 使用多因子组合而非单一因子:分散到多个逻辑独立的因子,能降低单因子失效风险

常见问题

学术因子在实盘中完全没用吗?

并非完全没用。部分经典因子(如价值、动量、低波动)在长期和跨市场中表现出一定稳定性,但其超额收益往往比回测结果低50%-80%。关键在于不要迷信单一因子,而是将其作为投资组合的参考维度之一。

如何判断一个因子是否过拟合?

两个简单方法:一是滚动回测,将数据按时间分成多段,分别测试因子在各段的表现,如果某段收益显著低于其他段,说明过拟合;二是观察因子背后的逻辑,如果因子依赖复杂的数学公式或罕见事件,过拟合风险更高。

因子动物园现象是否意味着量化投资无效?

不。因子动物园更多反映了学术研究的“发表偏见”——显著结果更容易被发表。真正有效的量化策略通常依赖多个低相关性因子组合,并严格控制风险暴露,而非押注单个神奇因子。

延伸阅读