`

机器因子库相对人工因子库的增量

创建于 更新于

摘要

本文利用遗传规划算法挖掘机器因子库,并采用随机森林模型对机器因子库与传统人工因子库进行组合层面比较。结果显示,在技术类因子方面,机器因子叠加人工因子后多空组合收益和稳定稍有提升,但不显著;财务类机器因子整体表现不及传统因子,差异同样不明显。低频层面,机器因子挖掘的增量有限,组合收益提升仍需依赖因子择时 [page::0][page::3][page::13][page::20]

速读内容


机器学习在Alpha模型的应用与基线构建 [page::3]


  • 介绍Alpha因子库构建及Alpha预测的传统与机器学习方法。

- 机器学习采用遗传规划挖掘大量因子,随机森林做非线性收益预测,有助提升拟合和抗共线性能力。

技术类因子挖掘方案与参数设置 [page::5][page::7]


  • 基于修改版gplearn遗传规划包,利用日频量价数据挖掘适应度大于5%的技术因子。

- 种群规模100,进化3代,半年更新一次,得到100个有效因子;采用21个节点函数和7个量价叶子变量。

技术类因子挖掘过程进展与因子示例 [page::8][page::9]


  • 演变公式平均适应度提升,表达式简化。

- 2020年6月示例因子长度平均8层,表达式相对复杂,适应度最高约-7.61%。

遗传规划挖掘技术因子相关性及对比 [page::10]


  • 挖掘出的技术类机器因子与人工技术因子相关性低,平均低于20%,说明增量信息较大。


技术类因子组合回测及效果对比 [page::12][page::13]



| 指标 | 原有技术因子 | 遗传算法因子 | 叠加因子库 | 正交后的遗传因子 |
|------------------|--------------|--------------|------------|------------------|
| IC-spearman | 10.06% | 10.11% | 10.41% | 7.57% |
| ICIR | 1.91 | 2.13 | 2.19 | 1.35 |
| 多空组合月均收益 | 2.79% | 2.97% | 2.86% | 2.39% |
| 年化夏普比率 | 1.32 | 1.50 | 1.48 | 1.02 |
| 最大回撤 | -22.34% | -18.88% | -17.60% | -30.09% |
  • 遗传算法因子提升技术因子组合表现,但双边T检验表明提升在统计层面不显著。


财务类因子挖掘方法与数据说明 [page::14][page::15]

  • 基于月度财报数据挖掘,叶变量73个,采用15种函数(含增长率计算),保证因子逻辑合理。

- 种群规模为1000,进化三代,每半年更新,阈值适应度为2%。

财务类因子挖掘绩效及示例 [page::17]


  • 2020年财务因子平均深度仅1层,表达式相较简单。

- 因子结构多以除法、增长率为主,体现财务数据特征。

财务类机器因子与传统因子相关性及回测结果 [page::18][page::19]



| 指标 | 传统财务因子21个 | 遗传算法因子100个 | 叠加因子库 | 正交后的遗传因子 |
|------------------|------------------|-------------------|------------|------------------|
| IC-spearman | 5.49% | 4.17% | 4.81% | 5.34% |
| IC
IR | 1.10 | 0.96 | 1.14 | 1.13 |
| 多空组合月均收益 | 2.06% | 1.57% | 1.82% | 1.96% |
| 年化夏普比率 | 1.04 | 0.95 | 1.11 | 1.10 |
| 最大回撤 | -20.36% | -24.21% | -18.57% | -27.10% |
  • 财务类机器因子整体表现不如传统因子,但组合差异同样不显著。


结论与风险提示 [page::20][page::21]

  • 机器学习遗传规划挖掘可增加机器因子库并带来一定增益,但低频机器因子对组合的贡献有限。

- 技术类机器因子对提升组合表现贡献较好,财务类则相对弱。
  • 新因子库价值更多体现在因子择时和组合管理上,模型存在失效风险,尤其市场极端情况下 [page::0][page::20][page::21]

深度阅读

机器因子库相对人工因子库的增量 —— 深度分析报告



---

1. 元数据与报告概览


  • 报告标题:《因子选股系列研究 之 七十:机器因子库相对人工因子库的增量》

- 作者及机构:朱剑涛、刘静涵,东方证券研究所,2020年9月11日发布
  • 研究主题:量化选股因子库的扩展,主攻利用机器学习(尤其是遗传规划算法,随机森林模型)挖掘Alpha因子,探索机器因子库对已有人工因子库的增量贡献,特别是在技术类和财务类因子的低频(月频)层面表现。

- 核心论点
- 量化选股因子库已具规模,继续深入因子挖掘的边际效益存疑。
- 机器学习方法可以大规模挖掘众多因子,但增量收益有限。
- 技术因子领域机器因子对传统因子存在轻微提升,但统计上未显著。
- 财务因子挖掘表现逊于传统财务因子,且差异无统计显著性。
- 综合而言,低频因子库增量主要依赖因子择时,挖掘新因子边际效益有限。
  • 风险提示:量化模型存在失效风险,极端市场环境冲击可能影响模型稳定性。


以上为报告的大致框架和核心信息,后续细节分析将依照章节划分展开具体解读[page::0, 1, 20, 21]。

---

2. 深入章节解析



一、机器学习在Alpha模型中的应用(页3)


  • Alpha模型架构:包括两大步骤——Alpha因子库构建(传统逻辑与机器学习方法),和Alpha收益率预测(线性与非线性随机森林方法)。
  • 因子库构建细节

- 传统方法基于理论逻辑严谨的因子(估值、盈利、成长等),因子数有限且易失效。
- 机器学习方法基于数据驱动,通过遗传规划算法等机器自动挖掘生成因子,大批量产出有效但难解释因子。
  • Alpha预测细节

- 传统采用线性模型分类、加权后转化Zscore。
- 机器学习采用随机森林模型,克服多重共线性,支持多因子训练,提高预测精度。
  • 模型创新点

- 使用随机森林完成从多因子库到预期收益的非线性映射。
- 分别处理技术因子与财务因子的历史表现差异。
  • 图表:图1展示模型架构,体现因子挖掘与因子预测的流程,突显机器学习的穿插作用。


总结:该节明确了机器学习在因子挖掘和预测中的具体应用场景、方法优势及潜在缺陷(过拟合风险)[page::3,4]。

二、遗传规划算法介绍(页4)


  • 算法核心

- 模拟生物遗传与进化机制,通过公式树表达选股因子公式,不断变异优化适应度。
- 相较遗传算法(以二进制字符串表征),遗传规划用树形程序结构更适合表达复杂金融因子。
  • 执行流程

- 初始化种群(随机生成公式)。
- 计算适应度(以月均因子收益率)。
- 选择优秀个体进化,重复多代获取更优解。
  • 特征

- 遗传规划具备动态结构和多样进化路径,适合复杂非线性搜索。

本节对遗传规划算法进行了简洁且具操作性的介绍,为后续因子挖掘奠定技术基础[page::4]。

三、技术类因子挖掘测试(页5至13)


  1. 测试数据

- 股票池剔除新股、ST等,样本时间2010.06.30–2020.06.30。
- 预测目标:未来20个交易日收益率。
  1. 因子表达式构建

- 使用二叉树节点表示因子公式。
- 量价数据作为叶变量(7个量价系列)。
- 使用21类节点函数,包括元素运算及截面运算,支持时间序列滚动运算(最多20天窗口)。
  1. 遗传规划参数

- 种群规模100,进化3代,随机种子动态切换。
- 适应度阈值设为5%(IC水平)。
  1. 挖掘过程细节

- 每半年挖掘一次,滚动更新因子库,确保样本外适应性。
- 挖掘公式在代数迭代中长度趋于缩短,适应度提升。
  1. 挖掘结果

- 有效因子多数深度3层,长度8,复杂表达式多与量价波动相关。
- 多个示例公式详列,表现均达到较好月均因子收益率。
  1. 因子相关性分析

- 挖掘出的技术因子和传统技术因子相关度低(表明因子信息独立性较好),平均相关性<20%。
  1. 组合回测及Alpha预测

- 使用随机森林对机器因子、传统因子及合成库进行Alpha收益率预测。
- 构建等权多空组合,衡量IC、ICIR、多空收益率、夏普比、最大回撤等指标。
- 遗传算法因子叠加传统技术因子后,IC由10.06%增至10.41%,多空月均收益从2.79%升至2.86%,夏普略增,最大回撤明显降低(22.34%降至17.6%)。
- 统计检验表明提升不显著(p值均>10%)。

图表
  • 图2-10详细展示了公式树结构、变量函数定义、挖掘流程、因子表现示例、相关性箱线图和组合表现对比分析。


总结:技术类因子机器挖掘带来轻微但不显著的整体提升,机器因子与传统因子互补性较强,但超过成熟因子库的增益有限[page::5–13]。

四、财务类因子挖掘测试(页14至19)


  1. 测试数据

- 剔除新股、ST及银行业和非银行业部分缺失指标股票。
- 时间同上,预测未来20日收益。
  1. 因子表达式构建

- 叶子变量为73个财务报表指标,分资产负债表、利润表、现金流表。
- 因子表达式树叶变量和节点函数包含15类,含同比增长率、复合增长率函数。
- 表示限制尤其设计,因子表达式最外层必须是除法或增长率,保证因子跨个股的可比性。
  1. 遗传规划参数

- 种群规模增大至1000,进化三代。
- 适应度阈值降低至2%。
  1. 挖掘过程与结果

- 类似动态因子库更新,每半年挖掘100个有效因子。
- 因子相对简单,平均深度1层、长度3符号,符合财务数据低频、稳定的特点。
- 挖掘因子与传统财务因子相关性低(<10%)。
  1. 组合回测

- 同样采用随机森林模型进行Alpha预测和多空组合检验。
- 遗传规划因子表现不及传统财务因子,IC、ICIR和月均收益均偏低。
- 叠加传统财务因子仍不及单独传统因子表现。
- 与技术因子情况类似,统计检验显示差异不显著。

图表
  • 图14-21全面展示因子叶变量、节点函数、挖掘流程、因子表现示例、相关性分布和组合表现对比。


总结:财务因子机器挖掘受限于数据特性,复杂度受限,新因子难以超越成熟财务因子库,整体增量有限[page::14–19]。

五、总结(页20)


  • 机器学习应用重点在因子构建和Alpha预测两个层面。

- 遗传规划算法助力大规模机器因子库建设,随机森林实现非线性Alpha预测。
  • 机器因子库动态更新,保证时效性。

- 测试中发现:
- 技术类机器因子可带来轻度提升,但统计上不显著,且增量有限。
- 财务类机器因子表现不及传统因子,且差异不大。
- 低频因子挖掘收益受限,更多收益空间需要辅助因子择时策略。
  • 总体结论:机器学习因子挖掘虽然技术可行,但对已经成熟的人工因子库增益有限,重点仍需放在因子择时与组合优化上。


---

3. 图表深度解读(重点图示)



图1(页3)


  • 展示因子库构建和Alpha预测双阶段流程结构。

- 算法挖掘和投资逻辑并行构成因子库,随机森林替代传统线性模型实现因子到收益的映射。
  • 可视化体现技术创新点。


图6(页7)


  • 挖掘流程图:动态设定随机种子→初始化因子公式群→适应度计算→选择与进化→获得100个有效因子完成挖掘。

- 突出动态更新和半年度周期特点。

图7(页8)


  • 公式世代特征:初代平均适应度低、公式较长,经过几代后适应度提升,公式逐渐简化—适应度最大值也趋于稳定,进化时间递增。

- 表明遗传规划有效优化表达式获得更高预测性能。

图8(页9)


  • 展示了50个最佳技术类机器因子的适应度值、深度、表达式长度

- 平均深度3层,长度约8,公式相对复杂,凸显机器发掘过程的非简单线性组合特征。

图10(页10)


  • 箱线图形式展示机器因子与传统技术因子中三大类(流动性、反转、投机)相关性分布

- 绝大部分相关性集中在20%以下,说明机器因子与传统技术因子信息高度互补,侧面支持使用机器因子增量价值。

图13(页13)


  • 回测效果对比表明机器因子+传统技术因子组合整体表现最佳,IC和ICIR最高,多空组合收益和夏普比也最高,回撤最低

- t检验p值显示差异均不显著,提示机器因子带来的收益改进不稳定。

图17(页16)


  • 财务类因子遗传规划挖掘流程,与技术因子类似,但适应度阈值较低(2%),种群规模更大(1000)。

- 体现财务因子因数据特性不同挖掘策略调整。

图18(页17)


  • 50个最佳财务类机器因子列表,因子结构较简洁,深度仅1-2层,平均长度3

- 简单公式反映财务数据低频、相对稳定的特征,不适合复杂嵌套。

图20(页18)


  • 财务机器因子与传统盈利与成长因子相关性分布,集中低于10%,显示财务机器因子提供的信息确实相对独立。


图21(页19)


  • 财务类因子回测表现:传统财务因子IC达5.49%,机器因子仅4.17%,合成因子表现约4.81%。

- 多空组合收益、夏普均更低,且回撤更大。
  • 统计检验亦指增益不显著,强调机器因子在财务领域优势有限。


---

4. 估值分析


  • 本报告主要为量化因子挖掘及评价研究,无标的具体估值讨论,不涉及DCF、P/E或其他传统估值方法。


---

5. 风险因素评估


  • 量化模型以历史数据训练,未来极端行业或市场环境可能导致模型失效。

- 机器学习因子容易发生过拟合,影响样本外预测准确性。
  • 因子挖掘数据错误或采集缺失,可能影因子表现及预测结果。


报告提醒投资者关注市场波动和量化因子局限性风险[page::0, 21]。

---

6. 审慎视角与细微差别


  • 因子逻辑难解:机器因子由复杂进化过程生成,解释性较差,可能给投资决策带来不确定性。

- 数据过拟合风险突出:尽管采用动态更新和随机森林模型减少过拟合,但完全杜绝困难。
  • 统计意义不足:尽管机器因子对技术类有边际提升,多次统计检验p值均显示不显著,提示实际应用需谨慎评估增益价值。

- 财务因子领域表现逊色:机器学习技术受财务数据低频复杂结构限制,新因子难超传统指标,说明该领域机器学习方法需要更深度开发。
  • 正交化处理可能影响结果:技术因子正交后效果未必减弱,反而有时增强,表明正交方法选择和效果评估复杂,存在潜在分析矛盾。

- 没有纳入因子择时:报告指出组合收益更多依赖因子择时,但未给出具体方案,留有后续研究空间。

总体报告严谨,数据详实,但面对机器学习因子普遍问题及低频环境带来的挑战,结论较为保守,体现研究平衡审慎的态度[page::0, 13, 19, 20]。

---

7. 结论性综合



本报告全面系统地探讨了机器学习技术(遗传规划算法+随机森林模型)在Alpha因子库构建及预测中的应用效果,重点分别考察技术类和财务类机器因子相对于成熟人工因子库的增量价值。
  • 在技术类因子领域,机器学习方法能够挖掘出与传统因子关联度较低的有效月频技术指标,组合层面对多空投资组合的收益率、风险和IC指标均有提升,但相关提升未达到统计显著性。机器因子与传统因子在信息维度上存在较好互补性,叠加使用能带来综合优化效果,且降低了组合的最大回撤风险,提升了组合稳定性。
  • 在财务类因子领域,机器学习因子表现普遍逊于传统财务因子,整体效益较低。机器挖掘的因子结构简单,反映了财务数据的低频稳定性,不适合复杂的高频挖掘方法,导致机器因子难以产生有意义的增量收益。统计检验显示此差异同样不显著。
  • 报告强调低频因子挖掘难以在已经成熟的因子库体系中获得显著边际改进,而因子择时策略成为提升组合表现的重要路径。
  • 技术路线清晰:从数据出发,利用遗传规划等进化策略构建大规模机器因子库,并利用随机森林有效整合多因子变量,实现非线性Alpha预测,规避多重共线性并减少过拟合风险。
  • 报告通过高度细致的因子挖掘过程描述、丰富的因子表达式示例、严谨的统计测试和回测分析,形成了体系完整、信息充实、结果可信的研究体系。


综上,机器学习在因子挖掘的理论和技术层面证明了可行性和潜力,但面对成熟的市场和因子体系,其增量价值受限,尤其是财务类因子领域。投资实务中应理性看待机器因子增量作用,重视因子组合的动态择时及风险管理。

---

关键图表展示链接


  • 图1:Alpha模型框架


  • 图6:技术类因子挖掘过程


  • 图10:遗传规划技术因子与人工技术因子相关性分布


  • 图12:随机森林参数调优


  • 图13:技术类因子回测效果对比

(详见文本表格)
  • 图17:财务类因子挖掘过程


  • 图20:遗传规划财务因子与人工财务因子相关性分布



---

参考文献


  • 东方证券研究所,因子选股系列研究报告第七十篇,2020年9月11日[page::0–22]


---

总结提示



本次分析全面覆盖报告全部章节,合并图表解读,解构算法技术、数据处理、实验设计和关键结果。报告严谨、数据详实,机器学习因子挖掘在技术上成熟,但实际边际贡献有限,具有较高的参考价值和实践指导意义。[page::0–22]

报告