AI选股一致性实验:同一数据跑三次,结果相同吗?

AI选股一致性实验:同一数据跑三次,结果相同吗?

固定数据 + 固定框架,让 AI 分析三次,结果会一致吗?


实验设计

数据:5月8日收盘行情快照(指数、自选、候选标的)

标的:北方导航(600435)、洛阳钼业(603993)、中航沈飞(600760)

方法:同一任务跑三次,取多数结果

确定性算法结果(3/3一致)

三次均选 洛阳钼业 603993(得分 11),完全一致。

LLM 真实推理结果

  • Run1 → 北方导航
  • Run2 → 北方导航
  • Run3 → 洛阳钼业

分歧:2:1,北方导航占优。

结论

确定性算法(固定权重评分)结果高度一致,说明数据 + 固定规则 = 可重复。

LLM 推理在边界模糊时存在随机性,同一问题多次询问取多数结果更可靠。