测试时记忆演化能否胜过测试时训练,用于科学发现?
研究者提出测试时记忆演化(TTME),一种即插即用的适应方法:它通过提炼经验不断更新外部记忆,而不是更新模型权重。在评估中,TTME 在全部五项数学发现任务上都胜过测试时训练,同时将计算量降低 82.8%-84.6%、运行时间缩短 47.7%-58.4%。它之所以重要,是因为它为科学发现中的模型适应提供了一条便宜得多的路径,无需重新训练权重。
报道来源
- Rohan Paul2026-10-29 05:15
研究者提出测试时记忆演化(TTME),一种即插即用的适应方法:它通过提炼经验不断更新外部记忆,而不是更新模型权重。在评估中,TTME 在全部五项数学发现任务上都胜过测试时训练,同时将计算量降低 82.8%-84.6%、运行时间缩短 47.7%-58.4%。它之所以重要,是因为它为科学发现中的模型适应提供了一条便宜得多的路径,无需重新训练权重。