研究问题在于需要高效的强化学习方法来改进或从头开始学习流策略，特别是对于复杂的机器人任务如人形机器人行走。

提出的QF3方法结合了流匹配与批评家的动作梯度，并通过过滤确保其可靠性。它使用流输出的一步预测来选择性地反向传播梯度，基于与重放缓动作的接近程度。

作者报告称，QF3在训练人形机器人行走和运动跟踪策略时比FPO++快10倍。他们还展示了QF3在模拟任务中对预训练操作策略进行微调的能力。