复现

按照代码中给的命令，由于我的网络问题，把async_dispatch设为False，复现之后各个指标好像都达不到论文中的值，是因为async_dispatch的设置吗？

感谢关注，和 async_dispatch 应该无关。我怀疑主要是两点：（1）本身 ChatGPT 给出的结果具有随机性；（2）ChatGPT API 背后 backbone model 也是一直在更新的，可能是目前的 OpenAI 提供的 model 和实验时不一致导致了结果差异。

建议可以试一下其他结果是不是普遍偏低，我稍后也会重跑一次看下目前的指标。