比推消息，OpenAI宣布训练了一个基于GPT-4的模型，名为CriticGPT，用于捕获ChatGPT代码输出中的错误。

OpenAI表示开始将类似于CriticGPT的模型集成到RLHF中，为其培训师提供明确的人工智能帮助。