根據(jù)金融報(bào)道，OpenAI表示，它訓(xùn)練了一種基于GPT-4的模型，叫做CriticGPT，用于捕捉ChatGPT代碼輸出中的錯(cuò)誤。在我們的RLHF中，類似CriticGPT的模型開始集成，為OpenAI的培訓(xùn)者提供明確的人工智能幫助。該計(jì)劃進(jìn)一步擴(kuò)大RLHF在GPT-4中的應(yīng)用規(guī)模，并將其付諸實(shí)踐。