RLHF 对 GPT4 的考试能力影响极小。考试能力可以说完全是靠预训练增加特定数据所获得的。