Constitutional AI：Constitutional AI: Harmlessness from AI Feedback

arXiv · Anthropic

用一组书面原则让模型自我批评修改，再用 AI 反馈代替人类偏好标注训练无害性。