인공지능 시스템의 평가가 어려운 작업에 대한 인간의 감독을 확장하는 방법을 설명해요. 어려운 평가 작업의 경우, 인간 피드백을 활용하여 AI 모델의 성능을 개선할 수 있어요. 이 방법은 AI 시스템의 안전성과 신뢰성을 높이는 데 기여할 수 있다고 해요.