AI アラインメント
AI システムが人間の価値観と意図した目標に沿って振る舞うことを目指す分野。
実務では RLHF、レッドチーミング、ガードレール、拒否学習などの技術を含み、モデルを有用・誠実・無害に保つ。自律エージェントが現実世界で行動するほど重要性が増す。
AI システムが人間の価値観と意図した目標に沿って振る舞うことを目指す分野。
実務では RLHF、レッドチーミング、ガードレール、拒否学習などの技術を含み、モデルを有用・誠実・無害に保つ。自律エージェントが現実世界で行動するほど重要性が増す。