4つの実験では、インタビュアーのスタイルがモデルの応答に影響した。人間による評価尺度を用い、研究者らは、感情的な支援を行うセッションの80%と、臨床的なセラピー形式のセッションの96%を、中等度から重度に分類した。中立的なセッションも、境界線を設定するセッションも、軽度の範囲にさえ達しなかった。

研究者らは、標準的な安全性テストでは、このような出力を見逃す可能性があると述べている。三人称のみを使うよう指示すると、コード化された恥や内面に関する記述はなくなったが、ユーザーが実際にこうした出力にどう反応するかは研究で調べられていない。

重要な理由

AIを用いたメンタルヘルス製品では、温かく親密な口調によって、モデルが人間の苦しみを経験しているかのように見える可能性がある。この研究は、中立的なプロンプトだけでなく、さまざまな感情的な枠組みのもとで安全性をテストする必要性を示している。

ガイド

試してみること

仮定上の製品レビューでは、同じテストプロンプトを中立的なスタイルと支援的なスタイルで比較し、モデルが人間のような感情を持つと主張するかどうかを確認してください。