multi-turn

複数回のやり取りがある。会話が続く

2本の論文題名に登場

定義

一問一答で終わらず、やり取りが複数回続く対話設定。過去の発言との一貫性、途中で変わる指示への追従、長い履歴で何を保持するかが評価対象になる。single-turn で高得点でも、履歴が伸びると前提を取り違えたりユーザーの誤りに同調したりして崩れるモデルは多い。

1問1答でない設定