同じ質問なのに答えが変わるのはなぜか|ばらつきと固定検査【OpenAI実務力 第8回】

同じ頼み方でも答えが毎回少しずつ変わる「ばらつき」を、架空の島の朝市のお知らせの例で見ていきます。揺れてよい所(見出しや言い回し)と揺れてはいけない所(日にち・時刻・場所の名前・値段)を分け、揺れてはいけない所は毎回同じやり方で照らす固定検査に、言い方は人手レビューに割り当てます。頼み方を変えたら、前と後を同じ検査で比べます。

同じ頼み方でも答えが毎回少しずつ変わる「ばらつき」を、架空の島の朝市のお知らせの例で見ていきます。揺れてよい所(見出しや言い回し)と揺れてはいけない所(日にち・時刻・場所の名前・値段)を分け、揺れてはいけない所は毎回同じやり方で照らす固定検査に、言い方は人手レビューに割り当てます。頼み方を変えたら、前と後を同じ検査で比べます。