30秒でわかる今回の更新
Champion確率モデルを決定するための判定基盤を整えました。
候補をEvidenceに結び付けたうえで、採用・不採用・保留を判定し、条件を満たした場合には単一のChampionを選択できます。判断が曖昧な場合は、無理に選ばず止める設計です。
8件の確認対象はすべて判定済みで、未解決はありません。
なぜ必要だったのか
モデル候補を増やすだけでは、最終的なAIは決まりません。
重要なのは、最終評価へ持っていくモデルを、後から同じ根拠をたどれる形で固定することです。
今回、その判断をEvidenceと結び付け、採用・不採用・保留を明示できるようにしました。
何が変わったか
これまでの比較結果を眺めて人間が感覚的に選ぶのではなく、判断基準に沿って候補を分類し、単一のChampionを選ぶ流れを正式化しました。
また、判断が曖昧な場合には決定を止めるため、無理にChampionを作らない構造になっています。
現在の状態
Championモデル選択に必要な確認対象8件はすべてVERIFIEDで、未解決はありません。
ただし、この工程で性能や収益性そのものを証明したわけではありません。今回確定したのは、最終評価へ持っていくモデルを選ぶ仕組みです。
次は、これまでモデル選択に使っていないFinal Holdoutを使った最終認証へ進みます。