方法論 · AI MEDIAZ REPORT
AI二重審査とは何か
決定論的評価と独立AI評価者2名を組み合わせたv1.2-AI採点方式を説明します。
70点の決定論的評価
採点は、表の項目数、対象条件、引用、語数、正答など機械的に確認できる部分を先に判定し、その後に文章の妥当性を評価します。
10点の判断評価を二重化
判断を伴う項目は製品名を伏せた2つのAI評価で独立採点しました。評価者同士の点差が2点を超えた場合だけ、第三のAIが裁定する設計です。
点差が2点を超えた場合
今回の9回答ではA・Bの差がすべて0〜1点に収まり、裁定者Cは使われませんでした。内部値は全精度で保持し、公開値だけ小数1桁に丸めています。
人手審査ではないことの明示
人間の専門家による査読ではありません。評価プロンプト、基準、完全回答、実行条件を残すことで、判断過程を後から検証できるようにしています。
次に読むChatGPTの実測レビュー →