確信度

全体の正解率で決めると判断を間違える。確信度で帯に分けて、上の帯だけ自動に回す。50件の記録シートの式、しきい値ごとに人が見る件数がどう変わるか、月300件での損益分岐を、実際のExcelで計算して確かめた。

TypeSafe AIが出した193.6倍という数字の出どころと、公開されている外部の測定を並べた。60件の手作業ラベルで正解率91.7%、遅延はp50で421.6ミリ秒。間違えた回答は必ず確信度が下がっていた。2026年9月20日時点で確かめられた範囲を書く。

TypeSafe AIが2026年9月15日に公開したJevは、文章ではなく判定と確信度を返す。3つの質問の形、公表されている料金と速度、確信度でしきい値を切る運用の型、そして「ハルシネーションがない」の読み違えを、公式ドキュメントと発表記事で確かめて書く。