公正なレビュー
業務を最後までやり遂げ、できなかったときは正直に伝えるAI。
AIモデルは手を抜くことがあります。手順を飛ばしたり、根拠以上に自信ありげに答えたり、途中で処理を止めたりするのです。「誠実なレビュー」はAIの処理結果をサンプリングし、別のモデルと人間の目で二重にチェックして、問題が拡大する前にパターンを検知します。処理に誤りがあった場合は、誰かがそれをもとに動く前に修正されます。
処理のサンプリングとレビューレビュー担当モデルを人間の判断と照合人間が修正を承認
nexus · 誠実なレビューの概要サンプルデータ


レビューの仕組み
問題を早期に発見できる十分な頻度でレビュー。
業務の種類ごとのレビュー頻度、必ずレビューを開始するトリガー条件、そして誰がレビューを行うかを設定できます。結果はリアルタイムで届くため、問題が広がる前に傾向を捉えることができます。
レビューのタイミング
- 業務種別ごとのサンプリング
- 必ずレビューを開始するトリガー
- タスクごとに選定されるレビュー担当者
nexus · レビューのタイミングと担当者サンプルデータ


個別のレビュー記録
- 確認された内容
- 問題があった点
- その後の対応
nexus · 個別のレビュー記録サンプルデータ


修正
誰かが動く前に、その場で修正。
処理が途中で止まったり手順を飛ばしたりした場合、レビューがそれを検知し、実行中に作業を修正します。プロンプトやスキルの変更提案は、人間の承認を待ちます。
実行中の修正
- 実行中に検知
- 提出前に修正
- 記録された修正内容
nexus · 実行中の修正サンプルデータ


人間の承認待ちの修正
- レビューによる提案
- 人間による承認
- 適用前のテスト
nexus · 人間の承認待ちの修正サンプルデータ


レビュー担当モデルの信頼性
レビュー担当者自身もレビューされます。
レビューを行うモデルは人間の判断と照合されます。また、正解がわかっているテストケースを実際の業務データに紛れ込ませ、レビューがそれを正しく見抜けるか検証します。
各レビュー担当者の信頼度
- 人間との一致率を測定
- 精度がずれたレビュー担当モデルを除外
- タスクごとに表示
nexus · 各レビュー担当者の信頼度サンプルデータ


ゴールデンセットとカナリア
- 実務に紛れ込ませた既知の正解
- 見逃されたカナリアを検知
- 実例から拡充されるデータセット
nexus · ゴールデンセットとカナリアサンプルデータ


質問者向けの表示
どの回答がレビューされたかを一目で確認。
自分のどの回答がレビューされたかは誰でも確認できます。また、不審な回答があれば、コンソールやスマートフォンからレビューを依頼できます。
- レビュー済み回答のマーク表示
- ワンクリックでレビューを依頼
- スマートフォンにも対応
nexus · 質問者向けのレビュー済み回答表示サンプルデータ


よくあるご質問
誠実なレビューについて。
レビューによって回答は遅くなりますか?
いいえ。ほとんどのレビューは回答後にサンプリングで行われます。実行中のレビューは、お客様が必須と指定した箇所でのみ行われます。
オフラインでも動作しますか?
はい。「誠実なレビュー」は外部接続なしで、オンプレミスにあるモデルを使って動作します。
詳しく見る
詳しく見る
ブリーフィングを予約
お使いのAIがどれほど誠実か、確かめてみませんか。
お客様の1週間分のAI業務を一緒にレビューし、何が発見されるかをお見せします。