対話AIから判断AIへ

スポンサーリンク
スポンサーリンク

いつもブログを読んでいただきありがとうございます!

今週は、文章を書かないAI「jev」について記載させていただきました。

入れないと思っていたら、登録するとWaiting Listに入るようで、利用できるようになりました。

Home - TypeSafe AI
TypeSafe AI is an AI lab building machine-native intelligence infrastructure for automation, designed to make decisions ...

利用するには、クレジットカード登録がありますのでご注意ください!

使ってみると、確かに判断するだけのAIで高速ということがわかります。
Playgroundでは、ホットドッグか?サンドイッチか?を判定することができるようです。

非常に軽快に動作すると感じました。

もちろん対話のAIは必要です。しかし、対話AIに至るまでにいくつもの判断AIが必要となり、ハーネスエンジニアリングを行う際は、判断を安価で高速にすることで、さらにAIの需要が増えるという、ジェボンズのパラドックスを狙っているのだと思います。

まだまだ、新しい考え方のAIが出てくるのは正直驚きましたが、判断AIも活用して行きましょう!

スポンサーリンク

「対話」から「判断」へ:System 2からSystem 1への移行

従来のLLM(GPT-4やClaudeなど)は、入力されたプロンプトに対して1文字(トークン)ずつ次の確率を予測しながら文章を生成します。これは人間の脳で言えば、論理的に思考し文章を組み立てる「遅い思考(System 2)」に相当します。

一方、Jevが目指したのは「直感的に一瞬で判断を下す(System 1)」ことです。

圧倒的スピードと3つの「機械ネイティブな型」

従来のLLMが文章を逐次生成するのに対し、Jevは「並列評価(Parallel Evaluation)」を採用しています。

1回の推論パスで全ての候補確率を並列に計算し、判定を瞬時に完了させるため、以下の圧倒的なスペックを実現しています。

  • レイテンシ: 従来の3〜329秒から、70〜500ミリ秒へ短縮(最大193.6倍高速)

  • コスト: 100万トークンあたり約$0.042(最大444.6倍低コスト)

  • 出力トークン課金: 完全無料

Jevが提供する3つの基本型

  1. Choice: 定義されたセット(最大255個)から1つを選択。確率分布と確信度を伴う。

  2. Score: 順序付けられた尺度(0.0〜10.0など)での連続的なスコア評価。

  3. Noul: Yes/Noの真偽確率(0〜1)。確率値そのものが返り値となり、プログラムの閾値判定にそのまま利用可能。

RLCD(確率の校正)による信頼性の担保

LLMでよくある「自信満々に間違える」現象を防ぐため、JevではRLCD(確率の校正)が施されています。AIが「確信度0.9」と出力した場合、実際の正答率が統計的に90%となるよう数学的に校正されているため、開発者はプログラムの閾値として安心して組み込むことができます。

「Agent OS」のスマートなif文

今後のAIシステム開発の主役は、1つの巨大なLLMにすべてを任せる構造から、周辺の制御レイヤーを整える「ハーネスエンジニアリング(Harness Engineering)」へとシフトします。

Jevが担う4つの重要コンポーネント

  • Context Compaction(文脈圧縮): 膨大な会話履歴から、保持すべき「状態」と破棄すべき「ゴミ」をミリ秒で取捨選択。

  • Tool Router(ツールルーティング): 数百個あるツール候補から、Jevが高速に数個まで絞り込み、LLMのコンテキスト負荷を削減。

  • Safety Gate / Guardrails(安全ゲート): ファイル操作やシェルコマンド実行の直前に、リスク判定(Noul型)をミリ秒で判定。

  • Agent Oversight(自律監視): エージェントの実行ログを監視し、ループや異常を検知した際に人間へ即座にエスカレーション。

「ハルシネーションゼロ」の数学的真意

Jevは定義されたスキーマ(型)の外側にある値をトークン予測できない構造的特性を持っています。そのため、形式的なハルシネーション(想定外のキーや壊れたJSON構文)は数学的にゼロです。

4. ジェボンズのパラドックスが導く新境地

経済学における「ジェボンズのパラドックス」とは、「資源利用の効率化は消費量を減らすのではなく、むしろ爆発的に増大させる」という法則です。

知能のコストが1/400になり、応答速度が100倍になればどうなるでしょうか?
これまで「コストがかかる」「レスポンスが遅すぎる」という理由で断念していた、ソフトウェア内部の「あらゆる細かな条件分岐(曖昧なif文)」にAIの判断が組み込まれるようになります。

AIは「画面の向こうの特別な対話相手」から、ソフトウェアを構成する「最も安価で便利な電子部品」へと昇華したのです。

まとめ

これまで、LLMの進化に驚かされていたのですが、jevが話題となり、判断のAIの可能性を理解する機会となりました。

現在LLMに無理やり文章で指示している「小さな判断」や、コードで複雑に書き殴っている「曖昧なルール」がある場合は、

Jevのような「判断特化型モデル」に任せることこそが、次世代の高速・低コスト・安全なAIエージェント構築の第一歩となります。

1つの対話AI(LLM)に対して、いくつもの判断AIが必要となるというのも納得です。jevを使ったばかりではありますが、判断AIの持つ可能性を十分に感じることができました。対話AI(LLM)だけでなく、判断のAIも活用して行きましょう!

コメント

タイトルとURLをコピーしました