この記事は、LLMに、この問い合わせは返金の対象か、このアラートは無視してよいか、のような判定をさせている開発者に向けたものだ。
多くの場合、LLMは文章で答える。だから、返ってきた文章から判定を読み取る処理を、自分で用意することになる。TypeSafe AIが2026年9月15日に発表したJevは、その文章を出さず、あらかじめ定義した選択肢それぞれの確率を返すモデルだと、同社は説明している。提供は早期アクセス(ウェイトリスト)で、当編集部はJevを試せていない。TypeSafe AIの発表ページの本文も、当編集部は確認できていない。以下に書く説明と数字は、同社と報道のものだ。
何が発表されたか(同社の説明)
まず、誰が何を言っているのかを分ける。要するに、同社の言い分と、報道の言い分を、別々の帳簿に付けて見るということだ。
同社の説明
- 発表したのはTypeSafe AI。2026年9月15日に発表した(同社の発表ページ)
- 文章を出さず、あらかじめ定義した選択肢それぞれの確率を返す。確率つきの判断を返すモデルとして説明している
- 応答は70〜500ミリ秒。同社が米国西海岸のサーバーから測った社内評価だ
- 出力トークンは無料
報道
TechCrunchは9月18日に、Jevが開発者の間で関心を集めていると報じた。同じ報道は、提供が早期アクセスであることと、性能の主張が第三者に検証されていないことを指摘している。当編集部は、TechCrunchの記事の本文も確認できていない。
文章を書かないとは何か
ここで迷いやすいのが、文章を出さないモデルが、具体的に何を返すのか、という点だ。要するに、記述式の答案と、選択式の答案の違いだ。ふつうのLLMに判定をさせると、記述式で答えが返ってくる。判定は、その文章の中に埋まっている。Jevは、同社の説明によれば、選択式で、しかも選択肢ごとに確率を添えて返す。
当編集部の例示(Jevの実際の入出力ではない)
以下は、当編集部が考えた説明用の例だ。Jevの実際の入力や出力の形式ではなく、同社が示した用途でもない。
問い合わせの文面を渡して、選択肢を、返金の対象、対象外、人の確認が必要、の3つに決めておくとする。文章の代わりに、この3つそれぞれの確率が返ってくる。たとえば、返金の対象だけが高い確率で、残り2つが低い確率、といった形だ。
確率が返ってくると、その先の線引きを、使う側が決められる。確率が十分に高ければ自動で処理し、そうでなければ人に回す、という具合だ。この線引きがしきい値で、いくつに置くかは、使う側の設計になる。同社の説明どおりなら、判定の受け取り方を、文章の読み取りから、数字の比較に変えられる。
ただし、返ってきた確率が、実際の正解率とどれだけ合っているかは、別の話だ。0.9と返ってきても、9割当たるとは限らない。合っているかどうかは、使う側が自分のデータで測ってみないと分からない。同社は確率つきの判断を返すと説明しているが、その確率が実際の正解率と合っているかを示す第三者の検証は、当編集部は確認できていない。
速さと料金は、誰が示した数字か
応答が70〜500ミリ秒という数字は、同社が米国西海岸のサーバーから測った社内評価だ。要するに、メーカーが自社のテストコースで測った燃費のようなものだ。測った場所と測り方が決まっている数字なので、自分の環境で同じ値になるかは分からない。サーバーからの距離が違えば、通信にかかる時間も変わる。測定条件の詳しい内容は、当編集部は確認できていない。
出力トークンが無料という点も、同社の説明だ。料金の全体像は、当編集部は確認できていない。
TechCrunchは、性能の主張が第三者に検証されていないと指摘している。速さの数字を第三者が測ったという情報も、当編集部は確認できていない。
使える場面と、まだ言えないこと
使える場面の例(当編集部の例示)
冒頭の2つを、もう一度挙げる。問い合わせが返金の対象か。アラートを無視してよいか。どちらも、選択肢があらかじめ決まっていて、答えが文章である必要がない。要するに、受付で、どの窓口に回すかを決める係の仕事だ。こうした判定は、選択肢ごとの確率を返すモデルと相性がよさそうに見える。ただし、これは当編集部の例示で、同社がこれらを用途として挙げたわけではない。Jevで実際にうまくいくかは、試せていないので言えない。
まだ言えないこと
- 判断の精度: 第三者に検証されたと確認できていない。TechCrunchは、性能の主張が第三者に検証されていないと指摘している
- 確率の合い具合: 返ってくる確率が、実際の正解率と合っているか
- 速さ: 自分の環境で、70〜500ミリ秒になるか
- 料金の全体像: 出力トークンが無料という以外は、当編集部は確認できていない
- 使い勝手: 早期アクセス(ウェイトリスト)で、当編集部は試せていない
まとめ
冒頭の問いに、いまの材料で答えられる範囲は次のとおりだ。同社の説明どおりなら、置き換えの候補に入るのは、文章を書かせる呼び出しではなく、判定だけが欲しい呼び出しだ。置き換えられるかどうかは、精度、確率の合い具合、自分の環境での速さが確かめられるまで、言えない。
- 発表: TypeSafe AIが2026年9月15日に発表。文章を出さず、あらかじめ定義した選択肢それぞれの確率を返すモデルだと、同社は説明している。発表ページの本文は、当編集部は確認できていない
- 数字: 応答70〜500ミリ秒は、同社が米国西海岸のサーバーから測った社内評価。出力トークンは無料と同社は説明している。料金の全体像は確認できていない
- 報道: TechCrunchが9月18日に、開発者の間で関心を集めていると報じた。早期アクセスで、性能の主張は第三者に検証されていないと指摘している。記事の本文は、当編集部は確認できていない
- 当編集部の確認状況: Jevは試せていない。返金の判定などの場面は、当編集部の例示で、同社が挙げた用途ではない