Clef Omni

Clef Omniは、Cloudflareが公開した判断専用AIのClef系列のうち、文章だけでなく写真、音声、動画までまとめて読むモデルで、文章を書く代わりに、はい・いいえ、選択肢、スコアを確率とともに返します。アリババのQwenの多様な形式を扱うモデルをもとに学習し直しており、全体は大きいものの一度に一部だけを使う仕組みなので速く、誰でもダウンロードして自分で動かせるようApacheライセンスで公開されています。会社は短い動画を見て一度に判断を下す使い道を打ち出し、いくつかの公開テストの成績も示しています。私たちのリアルタイムのゲームのテストでは応答が速く、もぐらたたきやヘビのように瞬時の判断が大事なゲームで測ったモデルの中でも上位でしたが、選択肢の多いテトリスでは弱く、韓国語・日本語の判断テストの正答率はClefよりやや低めでした。会社自身も一部のテストでは文章専用のClefより点数が低いと認めており、自分で動かすには大きなグラフィックメモリが必要で、文章を書けないため書き起こしや説明文の作成はできません。