開発元のAIモデル

数値表

モデル・推論設定	解決率	費用／試行（USD）	時間（分）

CLM-v0.1-8B

Qwen3-8Bの凍結エンコーダーと学習したヘッドを用い、候補のスコアを返す非生成モデルです。 Qwen3-8B系のエンコーダーと2つの小さな投影ヘッドで構成されます。正確な総パラメータ数は未公表です。モデルカードはApache 2.0を記載。評価はCLM_v0.1-8B.pt。API単価、最大コンテキスト長、公開日は未確認です。

Contrastive-LM

Terminal-Bench 4.0

Terminal-Benchは、AIエージェントがターミナルを使って作業を完了する能力を測るベンチマークです。4.0の解決率を0〜100%で示し、数値が高いほど多くの作業を完了できたことを表します。

モデル・実行構成	%
CLM-v0.1-8Bdefault	この評価の公表値は未収録

Terminal-Bench 4.0：実行コスト

Terminal-Bench 4.0で報告された、330試行の評価にかかった合計費用です。単位は米ドル（USD）で、数値が小さいほど低コストです。APIのトークン単価や月額料金とは異なります。

モデル・実行構成	330試行の合計・USD
CLM-v0.1-8Bdefault	この評価の公表値は未収録

TB4 平均試行時間

Terminal-Bench 4.0で、1試行を終えるまでにかかった平均時間です。単位は秒で、数値が小さいほど短時間で試行を終えています。応答を返し始めるまでの待ち時間とは異なります。

モデル・実行構成	秒
CLM-v0.1-8Bdefault	この評価の公表値は未収録

ECI総合スコア

epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。 / epoch.ai / Epoch AI, Epoch Capabilities Index / 取得日 2026-09-28 / CC BY 4.0 / 完成済みGeneral ECIを抽出。点数は変更せず表示時に丸める。標準API料金との組合せはDotMargin。

Epoch AIが公開するGeneral ECIです。高いほど総合性能が高いことを示します。正答率や100点満点の点数ではありません。同じ取得版の値で比較し、未収録モデルを別モデルの値で代用しません。

モデル・実行構成	ECI	参考API料金（USD）入力10,000・出力1,000トークン
CLM-v0.1-8Bdefault	この評価の公表値は未収録	未収録対応する標準入力・出力料金は未収録

SMS迷惑判定：正答率

正解ラベルと一致した件数を500件で割った割合です。SMSは2分類、Banking77は77分類です。汎用知識やコード生成の能力は測っていません。

モデル・実行構成	%
CLM-v0.1-8Bdefault	この評価の公表値は未収録

SMS迷惑判定：処理時間 p50

500要求の処理時間を小さい順に並べた中央値です。ネットワーク・提供環境・出力形式を含みます。最初の応答までの時間（TTFT）ではありません。

モデル・実行構成	ms
CLM-v0.1-8Bdefault	この評価の公表値は未収録

SMS迷惑判定：処理時間 p95

500要求を昇順に並べ、floor(0.95 × (n − 1))番目を採った公開実装のp95です。遅い側の処理時間を示します。

モデル・実行構成	ms
CLM-v0.1-8Bdefault	この評価の公表値は未収録

SMS迷惑判定：1,000件の費用

評価時の費用合計を件数で割り、1,000倍した金額です。APIの100万トークン単価や自社運用の費用とは異なります。

モデル・実行構成	1,000件あたり・USD
CLM-v0.1-8Bdefault	この評価の公表値は未収録

Banking77問い合わせ分類：正答率

正解ラベルと一致した件数を500件で割った割合です。SMSは2分類、Banking77は77分類です。汎用知識やコード生成の能力は測っていません。

モデル・実行構成	%
CLM-v0.1-8Bdefault	この評価の公表値は未収録

Banking77問い合わせ分類：処理時間 p50

500要求の処理時間を小さい順に並べた中央値です。ネットワーク・提供環境・出力形式を含みます。最初の応答までの時間（TTFT）ではありません。

モデル・実行構成	ms
CLM-v0.1-8Bdefault	この評価の公表値は未収録

Banking77問い合わせ分類：処理時間 p95

500要求を昇順に並べ、floor(0.95 × (n − 1))番目を採った公開実装のp95です。遅い側の処理時間を示します。

モデル・実行構成	ms
CLM-v0.1-8Bdefault	この評価の公表値は未収録

Banking77問い合わせ分類：1,000件の費用

評価時の費用合計を件数で割り、1,000倍した金額です。APIの100万トークン単価や自社運用の費用とは異なります。

モデル・実行構成	1,000件あたり・USD
CLM-v0.1-8Bdefault	この評価の公表値は未収録

T-Rex：60秒生存率

5シードのうち60秒間生存した割合です。物理プランナーとshieldの介入を含む結果で、モデル単体の正確さや他用途への性能を示しません。

モデル・実行構成	%
CLM-v0.1-8Bdefault	100.0

T-Rex：処理時間 p50の中央値

APIのJevとローカルRTX 4090のCLMは実行条件が異なります。通信・実行環境を含むシステムの時間で、モデル単体の速度比較には使えません。

モデル・実行構成	ms
CLM-v0.1-8Bdefault	16.5

AutomationBench 1.0.6：スコア

OpenAIが自社モデルを研究環境またはAPIで評価したAutomationBench 1.0.6のスコアです。全目標を達成したタスクの割合とは異なります。

モデル・実行構成	%
CLM-v0.1-8Bdefault	この評価の公表値は未収録

AutomationBench 1.0.6：1タスクの費用

OpenAIがAutomationBench 1.0.6で公表した1タスクあたりの費用です。APIの100万トークン単価とは異なります。

モデル・実行構成	1タスクあたり・USD
CLM-v0.1-8Bdefault	この評価の公表値は未収録

API料金

実行構成	種別・単価	適用条件・出典