ニュース

Strata 自律ループ:RTX 3060 対 Mac Studio M3、最初の結果

1つのモデル(Qwen3.8-Flash-Next IQ3_S)、同じファイル、同じ Strata バージョンを、大きく異なる2つの構成で実行。直近12時間のデータです。

構成

実験の構成

測定項目

速度(直近12時間)

指標RTX 3060Mac Studio M3
ログレコード33924012
固有のタスク繰り返し23872497
タスクあたり平均出力(トークン)235228
平均タスク時間(秒)8.44.3
総合生成速度(tok/s)2853.4
生成速度の中央値(tok/s)1945
タスク IDRTX 3060, tok/sMac Studio M3, tok/s
A-me-00-04469
D-ea-00-0518
F-ha-01-01845
F-ha-02-01939
G-me-04916
H-ha-04-02048
J-ha-01-04467
K-ha-04-0932

総合生成速度は Mac Studio が約1.9倍高い。実験用 PC 上の素のモデルは約60 tok/s。Hermes の生成は速いが負荷が異なるため、直接比較は誤解を招く。

速度:全体とタスク別

回答品質:v1.8 と v1.9

指標RTX 3060 v1.8Mac Studio v1.8RTX 3060 v1.9Mac Studio v1.9
平均スコア0.8820.8760.9380.944
完璧な回答(%)68.965.279.677.9
フォーマット準拠(%)89.292.097.799.8
差 Mac − RTX−0.006+0.006

品質はほぼ同等で、速度では Mac が優位。v1.8 から v1.9 で平均スコアは RTX 3060 で6.3%、Mac Studio で7.8%向上し、完璧な回答の割合も上昇した。カテゴリ別の差は分析中。

回答品質、v1.8 と v1.9
v1.8 から v1.9 への変化

エージェントの挙動

プロンプトでの指示なしに、エージェントは改善のトークンコストを見積もり始め、一部のバージョンでは不要なトークン消費を減らすようプロセスを最適化した。

次の段階

収集済み:13,000回の実行、16,000ファイル、1,000ログファイル。この実験結果をより深く分析するため、分析システムのデモを構築中。

ビジネス概要 · すべてのニュース