独立開発者 Yetone の Alma の通過率とコストは Claude Code よりも優れています。

独立開発者 Yetone が主導開発したローカル AI エージェント Alma は、AI エージェント基盤企業 Runta が実施した最新の横断的評価において、タスク成功率と成功コストの両方で第三位にランクインし、Claude Code や OpenCode などのツールを上回りました。現在のランキングスナップショットによると、Alma のタスク成功率は 72.7% で、Codex CLI の 77.9% と Pi の 72.8% に次ぎ、Claude Code は 70.0% です。

Alma は、成功したタスクごとに平均約 0.80 ドルのコストがかかり、Claude Code は 0.94 ドルで、コストは約 16% 低いです。今回の FrontierHarness v1.1 は、同一の大規模モデルが異なるエージェント実行フレームワークでのパフォーマンスを比較し、21 組のハーネス設定、5 種の大規模モデル、62 件のタスクをカバーし、各タスクを 4 回繰り返し、26,040 回の実行を計画しており、前回の 72 倍の規模です。すべてのツールは統一されたクラウド環境で実行され、タスクの成功率、トークンコスト、実行速度を比較します。

Alma はローカル実行と長期記憶を主打ちし、コードの読み取りと修正、ターミナルコマンドの実行、ウェブ検索を行い、Skills と MCP をサポートし、基盤モデルの切り替えも可能です。Alma は最近 Herdr を統合し、Claude Code、Codex、Pi などのプログラミングエージェントは引き続き Herdr 内で実行され、Alma によって同一のチャットインターフェースで実行プロセスを確認し、質問に回答し、操作を承認することができます。ユーザーは iPhone を通じてコンピュータ上の複数のエージェントをリモート管理することも可能です。現在、評価はまだ終了しておらず、ランキングは変動する可能性があり、参測モデルは GLM、DeepSeek、Kimi、Muse などのオープンソースモデルに限られ、GPT や Claude シリーズのクローズドソースモデルはカバーされていません。