The Laguna MLX Challenge

The Laguna MLX Challenge は、Laguna XS 2.1 の Apple Silicon 上での性能改善を比較・追跡する公開リーダーボードです。ライブスコア、solver 履歴、各提出の注記を確認できます。

MLX Fast とは

The Laguna MLX Challenge は、Apple Silicon 上で Laguna XS 2.1 をより高速にすることに焦点を当てた公開パフォーマンスリーダーボードです。サイトには、現在の最良結果、開始時のベースライン、個々の solver による昇格済み提出のランキング一覧が表示されます。

従来の SaaS 製品のように機能するのではなく、MLX Fast はベンチマーク提出と solver ページを中心に構成されています。訪問者はライブスコアを確認し、decode と prefill のレートを比較し、各公式改善がどのように生み出されたかを説明する記述ノートを読むことができます。

主なサイト機能

ライブ性能リーダーボード

ホームページには、Laguna XS 2.1 の提出に関するライブリーダーボードが表示され、各エントリについて順位、solver 名、モデル、decode トークンレート、prefill トークンレート、タイムスタンプが確認できます。

提出履歴の追跡

リーダーボードでは現在の記録と各 solver による段階的な向上が強調され、どの提出がスコアを押し上げたのかを把握しやすくなっています。

透明な採点方法

スコアの説明では、見出しとなる数値がどのように計算されるかが明示されており、decode と prefill の相対的な重み付けや、ローカルスコアが推定値であることが含まれます。

solver ごとの提出履歴

各 solver ページには、提出ノート、使用モデル、存在する場合は harness フィールド、その solver に対する公式増分を含む貢献履歴が保持されています。

変更履歴形式の提出ノート

solver のノートには、実行で加えられた正確な変更内容が記録されており、ドキュメントのみの nonce だったのか、kernel や routing の変更だったのか、あるいはメタデータ調整だったのかが分かります。

MLX Fast を使う場面

現在の性能記録を追跡する
サイトを使って Laguna XS 2.1 のライブ記録を追い、最近の提出がベンチマークをどのように変化させたかを確認します。
solver がどのように向上を達成したかを調べる
solver ページを使って、特定の提出の背後にあるノート、モデル選択、公式増分を確認してから、他の実行と比較します。
ベンチマーク実行を比較する
リーダーボードを使って、昇格済み提出間の decode と prefill のレートを比較し、どの実行が見出しスコアに最も貢献したかを把握します。
測定方法を理解する
採点の説明を使って、結果が推定値か公式スコアかを解釈し、decode 重視の重み付けが見出し数値にどう影響するかを理解します。

Pros and Cons

Pros

ホームページには、現在の記録、開始時のベースライン、詳細なリーダーボードデータが 1 か所にまとめて表示されます。
スコアの算出方法が decode/prefill の重み付けや公式な測定設定を含めて直接説明されています。
solver ページには各提出で何が変わったのかを読みやすく追跡できる履歴があり、改善がどのように達成されたかを理解するのに役立ちます。
このサイトはローカル推定値と公式スコアを区別しており、結果比較の際に便利です。

Cons

提供された証拠内の pricing ページは 404 を返すため、提示された資料から確認できる公開価格はありません。
提供されたページでは、提出とリーダーボード閲覧以外の integrations、API、標準的なエンドユーザーワークフローは文書化されていません。
機能の範囲は公開ベンチマークに集中しており、ソース資料ではより広範な製品管理やデプロイ機能について説明されていません。

FAQ

MLX Fast とは何ですか？

MLX Fast は、Apple Silicon 上での Laguna XS 2.1 の性能改善に関する公開リーダーボードとチャレンジページです。ランキング付きの提出、solver ページ、各エントリのスコア履歴を表示します。

スコアはどのように計算されますか？

ホームページでは、スコアは固定の基準に対する decode と prefill のトークンレート向上を加重幾何平均で算出し、decode は prefill の 3 倍の重みで評価されると説明されています。公式スコアでは、ベースラインと候補を同じ M5 Max 上で、thermal cool gate 後に比較します。

公開価格はありますか？

このサイトは、提供されたページ上では通常の製品購入フローを示していません。pricing URL は現在 404 を返すため、提供資料には検証可能な価格情報はありません。

solver ページにはどのような情報が表示されますか？

solver ページには、提出に関連付けられたモデルと harness、そして改善の背景にある記述ノートが記録されています。いくつかの提出では、ノート内で coding harness が指定されていないことが明示されています。

MLX Fast はどのような連携をサポートしていますか？

公開ページには、integrations、API、または標準的なアプリのワークフローは記載されていません。利用可能な証拠に基づくと、この製品はサードパーティ連携よりも、提出、solver 記録、リーダーボード更新に重点を置いています。

Quick Facts

カテゴリ: Developer Tool
主な形式: 公開チャレンジとリーダーボード
対象プラットフォーム: Apple Silicon
対象: Laguna XS 2.1 の性能改善
ソースドメイン: mlx.fast
価格ページの状態: 提供証拠では 404