Mage‑VL‑Coworkが注目されるのは、デスクトップ自動化をひとつの意思決定問題として捉えているからです。各ステップでポリシーが、マウスやキーボード、スクリーンショットに基づく位置特定といったGUI操作と、スクリプトやコマンドラインツール、ライブラリを使うターミナル/コード操作のどちらかを選びます。この単一ポリシーのアーキテクチャにより、壊れやすいオーケストレーション層を避けられます。また、視覚的に操作する方法だけでなく、いつプログラムによる修正に切り替えるべきかもモデルが学習できます。たとえば、脆弱なクリック操作を何度も繰り返す代わりに、Pythonの簡単な処理で表計算シートを編集するといった、実際のユーザーワークフローに直結する能力です。
最終的なスコアだけでなく、報告された学習レシピも重要です。Microsoftの5段階のパイプラインは、GUIの中間学習、GUIのSFT、コーディングとターミナル操作のSFT、ハイブリッドSFT、オンラインハイブリッドRLで構成されています。各チャネルの能力を個別に育ててから統合する設計です。ハーネスの改良とMage‑CUA‑Forgeによるデータ合成によって、スキルに応じた再利用可能なタスクが数万件生成され、学習対象のポリシーは視覚的な位置特定と信頼性の高いプログラム介入の両方を身につけます。さらにオンラインRLで判断の境界を洗練させることで、モデル呼び出しと出力トークンを減らしながら成功率を高めています。実運用に直結する、実用的な効率向上です。
4Bのオープンウェイトモデルが重要なのはなぜでしょうか。第一に、Apache‑2.0ライセンスのもと、ローカル推論、オンプレミスでの実験、エッジ環境への導入を検討するチームにとって、導入のハードルが下がります。第二に、OSWorldで競争力のある結果(50ステップで66.0%を達成し、複数のより大規模なクローズドモデルを上回る)が示すように、データエンジニアリングとハーネス設計を丁寧に行えば、パラメーター数の差を補えます。プロダクトチームや研究者にとって、大規模なクラウドAPIを待つことなく、特化型GUI、業務アプリ、プライバシーに配慮した自動化を反復開発できる現実的な道が開かれます。


