Mage‑VL‑Cowork destaca porque plantea la automatización del escritorio como un único problema de toma de decisiones: en cada turno, la política elige entre acciones de interfaz gráfica (ratón, teclado y referencias visuales basadas en capturas de pantalla) o acciones de terminal y código (scripts, herramientas de línea de comandos y bibliotecas). Esta arquitectura de política única evita capas de orquestación frágiles y enseña al modelo tanto a actuar visualmente como a saber cuándo pasar a soluciones programáticas. Es una capacidad que encaja directamente con flujos de trabajo reales, como editar hojas de cálculo con un rápido ajuste en Python en vez de hacer muchos clics poco fiables.
La receta de entrenamiento publicada es tan importante como el resultado final. El proceso de cinco etapas de Microsoft —preentrenamiento intermedio para interfaz gráfica, ajuste fino supervisado (SFT) para interfaz gráfica, SFT de programación y terminal, SFT híbrido y aprendizaje por refuerzo híbrido en línea— desarrolla deliberadamente la competencia en cada canal antes de unificarlos. La evolución del arnés de evaluación y la síntesis de Mage‑CUA‑Forge generan decenas de miles de tareas reutilizables y condicionadas por habilidades, para que la política estudiante aprenda tanto a interpretar referencias visuales como a realizar intervenciones programáticas fiables. Después, el aprendizaje por refuerzo en línea afina los límites de decisión, reduce las llamadas al modelo y la cantidad de tokens generados, y mejora las tasas de éxito: una ganancia de eficiencia práctica para el despliegue real.
¿Por qué importa que sea un modelo de pesos abiertos de 4B? En primer lugar, facilita el acceso a equipos que quieren ejecutar inferencias localmente, hacer pruebas en sus propios servidores o desplegar el modelo en el edge, especialmente gracias a la licencia Apache‑2.0. En segundo lugar, sus resultados competitivos en OSWorld (66,0 % con un límite de 50 pasos, por encima de varios modelos cerrados de mayor tamaño) demuestran que una ingeniería de datos cuidadosa y un buen diseño del arnés pueden compensar una escala menor de parámetros. Para equipos de producto e investigación, esto abre una vía realista para iterar en interfaces gráficas especializadas, aplicaciones empresariales o automatización sensible a la privacidad, sin tener que esperar a grandes API en la nube.


