Plugins

Uso del ordenador mediante un dispositivo USB HID externo: nombra un objetivo en lenguaje natural, un modelo de visión lo localiza en una captura recortada de la ventana, y una Raspberry Pi Pico 2 mueve el ratón real y escribe en el teclado real. 7 herramientas. Windows incluye listado de ventanas, recorte por ventana y elevación automática de ventanas; macOS necesita pyobjc y no ofrece ninguna de las dos; Linux no es compatible.

Ratón y teclado reales para un agente de DeepSeek Harness: describe con palabras qué hay que pulsar, un modelo de visión lo localiza y un dispositivo HID USB hace clic.