プラグイン

外部 USB HID デバイスによるコンピュータ操作:ターゲットを平易な言葉で指定すると、ビジョンモデルがクロップしたウィンドウスクリーンショット内で位置を特定し、Raspberry Pi Pico 2 が実際のマウスとキーボードを動かします。7 ツール。Windows はウィンドウ一覧、ウィンドウ単位のクロップ、自動ウィンドウ昇格に対応、macOS は pyobjc が必要で対応なし、Linux は非対応。

DeepSeek Harness エージェントに本物のマウスとキーボードを与えます。クリックしたい対象を言葉で説明すると、ビジョンモデルがそれを見つけ、USB HID デバイスがクリックします。