Plugins

XiaoTangYuan, ein KI-Begleiter im Spiel für Einzelspielerspiele: versteht den Spielbildschirm, chattet per Text oder Push-to-Talk, und spricht Antworten laut vor; Stardew Valley wird unterstützt, mit Don't Starve Together- und Oxygen Not Included-Integrationen in Arbeit.

Einhändige Eingabe ohne Tastatur für das Eingabefeld: Maustaste im Eingabefeld gedrückt halten, sprechen, loslassen – der Text landet im Entwurf, und Hochschieben bricht ab, ohne einen halben Satz zu hinterlassen. Kein Mikrofonknopf zum Anvisieren und kein Kurzbefehl zum Merken; die Hand muss den Eingabebereich nie verlassen, was gerade dann zählt, wenn die andere Hand beschäftigt ist. Die Erkennung läuft vollständig offline (SenseVoice über sherpa-onnx, kein API-Schlüssel, Audio verlässt nie den Rechner).

Durchgängige Sprachkonversationen für DSH mit freihändigem Zuhören, Push-to-Talk, Spracherkennung, TTS-Antworten und Hintergrund-Agent-Delegation.

Vollständig lokale Push-to-talk-Spracheingabe für macOS: globale Taste halten, sprechen, loslassen; die Transkription wird am Cursor eingefügt. Local-first-STT (standardmäßig Qwen3-ASR 0.6B 4bit auf MLX/Metal, Ausweichmodelle SenseVoice und mlx-whisper), keine externen APIs, selbstheilender launchd-Dienst und 8-Punkte-Diagnoseskript. Der enthaltene Skill lässt den Agenten die gesamte Toolchain installieren, konfigurieren (Karabiner-Hotkey-Verknüpfung, launchd, Engine-Wechsel) und Fehler beheben.

Push-to-talk-Diktat für den Web-Composer: Hotkey halten, aufnehmen und Transkript über DSHs Speech Remote (lokales SenseVoice) in den Entwurf schreiben; Auto-Senden optional.

Sprachsteuerung für den DSH-Web-Composer: Push-to-talk transkribiert ins Eingabefeld (Auto-Senden optional), Antworten werden per Web Speech API gesprochen. Dazu kommen Einstellungs-Popover per Rechtsklick und globaler Ctrl+M-Shortcut.