Kürzlich habe ich ein globales Sprachsteuerungstool für Mac entwickelt, hauptsächlich um meine tägliche Arbeit zu erleichtern, ohne ständig kopieren und einfügen oder zwischen verschiedenen Agenten-Dialogfenstern wechseln zu müssen, um unterschiedliche Aufgaben zu erledigen. Ich habe lange darüber nachgedacht, wie ich die drei Mechanismen Accessibility, Ereignisinjektion und Clipboard-Handling umsetzen kann, aber die Implementierung der Textfelder in verschiedenen Anwendungen variiert stark. Während dieses Prozesses habe ich mir immer vorgestellt, wie praktisch es wäre, wenn ich einfach Siri verwenden könnte, um direkt auf Systemebene zu steuern, mit Kontextkontinuität, Bildschirmwahrnehmung und der Fähigkeit, über Anwendungen hinweg zu agieren. Die gute Nachricht ist, dass die Einführung des lokalen Agents openclaw die Entwicklung dieses Bedarfs erheblich erleichtert hat, einschließlich der Anordnung von Prompts, dem Aufrufen von Modellen oder Tools usw. Wenn ich mir die heutigen Übernahme-Nachrichten ansehe, kann ich mir auch vorstellen, dass Apple endlich im Bereich Sprachsteuerung aktiv werden wird.