Werkzeuge
AI Minute Newsroom
2026-08-12
Kein Jailbreak, kein Entwicklerkonto: Dieses Projekt steuert ein echtes iPhone, indem es Pixel aus einem Mac-Fenster liest
phone-harness, am 7. August veröffentlicht, hatte in fünf Tagen über 1.500 Sterne gesammelt. Es lässt ein Sprachmodell ein echtes iPhone bedienen — ohne Jailbreak, ohne Xcode und ohne WebDriverAgent. Der Kniff ist die iPhone-Spiegelung von macOS Sequoia: Das Werkzeug fotografiert dieses Fenster ab, lässt Apples mitgeliefertes Vision-Framework darüber laufen, um Text und dessen Koordinaten zu finden, und schickt Tipp- und Tastatureingaben als hardwarenahe CGEvents; ein weiterer Screenshot prüft, ob die Aktion gegriffen hat. Die Grenzen sind ehrlich benannt: nur ein Telefon zur Zeit, keine Zwei-Finger-Gesten, kein Face ID und keine Kameraabläufe, DRM-Videos erscheinen schwarz, und die Texterkennung liest Wörter, aber keine unbeschrifteten Symbole.
Warum es wichtig istTelefon-Automatisierung bedeutete bisher entweder betriebliche Geräteverwaltung oder einen Jailbreak. Hier sind es ein paar hundert Zeilen, gebaut ausschließlich aus Funktionen, die Apple ohnehin jedem Mac-Besitzer mitgibt, unter MIT-Lizenz. Auch die Sicherheitsfrage verschiebt sich: Der Agent ruft keine Schnittstelle auf, die sich drosseln oder prüfen ließe — er ist ein künstlicher Finger auf Ihrer angemeldeten Banking-App, und zwischen ihm und einem Fehler steht allein der Screenshot, den er danach aufnimmt.
✓ Verifiziert · 1 Quellen
In der App lesen — kostenlos, 9 Sprachen
Verwandte Meldungen
OpenRouter trennt sich nach einem Ködertest von drei Anbietern.
2026-11-22Forscher wollen aus Metas KI-Agent Muse Chats herausgeschleust haben.
2026-11-22ChatGPTs gemeinsamer Arbeitsbereich Space kommt jetzt zu Plus-Nutzern.
2026-11-21Laut Amazon fanden KI-Agenten von Angreifern selbst eine neue Lücke.
2026-11-21METR findet kaum Menschen, die Top-KI beim Programmieren schlagen.
2026-11-21