Werkzeuge AI Minute Newsroom 2026-08-12

Kein Jailbreak, kein Entwicklerkonto: Dieses Projekt steuert ein echtes iPhone, indem es Pixel aus einem Mac-Fenster liest

phone-harness, am 7. August veröffentlicht, hatte in fünf Tagen über 1.500 Sterne gesammelt. Es lässt ein Sprachmodell ein echtes iPhone bedienen — ohne Jailbreak, ohne Xcode und ohne WebDriverAgent. Der Kniff ist die iPhone-Spiegelung von macOS Sequoia: Das Werkzeug fotografiert dieses Fenster ab, lässt Apples mitgeliefertes Vision-Framework darüber laufen, um Text und dessen Koordinaten zu finden, und schickt Tipp- und Tastatureingaben als hardwarenahe CGEvents; ein weiterer Screenshot prüft, ob die Aktion gegriffen hat. Die Grenzen sind ehrlich benannt: nur ein Telefon zur Zeit, keine Zwei-Finger-Gesten, kein Face ID und keine Kameraabläufe, DRM-Videos erscheinen schwarz, und die Texterkennung liest Wörter, aber keine unbeschrifteten Symbole.

Warum es wichtig istTelefon-Automatisierung bedeutete bisher entweder betriebliche Geräteverwaltung oder einen Jailbreak. Hier sind es ein paar hundert Zeilen, gebaut ausschließlich aus Funktionen, die Apple ohnehin jedem Mac-Besitzer mitgibt, unter MIT-Lizenz. Auch die Sicherheitsfrage verschiebt sich: Der Agent ruft keine Schnittstelle auf, die sich drosseln oder prüfen ließe — er ist ein künstlicher Finger auf Ihrer angemeldeten Banking-App, und zwischen ihm und einem Fehler steht allein der Screenshot, den er danach aufnimmt.

#KI-Agenten

✓ Verifiziert · 1 Quellen

In der App lesen — kostenlos, 9 Sprachen

Kein Jailbreak, kein Entwicklerkonto: Dieses Projekt steuert ein echtes iPhone, indem es Pixel aus einem Mac-Fenster liest

Verwandte Meldungen