aiminute. ← Alle KI-News
Werkzeuge AI Minute Newsroom 2026-08-12

Kein Jailbreak, kein Entwicklerkonto: Dieses Projekt steuert ein echtes iPhone, indem es Pixel aus einem Mac-Fenster liest

Kein Jailbreak, kein Entwicklerkonto: Dieses Projekt steuert ein echtes iPhone, indem es Pixel aus einem Mac-Fenster liest

phone-harness, am 7. August veröffentlicht, hatte in fünf Tagen über 1.500 Sterne gesammelt. Es lässt ein Sprachmodell ein echtes iPhone bedienen — ohne Jailbreak, ohne Xcode und ohne WebDriverAgent. Der Kniff ist die iPhone-Spiegelung von macOS Sequoia: Das Werkzeug fotografiert dieses Fenster ab, lässt Apples mitgeliefertes Vision-Framework darüber laufen, um Text und dessen Koordinaten zu finden, und schickt Tipp- und Tastatureingaben als hardwarenahe CGEvents; ein weiterer Screenshot prüft, ob die Aktion gegriffen hat. Die Grenzen sind ehrlich benannt: nur ein Telefon zur Zeit, keine Zwei-Finger-Gesten, kein Face ID und keine Kameraabläufe, DRM-Videos erscheinen schwarz, und die Texterkennung liest Wörter, aber keine unbeschrifteten Symbole.

Warum es wichtig istTelefon-Automatisierung bedeutete bisher entweder betriebliche Geräteverwaltung oder einen Jailbreak. Hier sind es ein paar hundert Zeilen, gebaut ausschließlich aus Funktionen, die Apple ohnehin jedem Mac-Besitzer mitgibt, unter MIT-Lizenz. Auch die Sicherheitsfrage verschiebt sich: Der Agent ruft keine Schnittstelle auf, die sich drosseln oder prüfen ließe — er ist ein künstlicher Finger auf Ihrer angemeldeten Banking-App, und zwischen ihm und einem Fehler steht allein der Screenshot, den er danach aufnimmt.
#KI-Agenten

✓ Verifiziert · 1 Quellen

WhatsApp X Telegram
In der App lesen — kostenlos, 9 Sprachen

Verwandte Meldungen

OpenRouter trennt sich nach einem Ködertest von drei Anbietern.
2026-11-22
Forscher wollen aus Metas KI-Agent Muse Chats herausgeschleust haben.
2026-11-22
ChatGPTs gemeinsamer Arbeitsbereich Space kommt jetzt zu Plus-Nutzern.
2026-11-21
Laut Amazon fanden KI-Agenten von Angreifern selbst eine neue Lücke.
2026-11-21
METR findet kaum Menschen, die Top-KI beim Programmieren schlagen.
2026-11-21