Werkzeuge 2026-08-12

Kein Jailbreak, kein Entwicklerkonto: Dieses Projekt steuert ein echtes iPhone, indem es Pixel aus einem Mac-Fenster liest

phone-harness, am 7. August veröffentlicht, hatte in fünf Tagen über 1.500 Sterne gesammelt. Es lässt ein Sprachmodell ein echtes iPhone bedienen — ohne Jailbreak, ohne Xcode und ohne WebDriverAgent. Der Kniff ist die iPhone-Spiegelung von macOS Sequoia: Das Werkzeug fotografiert dieses Fenster ab, lässt Apples mitgeliefertes Vision-Framework darüber laufen, um Text und dessen Koordinaten zu finden, und schickt Tipp- und Tastatureingaben als hardwarenahe CGEvents; ein weiterer Screenshot prüft, ob die Aktion gegriffen hat. Die Grenzen sind ehrlich benannt: nur ein Telefon zur Zeit, keine Zwei-Finger-Gesten, kein Face ID und keine Kameraabläufe, DRM-Videos erscheinen schwarz, und die Texterkennung liest Wörter, aber keine unbeschrifteten Symbole.

Warum es wichtig istTelefon-Automatisierung bedeutete bisher entweder betriebliche Geräteverwaltung oder einen Jailbreak. Hier sind es ein paar hundert Zeilen, gebaut ausschließlich aus Funktionen, die Apple ohnehin jedem Mac-Besitzer mitgibt, unter MIT-Lizenz. Auch die Sicherheitsfrage verschiebt sich: Der Agent ruft keine Schnittstelle auf, die sich drosseln oder prüfen ließe — er ist ein künstlicher Finger auf Ihrer angemeldeten Banking-App, und zwischen ihm und einem Fehler steht allein der Screenshot, den er danach aufnimmt.

#KI-Agenten

✓ Verifiziert · 1 Quellen

In der App lesen — kostenlos, 9 Sprachen

Verwandte Meldungen

Apple Music zeigt künftig an, wenn ein Song von einer Maschine stammt — ob das jemand angibt, entscheidet der Uploader
2026-08-21 DeepSeeks günstiges Arbeitspferd kann jetzt sehen — bei Agentenaufgaben mit Bildern will es nahe an Anthropics Bestem sein
2026-08-21 Stripe hat gerade 7,5 Milliarden Dollar für einen Modell-Router gezahlt. Tage später baut Ramp einen und verschenkt ihn bis Januar.
2026-08-21 Metas Assistent ist jetzt eine Mac-App, die Ihren Bildschirm liest und in jedes Fenster tippt — und was sie sieht, kann das Modell trainieren
2026-08-21 Ein Klick auf einer Nachrichtenseite sagt Google jetzt, dass Sie mehr davon sehen wollen — und Sie bleiben auf der Seite, die Sie gerade lesen
2026-08-21