Episode Details

Title: #149 - Dein Bildschirm sind die Trainingsdaten: KI lernt deinen Job, indem sie dir zuschaut

Du gehst in SAP, holst dir die Zahlen raus, gehst in Excel, reparierst die Formatierung — weil da immer irgendwas mit der Währung falsch ist — und klickst auf Absenden. 20, 30, 40 Mal am Tag. Du könntest das im Schlaf erklären.

Und jetzt stell dir vor, irgendwo in der Ecke deines Bildschirms schaut jemand zu. Die ganze Zeit. Nicht um dich zu bewerten — sondern um diesen nervigen Prozess zu lernen, damit du ihn die nächsten tausend Mal nicht mehr machen musst.

Das ist kein Gedankenexperiment. Seit ungefähr einem Monat funktioniert das. Und zwar so gut, dass es nicht eine Firma kann, sondern alle drei großen KI-Labore der Welt es gleichzeitig ausgerollt haben. Der Haken: Du bist wahrscheinlich nicht derjenige, der das nutzen will. Deine Vorgesetzten schon.

📍 Worum es heute geht: Was OpenAI, Anthropic und Microsoft diesen Sommer wirklich ausgeliefert haben · warum es plötzlich funktioniert (22 % → 86 % in 20 Monaten) · warum in DACH etwas völlig anderes passiert als in Singapur oder Brasilien · und die Frage, an der am Ende alles hängt: Wem gehört eigentlich der Skill?

🧰 Drei Labore, ein Feature, ein Sommer. OpenAI hat am 22. Juni Record and Replay ausgeliefert — du machst einen Ablauf auf deinem Rechner vor, redest dabei, und daraus wird ein wiederverwendbarer Skill. Dazu kam Computer History, das protokolliert, was du auf der Maschine machst. Anthropic zog am 21. Juli mit Record a Skill nach. Und Microsoft hat den Skill Recorder als Open Source auf GitHub gestellt — für Copilot Cowork, Copilot Studio und Scout.

🎬 Der Moment, in dem es bei einem Kunden klick gemacht hat. Wir haben den Prozess mit synthetischen Daten aufgenommen — fünf Minuten. Dann sind wir eine rauchen gegangen. Zurück im Raum: „Remember the skill that we built — can you please do it?" Die haben nur geschaut. Der IT-Leiter kam mit „ja, aber wir haben Microsoft" — also haben wir gezeigt, dass es über den GitHub-Weg von Microsoft genauso läuft. Ab dem Moment ist es nicht mehr theoretisch.

📈 Von 22 auf 86 Prozent — in 20 Monaten. Auf dem OSWorld-Benchmark liegt die menschliche Grundlinie bei etwa 72 %. Ende 2024 schafften die ersten Computer-Use-Agenten 22 % — jede fünfte Aufgabe. Meine Töchter sind besser. Anfang 2025: 40 %. Ende 2025: 60 %. Und jetzt liegen gleich drei Modelle über der menschlichen Grundlinie.

🇪🇺 Und dann sind da wir. In der englischen Folge bin ich deutlich enthusiastischer — da hören Leute aus Singapur, aus Brasilien, und dort gibt es einen cleveren CEO, der sagt: Das machen wir morgen. Und jetzt sind wir in Österreich, Deutschland, der Schweiz und Liechtenstein. Und wir haben einen Betriebsrat. Bei vielen unserer Firmen musste der schon eingebunden werden, nur um Meetings mit Copilot aufzuzeichnen. Jetzt stell dir vor, du kommst rein und sagst: Wir nehmen ab jetzt alles auf, was die Mitarbeiter machen.

⚖️ Meine unpopuläre Meinung zum EU AI Act. Verhaltensüberwachung am Arbeitsplatz ist dort Hochrisiko — aber ein Hotel-Chatbot war vor einem Jahr auch Hochrisiko. Ich glaube, dass eine Bildschirmaufnahme, mit der du der KI einen Prozess zeigst, am Ende nicht darunter fallen wird. Es wird ja nicht alles dauerhaft mitgeschnitten — du drückst einen Knopf und sagst: Diesen einen Prozess zeige ich dir jetzt.

🤝 Wem ich es zuerst zeigen würde: dem Betriebsrat. Nicht in drei Monaten. Jetzt. Denn du kannst sicher sein, dass der Betriebsrat selbst genug nerviges Zeug hat —