KI-Sprachmodell: Claude von Anthropic kann jetzt den Mauszeiger bewegen
Anthropic hat ein großes Update für seine KI vorgestellt, die soll jetzt direkt mit dem PC interagieren können. Dafür kann sie etwa den Mauszeiger bewegen.
@heiseonline Wieso machen die Screenshots?
Die meisten Desktop-Programme liefern doch all ihre Informationen schon als Text-Daten für Screen-Reader. Die müssten doch viel leichter abzufragen sein, als mit Screenshots zu arbeiten. Und vor allem verlässlich.
@ArneBab @heiseonline Wenn man nur einen Hammer kennt, sieht alles aus wie ein Nagel.
Das ist wie mit den Zylonen bei der alten Galactica: Roboter, die Raumschiffe per physischer Eingabe steuern...
@frank das trifft es wohl
Oder es geht darum, dass Screenshots übers Netz geschickt werden können und dann "nur analysiert und sicher nicht gespeichert" werden.
Screenreader-Daten auszulesen bräuchte keinen externen Dienst. Und damit auch nichts, das ständig Geld bringt — weder als Abodienst, noch als durch Datenverkauf.
Wäre zumindest eine Erklärung, aber keine nette.
@heiseonline