Das Hinzufügen von Augen zur künstlichen Intelligenz ist immer eine knifflige Sache. Möchten Sie, dass sie die ganze Zeit alles sehen, was Sie tun? Sicherlich nicht, aber ich denke, die meisten von uns sind sich einig, dass eine KI-Visuellhilfe, wenn Sie sie brauchen, durchaus nützlich sein könnte. Microsofts neues Copilot Vision könnte eine der vielversprechendsten Anwendungen künstlicher visueller Fähigkeiten sein, die ich bisher gesehen habe.
Microsoft stellte das Copilot Vision-Update für seine Windows-App und mobile Apps vor (Sie können Ihre Kamera auf Dinge richten, und Vision kann sie für Sie identifizieren) während einer aufsehenerregenden, kombinierten Copilot- und Microsoft-50-Jahresfeier.
Copilot hat praktisch eine Gehirntransplantation erhalten, wobei sowohl hausinterne (Microsoft AI oder MAI) als auch OpenAI GPT-generative Modelle verwendet wurden, um Updates in den Bereichen Speicher, Suche, Personalisierung und Vision durchzuführen.
Jetzt, wo ich Copilot Vision in Aktion gesehen habe, kann ich Ihnen sagen, dass es eines der aufregendsten und wichtigsten Updates der Gruppe ist – auch wenn es in zwei Stufen kommt.
In der Version, auf die Sie jetzt für Ihre unterstützende Windows-Desktop-App zugreifen können, kann Copilot Vision die Apps sehen, die Sie auf dem Desktop ausführen. Wenn Sie Copilot öffnen – indem Sie das Symbol auswählen oder Ihre Copilot-Taste auf der Tastatur drücken – können Sie jetzt das neue Brillen-Symbol auswählen.
Dies ermöglicht es Ihnen, eine Liste der geöffneten Apps zu sehen; in unserem Fall hatten wir zwei geöffnet: Blender 3D und Clipchamp. Das bedeutet, dass Copilot zwar über die verfügbaren Apps auf Windows informiert ist, aber nicht automatisch zuschaut.
Wir haben Blender 3D ausgewählt, und von diesem Moment an hat sich etwas in meinem Windows-Dasein verschoben. Mir wurde klar, dass Copilot wirklich sehen kann, welche App Sie verwenden, und anstatt Ihr Vorhaben zu erraten, antwortet es basierend auf der App und sogar dem Projekt, an dem Sie arbeiten.