Revolutioniere Windows Copilot: Befreie dich von der Konversationsbox

Revolutioniere Windows Copilot: Befreie dich von der Konversationsbox

Mit der Veröffentlichung von ChatGPT von OpenAI sind Chatbots zum Gesicht der künstlichen Intelligenz (KI) in der heutigen Welt geworden. Es scheint, dass die Kommunikation mit einem KI-Chatbot die einzige Möglichkeit ist, mit KI-Modellen und intelligenten Systemen zu interagieren. Obwohl ich zustimme, dass ein Chatbot ein schematische, benutzerfreundliche Oberfläche Damit die meisten Benutzer mit einem KI-Modell interagieren können, kann es nicht sein, dass alle Ihre Träume von der Interaktion mit einem intelligenten System in den vier Ecken einer Text-Chatbox sterben.

In dieser Hinsicht ist Microsoft in den Wahnsinn geraten, KI-Chatbots in viele seiner Produkte zu integrieren. Vor allem hat es Windows Copilot, einen KI-Chatbot, der auf OpenAI-Modellen basiert, mit viel Hype und Pomp in Windows 11 integriert. Nicht zu übersehen ist die Tatsache, dass Microsoft Cortana ersetzt mit Windows Copilot auf Windows 11. Und der Technologieriese hat auch Windows Copilot in Windows 10 integriert und Cortana ersetzt.

Microsoft glaubt sicherlich, dass KI-Chatbots die Zukunft sein werden. Aber ist es wirklich die Vision von intelligentem Computing, unterstützt durch KI? Oder macht sich Microsoft nur auf den KI-Hype ein und integriert KI-Chatbots, um Investoren zu zeigen, dass das Unternehmen mit von der Partie ist? Was auch immer die Antwort sein mag, die aktuelle Form von KI-gesteuerten Chatbots hat nur begrenzte Einsatzmöglichkeiten und es fühlt sich einschränkend an, sinnvolle Hilfe vom Chatbot zu erhalten, insbesondere auf Betriebssystemebene.

Windows Copilot: Ein Downgrade gegenüber Cortana?

Microsoft hat beschlossen, Cortana – ein 9 Jahre altes Produkt – zugunsten von Windows Copilot abzuschaffen, aber ist das ein geeigneter Ersatz, insbesondere wenn Windows Copilot noch in der Vorschau ist?

Gehen wir den Vergleich dennoch Punkt für Punkt durch. Zunächst einmal war Cortana im Gegensatz zu Windows in erster Linie ein Sprachassistent Copilot ist ein textbasierter KI-Chatbotunterstützt zwar die Spracheingabe, jedoch nicht standardmäßig.

Einfach ausgedrückt ist Windows Copilot nicht für a konzipiert Voice-First-Benutzererlebnis Dadurch entsteht ein unzusammenhängendes Erlebnis, im Gegensatz zu Cortana, das sich persönlicher anfühlte. Ich denke, wenn es um die Zugänglichkeit der Benutzeroberfläche geht, wird die Spracheingabe aufgrund der Benutzerfreundlichkeit und Intuitivität von vielen der Texteingabe vorgezogen. Daher scheitert Windows Copilot gleich zu Beginn beim wichtigen Benutzererfahrungstest.

Kommen wir nun zu den Funktionen: Cortana war inzwischen ein ausgereiftes Produkt und konnte viele Aktionen auf Systemebene ausführen. Es könnte einen Timer erstellen, einen Alarm einstellen, Erinnerungen hinzufügen, eine E-Mail verfassen, Definitionen finden, Apps öffnen und vieles mehr. Im Wesentlichen, Cortana war tief integriert in das Windows-Betriebssystem eingearbeitet und das System sehr gut verstanden.

Windows Copilot kann keinen Timer einstellen

Im Vergleich dazu basiert Copilot auf allgemeinen LLM-Modellen (Large Language Models), die nicht für die Ausführung lokaler Aktionen unter Windows geeignet sind. Wenn ich Windows Copilot auffordere, einen Timer einzustellen, werde ich aufgefordert, zu einem Onlinedienst zu gehen, um einen Timer einzustellen. Es Ich kann nicht einmal einen Wecker stellen oder Musik spielen. Copilot öffnet für mich einfach die Spotify-App. Ich kann hier anscheinend keine KI-Magie finden.

Microsoft hat es eilig, in den KI-Hype-Zug einzusteigen, was symbolisch dafür ist, dass Microsoft das Smartphone-Rennen verpasst hat, was es jetzt bereut und den gleichen Fehler nicht wiederholen möchte.

Natürlich befindet sich Windows Copilot noch in der Vorschau, und diese Funktionen werden wahrscheinlich in der Zukunft hinzugefügt (einige befinden sich bereits in Tests in Insider-Builds), aber was war die hektische Eile, Cortana durch einen kaum funktionierenden KI-Chatbot zu ersetzen?

Es scheint mir, dass Microsoft in einer Beeilen Sie sich, in den KI-Hype-Zug einzusteigensinnbildlich dafür, wie Microsoft das Smartphone-Rennen verpasst hat, das es jetzt hat Reueund möchte den gleichen Fehler nicht wiederholen.

Was mich ärgert, ist, dass Microsoft offenbar nicht viel über Windows Copilot nachgedacht hat. Es hat einfach einen Chatbot integriert und machte Schluss, zumindest vorerst. Der Technologieriese hat nicht einmal versucht, die Funktionsgleichheit zwischen Copilot und Cortana herzustellen, bevor er ein fast zehn Jahre altes Produkt ersetzt hat.

Es ist besonders enttäuschend, weil Microsoft der Windows-Tastatur eine Copilot-Taste hinzufügt – wie Microsoft es nennt.bedeutende Veränderung der Windows-PC-Tastatur in fast drei Jahrzehnten” – und doch wurde so wenig darüber nachgedacht.

Wo ist die KI-Magie in Windows Copilot?

Kommen wir nun zu den Möglichkeiten von Windows Copilot. Sie können Fragen zu jedem Thema stellen und erhalten sofort Antworten. Sie können auch in den Kreativmodus wechseln, um mit dem leistungsstarken GPT-4-Modell zu sprechen.

Es kann eine Webseite zusammenfassen, wichtige Erkenntnisse finden, eine Reiseroute planen usw. Microsoft hat Copilot außerdem ein Screenshot-Tool hinzugefügt verwendet das GPT-4V-Modell zur visuellen Analyse. Sie können damit OCR durchführen oder Informationen zu einem Bild finden.

OCR mit Windows Copilot

Was Windows-spezifische Funktionen betrifft, kann man sagen: „Ich habe Probleme mit der Audiowiedergabe“ und Copilot kann die Audio-Fehlerbehebung für Sie öffnen. Es Funktioniert zur Fehlerbehebung auch andere Windows-Probleme. Darüber hinaus können Sie über Copilot den Dunkelmodus ein- und ausschalten, einen Screenshot machen und Fenster ausrichten.

Während diese Funktionen für die Vorschauversion von Windows Copilot akzeptabel sind, funktionieren die meisten davon auch in Edge Copilot, mit Ausnahme der Windows-spezifischen Funktionen. Darüber hinaus kann Windows Copilot nicht über Chrome oder andere Browser auf Webseiten zugreifen. Als Windows Copilot läuft auf Edges Motorkann es nicht auf Inhalte aus anderen Fenstern zugreifen, sei es ein Browser, Notepad oder Office-Apps.

Task-Manager zeigt an, dass Windows Copilot auf der Edge Engine ausgeführt wird

Dies ist eine weitere große Lücke in der Implementierung von Windows Copilot. Es ist nicht mit dem WinUI 3-Framework entwickelt für die Bereitstellung eines nativen Erlebnisses, stattdessen wird Copilot als Erweiterung des Edge-Browsers ausgeführt. Daher ist keine tiefe Integration von Windows Copilot in Schlüsselelemente des Betriebssystems festzustellen.

Sie können beispielsweise nicht mit der rechten Maustaste auf eine Datei im Windows Explorer klicken und Windows Copilot bitten, sie zu erklären, das Dateiformat zu konvertieren oder eine beliebige Aktion auszuführen. Es wäre so cool gewesen, wenn man über das Kontextmenü eine Excel-Datei auf Copilot werfen könnte und Copilot direkt dort eine Datenanalyse durchführen könnte. Derzeit gibt es außer Bildern einfach keine Möglichkeit, mit Windows Copilot unter Windows 11 mit Dateien zu interagieren.

Windows Copilot: Ein Fall von zu viel Versprechen und zu wenig Leistung

Microsoft war in letzter Zeit sehr gut darin, neue Funktionen anzukündigen und zu vermarkten, aber wenn es darum geht, die versprochenen Funktionen zu nutzen, scheint man sie nicht zu finden. Als Windows Copilot vor drei Monaten angekündigt wurde, versprach es mehrere neue Funktionen, doch das sind sie auch noch nicht verfügbar oder funktionieren nicht wie angekündigt.

Wenn Sie beispielsweise Windows Copilot bitten, Ihre Fenster auszurichten, werden Sie um Ihre Erlaubnis gebeten und dann wird nur ein Fenster eingerastet, sodass Sie den Rest der Aktion ausführen können. Ebenso spielt es keine stimmungsspezifische Musik ab, wenn Sie es während der Arbeit bitten, etwas abzuspielen. Copilot einfach Wirft Links von YouTube und andere Quellen. Das ist doch nicht das, was Sie von einem intelligenten, KI-gestützten Copiloten erwarten, oder?

Windows Copilot spielt keine Musik ab

Als nächstes kommt das mit Spannung erwartete Kontextmenü für Copilot ist noch nicht angekommen. „Umschreiben“, „Erklären“ und „Zusammenfassen“ sind für kein aktives Fenster verfügbar. Draft mit Copilot ist auch nach drei Monaten Veröffentlichung nirgendwo zu finden. Nicht zu vergessen: Sie können den Hintergrund von Bildern mit Copilot nicht entfernen und die Erweiterungsunterstützung wurde noch nicht hinzugefügt.

Es sind also nicht alle beworbenen und gepriesenen Funktionen vorhanden. Es ist ein einfacher Fall, dass Microsoft bei vielen seiner Produkte zu viel verspricht und zu wenig liefert.

Was könnte die Vision für Windows Copilot sein?

Kommen wir nun zu den Möglichkeiten von Windows Copilot. Wenn wir uns ansehen, was die Open-Source-Community tut, haben wir ein interessantes Open-Interpreter-Tool, das mit Ihren lokalen Dateien interagieren, sie in andere Formate konvertieren, verschiedene Dateiformate verarbeiten, Diagramme erstellen und vieles mehr tun kann. Es kann auch mit verschiedenen Systemeinstellungen und Tools interagieren und Aktionen unter Windows ausführen.

Hi! Open Interpreter 0.2.0 – das neue Computer-Update – ist heute erhältlich.

alles ist neu.

– Im Betriebssystemmodus können Vision-Modelle Ihren Computer bedienen
– Wir haben ein neues Modell für eine präzise GUI-Steuerung hinzugefügt
– Wir führen eine Computer-API für LLMs ein

pic.twitter.com/smhAW2R8Mf

– killian (@hellokillian) 5. Januar 2024

Erst kürzlich wurde eine neue Version von Open Interpreter (0.2.0) mit einem faszinierenden Betriebssystemmodus veröffentlicht. Sie können Ihren Computer mit einfacher Eingabeaufforderung in natürlicher Sprache bedienen. Open Interpreter verwendet Vision-Modelle wie GPT-4V die GUI-Umgebung verstehen und Aktionen auf Ihrem Computer ausführen.

Um Ihnen ein Beispiel zu geben: Sie können es auffordern, den Dunkelmodus zu aktivieren. Daraufhin wird die entsprechende Einstellungsseite geöffnet und der Schalter wird mithilfe des Vision-Modells aktiviert.

Schau mal, Mama, keine Hände! Das ist @OpenInterpreter Ich verwende meine Maus und meine Tastatur, um eine E-Mail zu senden.

Stellen Sie sich vor, was sonst noch möglich ist. pic.twitter.com/GcBqbTwD23– Ty (@FieroTy) 6. Januar 2024

Sie bitten es, Lo-Fi-Musik abzuspielen, und es öffnet den Browser und YouTube, findet einige tolle Lo-Fi-Playlists und spielt sie für Sie ab. Dies sind einige grundlegende Beispiele dafür, wozu Vision-Modelle in der Lage sind, aber Windows Copilot ist nicht in der Lage, Ihnen Texte in der Chatbox zuzuwerfen.

Ein wirklich intelligenter Copilot sollte in der Lage sein, eine E-Mail zu senden, Windows-Einstellungen zu optimieren, mit dem Betriebssystem auf Systemebene zu interagieren und vieles mehr. Der Anwendungsfall ist grenzenlos und es kann so nützlich sein Verbesserung der Zugänglichkeit unter Windows 11 24H2.

Natürlich wird der Aufruf der GPT-4V-API für Microsoft viel Geld kosten, aber Es kann ein kleines Visionsmodell erstellen speziell für Windows, ähnlich CogVLM. Dadurch wird die Latenz reduziert und alles läuft lokal, auch wenn Ihr PC offline ist.

Da die kommenden Intel- und Snapdragon-X-Elite-Chipsätze über dedizierte NPUs verfügen, wäre der Betrieb kleinerer Modelle auf dem Gerät möglich. Selbst wenn Microsoft sein selbst entwickeltes visuelles Modell in der Cloud ausführen würde, würde es viel weniger kosten.

Wir stellen vor: r1. Sehen Sie sich die Keynote an.

Jetzt bestellen: https://t.co/R3sOtVWoJ5 #CES2024 pic.twitter.com/niUmjFvKvE– Kaninchen Inc. (@rabbit_hmi) 9. Januar 2024

Um ein weiteres Beispiel zu nennen: Wir haben gerade die Demo von gesehen Kaninchen R1 – ein AI-first-Hardwaregerät – das Aktionen für Sie ausführen kann. Es wird von dem angetrieben, was sie ein nennen LAM (Large Action Model). Von der Pizzabestellung bis zum Versenden von E-Mails und der Buchung von Flügen kann es alles intelligent und mit nur einer Spracheingabe für Sie erledigen.

Microsoft muss sich so etwas wie ein LAM einfallen lassen, das darauf ausgelegt ist, Aktionen auszuführen und nicht nur zum Chatten mit einem Chatbot.

Wenn ein kleines Startup wie Rabbit es schaffen kann, kann das auch ein großer Technologieriese wie Microsoft mit riesigen Ressourcen schaffen. Bisher haben wir gesehen, wie Microsoft ein eigenes Unternehmen entwickelt hat Phi-2-Modellein kleines LLM, nur für Forschungszwecke. Wenn Microsoft wirklich will, dass wir im Jahr 2024 KI-PCs erleben, muss es bauen Windows-spezifische Vision-Modelle zum lokalen Ausführen von Agenten mit nahezu keiner Latenz. Microsoft muss sich so etwas wie ein LAM einfallen lassen, das darauf ausgelegt ist, Aktionen auszuführen und nicht nur zum Chatten mit einem Chatbot.

Windows Copilot braucht einen neuen Ansatz

Abschließend lässt sich abschließend sagen, dass Windows Copilot in seiner aktuellen Chatbot-Form einen äußerst begrenzten Anwendungsbereich hat und bereits von unzähligen Browsererweiterungen und Edge Copilot abgedeckt wird. Microsoft braucht einen neuen Ansatz, um KI-PCs Wirklichkeit werden zu lassen.

Apple, der schärfste Konkurrent von Microsoft, ist dafür bekannt, ein Produkt gründlich zu entwickeln und es der Öffentlichkeit zugänglich zu machen, wenn es einsatzbereit ist. Im Gegensatz, Microsoft macht das Gegenteil. Es beeilt sich, das Produkt herauszubringen, wenn es noch nicht einmal fertig ist und bei der Markteinführung funktionale und sinnvolle Funktionen verfügbar sind.

Es ist ein Symbol dafür, wie Microsoft ohne viel Nachdenken an KI herangeht. Das Unternehmen hat bereits damit begonnen, Edge als KI-Browser zu bezeichnen, indem es lediglich einen Chatbot integriert hat. Es wird auch daran gearbeitet, dem Notepad KI-Funktionen hinzuzufügen, und es werden weiterhin KI-gestützte Funktionen in MS Paint, das Snipping Tool, Office-Apps und andere Erstanbieter-Apps integriert.

Microsoft muss Überwinden Sie die Obsession, einen Chatbot zu integrieren und neu anfangen.

Während diese In-App-KI-Funktionen einigen Benutzern dabei helfen können, Windows zu einem intelligenten Betriebssystem zu machen, das auf KI basiert, bietet Microsoft muss Überwinden Sie die Obsession, einen Chatbot zu integrieren und mit neuen Ideen und Ansätzen neu beginnen.

Siehe auch:  OpenAI Not-Aus-Gesetz: Kongress will KI regulieren

Unterstützen Sie unsere Arbeit ❤️

Wenn Ihnen dieser Artikel gefallen hat, können Sie uns mit einem Trinkgeld unterstützen, damit wir weiterhin großartige Inhalte veröffentlichen können.

Sichere Zahlung mit PayPal
Moyens I/O-Personal. motivierte Sie und gab Ratschläge zu Technologie, persönlicher Entwicklung, Lebensstil und Strategien, die Ihnen helfen werden.