Schritt in die Zukunft: OpenAI & ChatGPTs Integration mit Office 365

Jetzt, da Microsoft ihre Integration von OpenAI/ChatGPT mit Bing vorgestellt hat, um das neue Bing Search/Chat-Erlebnis zu schaffen, gibt es eine weitere große Kategorie, an der Microsoft arbeitet, die aber noch nicht öffentlich verfügbar ist.

Das ist die Integration von OpenAI/ChatGPT in jede andere Software-Kategorie innerhalb des Ökosystems. (Yusuf bestätigte dies während des Events zu Beginn dieser Woche.)

Eine offensichtliche Kategorie ist die Microsoft Office 365-Suite. Ich habe keine genauen Informationen darüber, was Microsoft in diesem Bereich macht, und habe auch noch nicht mit jemandem bei Microsoft oder OpenAI gesprochen, aber ich habe einige fundierte Vermutungen/Wünsche, basierend auf dem, was ich im Internet gesehen habe. Im Rest dieses Artikels werde ich bestimmte Anwendungsfälle hervorheben, die ich für eine Aufnahme in die Integration halte :)

1) Mit Excel/Tabellenkalkulation "sprechen" (genauer gesagt chatten), um Dinge zu erledigen

Ich muss zugeben: Obwohl ich ein Spreadsheet-Ninja sein möchte, bin ich es nicht T.T

Ich kann Google Sheets/Excel auf einem mittleren Niveau nutzen, muss aber sehr viel suchen, um viele Funktionen zu kennen. Selbst nach dem Lesen der Beispiele dauert es noch eine Weile, bis ich dieses Verständnis auf die Formel anwende, die ich schreiben möchte. Die Idee, dass wir menschliche Sprache nutzen können, um Excel zu bitten, Formeln für uns zu schreiben, ist daher brillant! (Zumindest für mich :P)

Die Tatsache, dass Menschen jetzt schon mit ChatGPT Excel-Funktionen in normaler Sprache erstellen können (siehe Kevins Youtube-Video), bedeutet, dass es noch besser funktionieren sollte, wenn OpenAI nativ in Excel integriert wird:

• Es sollte noch besser funktionieren, weil OpenAI den Inhalt/Kontext der Datei und der genauen Zellen verstehen sollte.
• Wir müssen den Workflow nicht mehr unterbrechen, indem wir von Excel zu ChatGPT wechseln und die Formel dann zurückkopieren. Alles kann direkt in Excel erledigt werden.

Ich hoffe, dass diese Funktion auch bald mit Google Sheets verfügbar sein wird, da ich Google Sheets öfter nutze. (Wenn du ein paar Suchvorgänge auf Youtube machst, findest du viele Videos von Menschen, die versuchen, die ChatGPT API/Funktionen in Google Sheets zu "integrieren".)

2) Meeting-Inhalte zusammenfassen und automatisch Follow-up-Aktionspunkte erstellen

Schau dir dieses Video vom MeeTime-Kanal an, in dem gezeigt wird, wie man ChatGPT verwendet, um das Meeting-Transkript zusammenzufassen. Der Kern davon ist:

• Bei Online-Meetings über Microsoft Teams oder Google Meet, oder bei den meisten Youtube-Videos, kann das Transkript automatisch live oder nach dem Meeting eingefügt werden.
• Warum nutzen wir dann nicht ChatGPT, um das Meeting-Transkript zusammenzufassen und eine Executive Summary zu erstellen?
• Das Video von MeeTime spricht nicht davon, ChatGPT zu bitten, automatisch Follow-up-Aktionspunkte zu generieren und Verantwortliche zuzuweisen, aber ich kann mir nicht vorstellen, dass das zu schwierig wäre.

Hier ist mein Wunsch, wenn OpenAI/ähnliche Technologie nativ in Microsoft Teams integriert wird:

• Automatisch die Executive Summary des Meetings für uns erstellen. Nutze die Meeting-Teilnehmer als Möglichkeit, den ersten Zugriffslevel zu kontrollieren, damit Informationen nicht ohne entsprechende Berechtigung geteilt werden.
• Automatisch Follow-up-Aktionen erstellen und jedem Element basierend auf dem Meeting-Gespräch einen Verantwortlichen zuweisen.
• Eine sanfte Kalendereinladung erstellen (oder einen ähnlichen Mechanismus nutzen), um die Deadline für jede Aufgabe anzuzeigen.
• Usw...

Das wäre brillant, weil es uns viel Zeit sparen würde. Der aktuelle Workflow mit ChatGPT ist sehr umständlich, weil:

• Das Zeichenlimit verhindert, dass du das gesamte Transkript in einem einzelnen Prompt eingibst und ChatGPT bittest, es zusammenzufassen. Versuche es mit einem Video, das 30 Minuten oder eine Stunde lang ist, dann weißt du, was ich meine.
• Wenn du ChatGPT aufgrund des Zeichenlimits jeweils einen Teil des Transkripts gibst, kann sich die Zusammenfassung/Bedeutung der Zusammenfassung erheblich ändern, weil ChatGPT nicht das "gesamte Bild" sieht.

Natürlich kann das Obige auch auf Google Meet oder andere Plattformen angewendet werden.

Macht das für uns möglich, bitte :D geniale Entwickler

3) ChatGPT + DALL E 2 zur Erstellung der gesamten Präsentation

Wir wissen bereits, dass ChatGPT gut mit Text umgehen kann und Gliederungen und Narrationen basierend auf den Befehlen des Nutzers erstellen kann. DALL-E-2 oder Stable Diffusion (dreamstudio) sind gut mit Bildern/Videos.

Es wäre noch besser, wenn ChatGPT- und DALL E 2-Fähigkeiten zu einem einzigen Produkt kombiniert würden, damit die gesamte Präsentation (einschließlich Bilder) für uns erstellt werden kann.

Ich nutze Stable Diffusion schon eine Weile, um KI-generierte Bilder zu erstellen. Die Herausforderung, mit der ich konfrontiert bin, besteht darin, der Maschine genug Kontext zu geben, damit sie das Bild nach meinen Vorstellungen anpassen kann. Außerdem erlaubt das aktuelle kostenlose DreamStudio-Interface diese iterative Anpassung nicht, ähnlich wie ich ChatGPT bitten kann, bestimmte Teile des Textinhalts anzupassen, den es generiert.

Also lautet mein Wunsch:

• Nicht nur OpenAI, sondern auch DALL E 2 (oder ähnliche Technologien für Text und Bilder) in PowerPoint oder andere Präsentationssoftware integrieren.
• Den Nutzer dazu bringen, die Präsentation gemeinsam mit der Maschine zu erstellen, einschließlich Narrationen, Text und unterstützenden Bildern.
• Den iterativen Bearbeitungsprozess via Chat für jede Folie/jedes Bild ermöglichen.

Ich hatte noch keine Gelegenheit, Google Bard auszuprobieren, und ich bin nicht sicher, ob Google ihre Version von DALL E 2 oder Stable Diffusion entwickelt, also kann ich hier nicht viel kommentieren.

Aber ich weiß, dass die Nachfrage danach existiert, uns bei der Erstellung/Bearbeitung von Präsentationen zu helfen – nicht nur unter Büroangestellten, sondern auch bei Studenten, Lehrern, Bankern, Ärzten usw.

4) ChatGPT + DALL E zur Unterstützung bei der Datenvisualisierung

Dieser Anwendungsfall ist eine Erweiterung von Punkt 3, aber mit der Tabellenkalkulations-/Excel-Graphenfunktion. Hast du dich jemals gefragt, wie Menschen aus Zahlen schöne, klare, leicht verständliche Grafiken erstellen können, während du dabei Schwierigkeiten hast?

Warum nicht eine ChatGPT + DALL E 2-Integration mit Excel oder Google Sheets (oder einem anderen Tabellenkalkulationsprogramm) haben? Meine fundierte Vermutung ist, dass nicht viele Menschen Python/R erlernen möchten, nur weil sie Visualisierungen aus einem Datensatz erstellen müssen.

Warum können wir nicht einfach mit der Maschine "sprechen" oder "chatten" und die Maschine bitten, Visualisierungen für uns zu erstellen, unter Verwendung der Rohdaten?

Also lautet mein Wunsch:

• ChatGPT und DALL E 2 in Excel integrieren.
• Den aktuellen Workflow zur Graphenerstellung durch einen ChatGPT-ähnlichen Workflow/eine Iteration ersetzen.
• Das war's :)

5) ChatGPT-Integration mit Word/Outlook

Das scheint die straightforwardste Integration zu sein, also möchte ich hier nicht viel sagen. In meiner Werbearbeit beschäftige ich mich mit vielen E-Mails und Dokumenten, und den richtigen Tone of Voice zu finden ist immer der schwierigste Teil. Also lautet mein Wunsch:

• Es in Word oder Outlook integrieren, sodass es den situativen Kontext und den Tone of Voice automatisch versteht. Bisher ist es meine größte Hürde, die Maschine dazu zu bringen, wie ich selbst zu klingen.
• Den Nutzern ermöglichen, die Maschine zu ähnlichen ChatGPT-Funktionen innerhalb von Word oder Outlook aufzufordern, aber mit dem Tone of Voice jeder Person.

Weitere Recherchen online / Nutzung von Youtube können viele andere coole Beispiele und Anwendungen zeigen, die sich Menschen ausgedacht haben, also höre ich hier auf. Eines ist sicher: Ich bin gespannt, was die Zukunft bringen kann. Ich freue mich darauf, diese Produkte auszuprobieren, wenn sie erscheinen, und zu lernen, wie ich die Maschine zu ihrem vollen Potenzial nutzen kann.

Alle oben genannten Beispiele sind mit der Microsoft 365-Produktsuite als Beispiel geschrieben, aber ich sehe keinen Grund, warum sie nicht auch mit anderen Produktivitätssoftware-Suiten von Google oder Zoom realisiert werden könnten. Ich habe keinen Einblick in das, was sie in diesem Bereich tun, also kann ich dazu nichts sagen.

6) Beispiele für die Integration von ChatGPT in Google Sheets oder Slides

Hier sind einige Beispiele dafür, wie ChatGPT in Google Sheets oder Slides integriert werden kann, um einfache Aufgaben zu erledigen. Ich stelle mir vor, dass der Workflow wesentlich intuitiver sein wird, wenn Bard nativ in Google Sheets oder Slides integriert ist.

ChatGPT API in Google Sheets – Beispiel

ChatGPT API in Google Slides – Beispiel

7) Microsoft-Ankündigung vom 16. März über Copilot 365

Etwas mehr als einen Monat nach diesem Artikel kündigte Microsoft Copilot 365 öffentlich an – das ist im Wesentlichen die Integration von OpenAI-Fähigkeiten in die Microsoft Office 365-Suite. Du kannst mehr darüber hier lesen. Im selben Artikel habe ich die verschiedenen Risiken zusammengefasst, die OpenAI in Bezug auf KI aus ihrem technischen Bericht zu GPT-4 erforscht.

Das war's von mir. Ich bin wirklich neugierig – welcher der oben genannten Anwendungsfälle würde dir in deiner täglichen Arbeit am meisten Zeit sparen? Oder gibt es etwas, das ich völlig übersehen habe? Lass es mich wissen!

Viele Grüße,

Chandler

P.S. Während ich hier nicht über das Umsatzpotenzial aus der obigen Integration spreche, bin ich sicher, dass Nutzerbegeisterung und -bindung zu weniger Churn und besserem Lifetime Value führen werden.