Entrer dans l'avenir : l'intégration d'OpenAI et ChatGPT avec Office 365

Maintenant que Microsoft a dévoilé son intégration d'OpenAI/ChatGPT avec Bing pour créer la nouvelle expérience Bing Search/Chat, il y a une autre grande catégorie sur laquelle Microsoft travaille mais qui n'est pas encore ouverte au public.

Il s'agit de l'intégration d'OpenAI/ChatGPT dans toutes les autres catégories de logiciels dans l'écosystème. (Yusuf l'a confirmé lors de l'événement de cette semaine).

Une catégorie évidente est la suite Microsoft Office 365. Je n'ai aucune idée de ce que Microsoft fait dans ce domaine, et je n'ai parlé à personne chez Microsoft ou OpenAI, mais j'ai quelques suppositions/souhaits éclairés basés sur ce que j'ai vu sur Internet. Dans le reste de cet article, je vais mettre en évidence certains cas d'usage que je pense devraient être inclus dans l'intégration :)

1) « Parler » (plus précisément chatter) à Excel/Tableur pour accomplir des tâches

Je dois l'admettre ; bien que j'aime être un ninja des tableurs, je ne le suis pas T.T

Je peux utiliser Google Sheets/Excel à un niveau intermédiaire, mais j'ai besoin de chercher beaucoup pour savoir comment utiliser de nombreuses fonctions. Même après avoir lu les exemples, il me faut encore un moment pour appliquer cette compréhension à la formule que j'essaie d'écrire. Donc l'idée qu'on puisse utiliser des instructions en langage naturel pour demander à Excel d'écrire des formules pour nous est brillante ! (Pour moi du moins :P)

Le fait que, dès maintenant avec ChatGPT, les gens peuvent déjà demander à ChatGPT d'écrire des fonctions Excel en langage normal (voir la vidéo Youtube de Kevin) signifie que quand OpenAI sera intégré nativement dans Excel :

• Cela devrait fonctionner encore mieux car OpenAI devrait comprendre le contenu/contexte du fichier, des cellules exactes.
• Nous n'aurions plus besoin d'interrompre le flux de travail en passant d'Excel à ChatGPT puis de copier la formule en retour. Tout peut être fait directement dans Excel.

J'espère que cette fonction sera également disponible avec Google Sheets bientôt car j'utilise Google Sheets plus souvent. (Si tu fais quelques recherches sur Youtube, tu peux trouver de nombreuses vidéos de personnes essayant « d'intégrer » l'API/les fonctions ChatGPT dans Google Sheets.)

2) Résumer le contenu des réunions et créer automatiquement des actions de suivi

Regarde cette vidéo de la chaîne MeeTime, où ils ont montré comment utiliser ChatGPT pour résumer la transcription d'une réunion. L'essentiel est :

• Pour les réunions en ligne utilisant Microsoft Teams ou Google Meet, ou la plupart des vidéos Youtube, la transcription peut être incluse automatiquement en direct ou après la réunion.
• Pourquoi ne pas utiliser ChatGPT pour résumer la transcription de la réunion et fournir un résumé exécutif ?
• La vidéo de MeeTime ne parle pas de demander à ChatGPT de générer automatiquement des actions de suivi et d'assigner des responsables, mais je ne vois pas comment ce serait trop difficile.

Donc voici ce que je demande quand OpenAI/technologie similaire sera intégré nativement à Microsoft Teams :

• Générer automatiquement le résumé exécutif de la réunion pour nous. Utiliser les participants à la réunion comme moyen de contrôler le niveau d'accès initial pour éviter que les informations ne soient partagées sans autorisation appropriée
• Créer automatiquement des actions de suivi et assigner un responsable à chaque élément basé sur la conversation dans la réunion
• Créer une invitation de calendrier douce (ou utiliser un mécanisme similaire) pour indiquer l'échéance de chaque tâche
• Etc…

Ce serait brillant car cela nous ferait gagner beaucoup de temps. Le flux de travail actuel avec ChatGPT est très fastidieux car :

• La limite de caractères t'empêche d'entrer la transcription entière dans une seule prompt et de demander à ChatGPT de la résumer. Essaie avec n'importe quelle vidéo de 30 minutes ou d'une heure, tu vois ce que je veux dire.
• Si tu alimentes ChatGPT d'une partie de la transcription à la fois à cause de la limite de caractères, le résumé/la signification du résumé pourrait changer significativement car ChatGPT ne « voit » pas l'image entière.

Bien sûr, ce qui précède peut s'appliquer à Google Meet ou d'autres plateformes.

Faites-le pour nous, s'il vous plaît :D brillants développeurs

3) ChatGPT + DALL-E 2 pour créer l'intégralité de la présentation

Nous savons déjà que ChatGPT est doué avec le texte et peut créer des plans et des narratives basés sur la commande de l'utilisateur. DALL-E-2 ou Stable Diffusion (dreamstudio) sont excellents pour les images/vidéos.

Ce serait encore mieux si les capacités de ChatGPT et DALL-E 2 étaient combinées dans un seul produit pour que nous puissions créer la présentation entière (y compris les images) pour nous.

J'utilise Stable Diffusion pour créer des images générées par IA depuis un certain temps. Mais le défi que je rencontre est de donner à la machine suffisamment de contexte pour qu'elle puisse ajuster l'image selon mes souhaits. De plus, l'interface DreamStudio gratuite actuelle ne permet pas cet ajustement itératif, similaire à la façon dont je peux demander à ChatGPT d'ajuster certaines parties du contenu textuel qu'il génère.

Donc voici ce que je demande :

• Intégrer non seulement OpenAI mais aussi DALL-E 2 (ou toute technologie similaire pour le texte et les images) dans PowerPoint ou d'autres logiciels de présentation.
• Permettre à l'utilisateur de co-créer la présentation avec la machine, y compris les narratives, le texte et les images d'accompagnement
• Permettre que le processus d'édition itératif se déroule via le chat pour chaque diapositive/image

Je n'ai pas encore eu l'occasion d'essayer Google Bard, et je ne suis pas sûr si Google développe sa version de DALL-E 2 ou Stable Diffusion, donc je ne peux pas commenter. Mais je sais que la demande est là pour nous aider à créer/modifier des présentations, pas seulement parmi les employés de bureau mais aussi chez les étudiants, les enseignants, les banquiers, les médecins, etc.

4) ChatGPT + DALL-E pour aider à la visualisation des données

Ce cas d'usage est une extension du n°3 mais avec la fonction de graphique tableur/excel. As-tu déjà souhaité créer de beaux graphiques clairs et faciles à comprendre à partir de chiffres ?

Pourquoi ne pas avoir l'intégration ChatGPT + DALL-E 2 avec Excel ou Google Sheets (ou tout autre programme de tableur) pour aider ? Mon estimation est que beaucoup de personnes ne veulent pas apprendre Python/R simplement pour créer des visualisations à partir d'un jeu de données.

Pourquoi ne peut-on pas simplement « parler » ou « chatter » avec la machine et lui demander de créer des visualisations pour nous, en utilisant les données brutes ?

Donc voici ce que je demande :

• Intégrer ChatGPT et DALL-E 2 dans Excel
• Remplacer le flux de travail actuel de génération de graphiques pour créer une visualisation avec un flux/itération de type ChatGPT
• C'est tout :)

5) Intégration de ChatGPT avec Word/Outlook

Cela semble être l'intégration la plus simple, donc je ne veux pas trop m'étendre ici. Dans mon travail publicitaire, je gère beaucoup d'e-mails et de documents, et trouver le bon ton est toujours la partie la plus difficile. Donc voici ce que je demande :

• L'intégrer dans Word ou Outlook pour qu'il comprenne le contexte situationnel et le ton de voix automatiquement. Jusqu'ici, faire sonner la machine comme moi est mon plus grand obstacle.
• Permettre aux utilisateurs d'inviter la machine à effectuer des fonctions similaires à celles de ChatGPT dans Word ou Outlook mais avec le ton de voix de chaque personne

Des recherches supplémentaires en ligne/sur Youtube peuvent montrer beaucoup d'autres exemples intéressants que les gens ont imaginés, donc je vais m'arrêter ici. Une chose est certaine : je suis enthousiaste à l'idée de ce que l'avenir peut apporter. J'ai hâte d'essayer ces produits quand ils sortiront et d'apprendre à exploiter la machine à son plein potentiel.

Tous les exemples ci-dessus sont écrits en utilisant la suite de produits Microsoft 365 comme exemple, mais je ne vois pas pourquoi ils ne pourraient pas être réalisés avec d'autres suites de productivité de Google ou Zoom. Je n'ai pas de visibilité sur ce qu'ils font dans ce domaine, donc je ne peux pas commenter.

6) Exemples d'intégration de ChatGPT dans Google Sheets ou Slides

Voici quelques exemples de la façon dont ChatGPT peut être intégré dans Google Sheets ou Slides pour effectuer des tâches simples. J'imagine que le flux de travail sera beaucoup plus intuitif quand Bard sera intégré nativement dans Google Sheets ou Slides.

Exemple d'API ChatGPT dans Google Sheets

Exemple d'API ChatGPT dans Google Slides

7) Annonce Microsoft du 16 mars sur Copilot 365

Un peu plus d'un mois après la publication de cet article, Microsoft a annoncé publiquement Copilot 365, qui est essentiellement l'intégration des capacités OpenAI dans la suite Microsoft Office 365. Tu peux en lire davantage ici. Dans le même article, j'ai résumé les différents risques qu'OpenAI explore concernant l'IA dans leur document technique sur GPT-4.

Voilà pour moi. Je suis vraiment curieux — lequel des cas d'usage ci-dessus te ferait gagner le plus de temps dans ton travail quotidien ? Ou y a-t-il quelque chose que j'ai complètement manqué ? Dis-moi !

Cordialement,

Chandler

P.S. Bien que je ne parle pas du potentiel de revenus des intégrations ci-dessus, je suis sûr que le plaisir des utilisateurs finaux et la fidélisation signifieront moins de désabonnements et une meilleure valeur vie client.