Comment réduire les biais des modèles NLP pour une meilleure analyse de texte (avec Dan Erickson de Viable)
Michael Luchen est rejoint par Dan Erickson, PDG et fondateur de Viable. Écoutez-les plonger profondément dans le sujet du traitement du langage naturel, un outil puissant qui aidera l'avenir de la gestion de produit.
Points forts de l'interview
- Dan travaille dans des startups du côté ingénierie depuis environ 15 ans maintenant. Au début de sa carrière, Dan était très concentré sur l'aide aux entreprises en phase de démarrage pour construire leur tout premier produit. [1:42]
- Dan est passé à des entreprises en croissance comme Yammer et Eaze. Il était VP de l'ingénierie chez Eaze et était CTO dans une entreprise appelée Getable. Puis, il y a quelques années, il a fondé Viable pour aider les entreprises à comprendre et à se connecter avec leurs clients. [2:06]
- Lorsque Dan a commencé l'entreprise, ils se sont appelés Viable Fit. Et ils étaient en fait concentrés sur l'aide aux entreprises en phase de démarrage pour trouver l'adéquation produit-marché en utilisant le cadre d'adéquation produit-marché superhumain. [2:34]
- Le traitement du langage naturel (NLP) est essentiellement un moyen d'aider un ordinateur à comprendre le langage humain. [4:02]
À un niveau élevé, le NLP consiste à comprendre le langage humain d'une manière que les ordinateurs peuvent utiliser pour extraire les bonnes informations.
Dan Erickson
- Au cœur de Viable se trouve leur moteur d'analyse qualitative, qui consiste en une combinaison de modèles internes et de modèles tiers, y compris GPT-3. [5:38]
- Une des fonctionnalités de Viable est l'analyse des thèmes. Cela consiste essentiellement à prendre un grand ensemble de données provenant de différentes sources et à regrouper ces éléments en thèmes. [6:19]
- Un des problèmes initiaux que Dan a rencontrés chez Viable est d'aider les entreprises à trouver l'adéquation produit-marché en utilisant le processus d'adéquation produit-marché superhumain. Ce qui consiste essentiellement à envoyer un sondage, collecter les réponses, lire chaque réponse, les regrouper en fonctionnalités ou points de douleur, puis utiliser cela pour guider la feuille de route. [9:02]
Chaque modèle de langage a un certain biais intégré, et c'est parce qu'il est formé sur des textes qui ont été écrits par des humains.
Dan Erickson
- Les humains sont intrinsèquement biaisés. Nous ne sommes pas des êtres entièrement rationnels. Et donc, parce que nous avons ce corpus de données sur lequel ces modèles sont formés, qui est très humain, nous allons finir par introduire ces biais humains dans ces modèles NLP à cause de cela. [11:14]
- Chez Viable, l'une des plus grandes choses qu'ils font est qu'ils forment en fait beaucoup de modèles par eux-mêmes avec des ensembles de données qu'ils ont eux-mêmes sélectionnés. [12:38]
- Chez Viable, ils ne s'entraînent pas sur les données de leurs clients. Ils ont généralement leurs propres ensembles de données qu'ils ont constitués. [13:47]
- Le raffinement existe dans la feuille de route de Viable. Le raffinement des modèles est définitivement une chose continue qu'ils font. [15:02]
Lorsqu'on parle de biais NLP, je pense qu'il est important de penser également aux biais présents dans tout processus actuel que le NLP va remplacer.
Dan Erickson
- Il est facile pour les humains de se laisser distraire par une chose spécifique qui devient leur projet favori. Le NLP ne souffre pas de cette forme particulière de biais. En gros, ce que cela vous permet de faire, c'est qu'au lieu d'avoir cette portée limitée du biais présent dans ces anecdotes, vous pouvez ensuite utiliser le NLP pour élargir votre perspective et voir plus de données. [17:09]
- À l'avenir, Viable aura des fenêtres de contexte beaucoup plus grandes. Ils commenceront à pouvoir traiter des dizaines de milliers de mots au lieu de quelques milliers seulement, ce qui augmentera considérablement la capacité du modèle à relier des concepts de plus en plus éloignés. [22:12]
- Pour les chefs de produit qui voient une opportunité d'intégrer un modèle NLP dans leur produit, le premier endroit pour commencer est les interfaces en langage naturel. [23:01]
- L'outil préféré de Dan qu'il utilise régulièrement est GitHub Copilot. [25:40]
Rencontrez notre invité
Dan Erickson est le PDG et fondateur de Viable.
Viable aide les entreprises à apprendre de leurs clients en agrégeant les retours clients à travers les canaux, en identifiant les thèmes et en analysant les retours pour produire des insights et des recommandations réels.
Viable prend en charge de nombreux canaux, tickets de travail, chat en direct, médias sociaux, sondages, avis sur les produits et applications, et transcriptions d'appels.
Dan et son équipe ont également levé un total de 9 millions de dollars auprès de Craft Ventures, Javelin Venture Partners, Streamlined Ventures, Meyer’s Capital, de nombreux investisseurs providentiels incroyables et de GPs en solo.
Continuez à écouter vos utilisateurs et laissez vos utilisateurs vous guider dans la bonne direction au lieu de vous concentrer uniquement sur votre propre intuition.
Dan Erickson
Ressources de cet épisode :
- Abonnez-vous à la newsletter The CPO Club
- Suivez Dan sur LinkedIn
- En savoir plus sur Viable
Articles et podcasts connexes :
- À propos du podcast The CPO Club
- Comment créer une feuille de route produit : 6 composants importants
- Guide de la feuille de route produit : Pourquoi c'est important et types que vous devriez connaître
- Comment créer une boucle de rétroaction client efficace pour les équipes produit ?
Lire la transcription :
Nous essayons de transcrire nos podcasts à l'aide d'un programme logiciel. Veuillez excuser toute faute de frappe car le bot n'est pas correct à 100 % du temps.
À vérifier également :
