Proffstips för att bygga upp dina färdigheter inom AI-produktledning

I en tid där AI förändrar branscher i snabb takt hör produktroller med AI-funktioner till de mest eftertraktade inom teknik. Om du vill ta dig in i denna sfär eller utveckla dina befintliga färdigheter kan det vara mycket värdefullt att förstå resan och strategierna hos dem som leder utvecklingen.

I det här avsnittet får Hannah Clark sällskap av Lorilyn McCue – AI-produktchef på Superhuman – som delar med sig av sina insikter om hur man navigerar i det AI-produktledningslandskap som ständigt utvecklas.

Höjdpunkter från intervjun

  • Lorilyns karriärresa och viktigaste färdigheter [01:06]
    • Lorilyn inledde sin karriär som Apache-helikopterpilot i armén, där hon tjänstgjorde i sex år.
    • Därefter undervisade hon i idrott på West Point.
    • Efter att ha lämnat armén gick hon på handelshögskola.
    • Hon började på Slack som produktchef, först i tillväxtteamet och därefter i plattformsteamet.
    • Senare arbetade hon på maskininlärningsstartupen Impira.
    • För närvarande är Lorilyn ledande AI-produktchef på Superhuman.
  • AI på Superhuman: förbättrad användarupplevelse [02:08]
    • Lorilyn uppskattar AI:s förmåga att spara tid åt användarna, så att de kan fokusera på viktiga uppgifter.
    • Hon berättar om en händelse från Irak, där en Apache-helikopterflygning under ett händelsefattigt uppdrag tydliggjorde ineffektiviteten i repetitiva uppgifter.
    • Ett mer engagerande uppdrag visade henne värdet av att använda teknik för komplexa uppgifter i stället för vardagliga sådana.
    • Hon kopplar detta till AI, som hanterar rutinuppgifter så att användarna kan fokusera på meningsfullt arbete.
    • Superhumans funktion ”direktsvar” sparar till exempel användarna två minuter per e-postmeddelande genom att automatisera rutinmässiga svar.
    • Detta ”aha”-ögonblick bekräftade AI:s roll i att avlägsna slavgöra och förbättra produktiviteten.

AI kan befria dig från slavgörat. Tilldela alla rutinmässiga uppgifter till AI, låt det cirkla över basen i tre timmar och gå själv och gör det roliga.

Lorilyn McCue
  • Karriärutveckling och AI-integrering [04:19]
    • Lorilyn prioriterar att optimera för lärande, en lärdom som förstärktes på Slack och som är avgörande inom AI.
    • Superhumans funktion ”Fråga AI” låter användarna ställa frågor direkt, vilket sparar tid vid sökningar.
    • Teamet hade ursprungligen planerat att det skulle ta tre månader, men lanserade en preliminär version efter en månad för att samla in feedback.
    • Den stegvisa lanseringen – först till AI-teamet, sedan internt och slutligen till betaanvändare – gav insikter som formade den slutliga produkten.
    • Iterativ utveckling var avgörande och gjorde det möjligt för teamet att anpassa sig och skapa en mer effektiv produkt baserad på användarnas beteende.
    • AI:s oförutsägbara natur kräver upprepade inlärningscykler för att anpassas till användarnas behov.

AI är ett så okänt område att du ofta inte har någon aning om hur människor kommer att använda det. Därför måste du optimera för lärande. Du måste lansera lite i taget, sedan iterera och upprepa processen.

Lorilyn McCue
  • Vikten av sömlös AI-integrering [06:46]
    • Lorilyn betonar vikten av att integrera AI djupt i produktdesignen och undvika att det känns som ett "tillägg".
    • En idealisk AI-integrering gör att funktionerna känns naturliga och inte uppfattas som ”AI” av användarna.
    • Superhumans funktion "Instant Event" illustrerar detta tillvägagångssätt genom att låta användare skapa kalenderhändelser från e-postmeddelanden med ett enda klick.
    • Inledningsvis fanns funktionen på en mindre lättillgänglig plats i testsyfte, via Superhumans kommandomeny, "Command K".
    • Efter tester och lärdomar från feedback flyttade teamet den till mer intuitiva platser, till exempel en knapp i e-postmeddelanden och en kalendergenväg.
    • Denna sömlösa integrering gör att AI-funktionerna känns användbara och lättillgängliga när de behövs.
    • Funktionen "Instant Event" gör det nu möjligt för användare att skapa händelser genom att helt enkelt klicka på datum i e-postmeddelanden, där markören ändras till en handikon för att signalera denna åtgärd.
    • Funktionen testades ursprungligen i kommandomenyn men är nu fullt integrerad för att underlätta användningen.
    • Användarna upptäcker och använder funktionen naturligt utan uttryckliga instruktioner, vilket stämmer överens med Lorilyns mål för sömlös AI-integrering.
  • Optimering av AI för snabbhet och precision [10:54]
    • Superhuman prioriterar proaktiva funktioner som automatiska sammanfattningar och direktsvar och visar dem omedelbart för användarnas bekvämlighet.
    • Funktionen för automatiska sammanfattningar ger en sammanfattning på en rad av varje e-postmeddelande, vilket möjliggör snabbare åtkomst till information utan att användaren behöver vidta någon åtgärd.
    • För direktsvar ställdes teamet inför en avvägning mellan en "sköldpaddsbot" (smart men långsam) och en modell som en "snabb, tafatt farbror" (snabb men mindre träffsäker).
    • Trots sköldpaddsbotens högre kvalitet valde teamet den snabbare modellen och prioriterade snabbhet och användarupplevelse.
    • De finjusterade den snabbare modellen för att förbättra precisionen och säkerställa att svaren är snabba och rimligt träffsäkra.
    • Att balansera kvalitet och snabbhet är avgörande när man beslutar om funktioner ska vara proaktiva eller initieras av användaren.
  • Tekniskt beslutsfattande inom AI [14:24]
    • Lorilyn använder ett verktyg för att jämföra flera promptar och modeller sida vid sida och bedömer prestandan med verkliga data.
    • Hon skapar ett dataset från intern användarfeedback (tummen upp/ner) för att återspegla verkliga scenarier.
    • Utvärderingarna fokuserar på latens, med målet att svar ska komma inom 1–2 sekunder för att tillgodose användarnas behov.
    • Genom upprepade tester identifierar hon problem (till exempel feltolkning av sammanhanget i svar) och förfinar promptarna för att förbättra precisionen.
    • Iterativa tester hjälper till att fastställa framgångskriterier, balansera snabbhet med precision och klargöra vilka specifika typer av precision som behövs.
  • Att bemästra promptteknik [16:38]
    • Lorilyn utvecklade sina färdigheter inom promptteknik genom att lära sig i arbetet och experimentera.
    • Ibland sökte hon efter specifika lösningar på nätet.
    • Hon fick också tips från OpenAI, som att använda tekniker såsom kommandon med enbart versaler, upprepa instruktioner och inkludera exempel med ett enda exempel.
    • Finjusteringen innebar att lägga till exempel för att hantera svåra fall och förbättra precisionen.
    • Lorilyn använde en teknik där hon lät LLM-modellen förklara sitt resonemang för att förfina promptarna.
    • Hon kunde till exempel fråga LLM-modellen vem den svarade till och varför.
    • Denna process avslöjade missförstånd i LLM-modellens svar, vilket gjorde det möjligt för henne att göra specifika justeringar av promptarna.
    • Metoden "förklara dig" bidrog till att tydliggöra LLM-modellens tankeprocess och underlättade en mer effektiv finjustering av promptarna.
  • Affärsutmaningar vid AI-integrering på Superhuman [18:54]
    • Att integrera AI i Superhuman innebar att balansera komplexitet och utmaningar.
    • Lorilyn jämförde AI-modeller: GPT-4 (långsam men hög kvalitet) kontra GPT-3.5 (snabbare men mindre intelligent).
    • Inledningsvis innebar GPT-4:s långsamhet betydande utmaningar för att skala upp sammanfattningen av e-postmeddelanden.
    • Superhuman prioriterade kvalitet och användarnas behov, med hänsyn till snabbhet och korrekthet.
    • De valde GPT-3.5 för bättre latens och använde samtidigt promptteknik för att uppfylla kvalitetskraven.
    • Affärsfokus låg på att säkerställa att användarnas behov tillgodosågs, oavsett kostnader.
  • Praktiskt lärande och praktiska AI-färdigheter [20:54]
    • Praktiskt lärande är avgörande för produktledning inom AI.
    • Det är viktigt att hålla sig uppdaterad om veckans trender och lanseringar.
    • Experimentera med AI-verktyg i vardagen för att få praktisk förståelse.
    • Exempel: Använd ChatGPT för att skapa anpassade målarbilder för barn.
    • Tillämpa AI i yrkesmässiga sammanhang, till exempel för att skapa kortfattade användarverktygstips.
    • Att engagera sig i ny teknik förbättrar kunskapen om AI:s möjligheter.
    • Ingen specifik kurs behövs; praktisk tillämpning är avgörande.

Möt vår gäst

Lorilyn McCue är AI-produktchef på Superhuman, den mest produktiva e-postappen som någonsin skapats.  Tillsammans med Superhumans vd Rahul Vohra har Lorilyn hjälpt till att skapa och förverkliga företagets AI-produktstrategi genom att ta fram eleganta och praktiska funktioner som gör det möjligt för användare att göra allt från att skriva e-postutkast med sin egen röst och ton till att sammanfatta långa trådar och använda sökning med naturligt språk för att enkelt hitta saker i inkorgen. Innan Lorilyn började på Superhuman arbetade hon i produktteam på Slack och Impira, en AI-startup som förvärvades av Figma. 

Lorilyn har tagit en fascinerande och okonventionell väg till produktledning. 

Hon tjänstgjorde i militären i ett decennium, flög Apache-helikoptrar i Irak och undervisade kadetter vid West Point innan hon bestämde sig för att byta karriär och bli produktpraktikant på Google i början av 30-årsåldern. Hon har en kandidatexamen från West Point och en MBA från Stanford. 

foto av Lorilyn McCue

Det är något med att använda AI i vardagen som ger en kunskap och förståelse för vad som är möjligt.

Lorilyn McCue

Resurser från det här avsnittet:

You may also like