Social Shoppable Recipe

Aanleiding

Albert Heijn wil haar klanten optimaal ondersteunen bij het ontdekken van nieuwe gerechten. Uit klantonderzoek blijkt dat veel klanten tegenwoordig inspiratie opdoen via sociale media, waar dagelijks foodvideo’s voorbijkomen. Deze video’s maken het makkelijk en leuk om nieuwe gerechten te ontdekken en direct te zien hoe ze worden bereid. Met Social Shoppable Recipe brengt Albert Heijn deze inspiratie nog een stap verder: foodvideo’s worden omgezet in duidelijke recepten en de ingrediënten worden direct gekoppeld aan het AH-assortiment. Zo kunnen klanten eenvoudig van inspiratie naar boodschappen doen én koken.

Aanpak

Voor dit project hebben wij gebruik gemaakt van verschillende AI-modellen om online recepten te vertalen naar een bruikbaar recept in de stijl en tone of voice van Albert Heijn. De klant kan een link van een Instagram- of TikTok food video plakken in de app, waarna de content automatisch wordt geanalyseerd. Daarbij worden de beschrijving, caption en de video meegenomen in de analyse. Vervolgens worden deze analyses samengevoegd, gecontroleerd, verbeterd en omgezet naar een recept dat bestaat uit ingrediënten, keukenspullen en een bereidingswijze. Tenslotte kunnen de ingrediënten met één klik op de knop worden toegevoegd aan Mijn Lijst.

Tech

Na het uploaden van een link worden de beschikbare bronnen van de pagina geanalyseerd: een audiobron, een videobron inclusief audio, en een beschrijvingsbron. Elk van deze bronnen wordt verwerkt door AI-modellen om zeer gedetailleerde beschrijvingen van de beschikbare content te genereren.

Op basis van die beschrijvingen worden de kernonderdelen van het recept gestructureerd: de ingrediëntenlijst, benodigde keukenapparatuur en bereidingsstappen. Deze worden samengevoegd tot één recept, die vervolgens door een geautomatiseerde self-check gaat om fouten en inconsistenties te verminderen. Tot slot wordt de tone of voice aangepast zodat de output inhoudelijk correct én consistent geformuleerd is.

Voor de verbeterfase is gekozen voor een agent-aanpak met twee afzonderlijke stappen: eerst worden verbeterpunten geïdentificeerd, daarna pas toegepast. Door die scheiding tussen analyse en uitvoering werd de kwaliteit van de uiteindelijke recept aanzienlijk nauwkeuriger en betrouwbaarder.

Resultaat

De proof of concept van Social Shoppable Recipe is enkele weken getest in het bèta-hoekje en in de Koken-tab van de Albert Heijn app. Deze test leverde veel positieve resultaten op en gaf waardevolle inzichten in hoe klanten de functionaliteit gebruiken. De opgedane learnings nemen we mee in de verdere implementatie, zodat we de oplossing nog beter kunnen laten aansluiten op de behoeften van onze klanten.