Van bewustwording tot kans: black swan events in internetmarketing

Black swan events zijn zeldzame gebeurtenissen met extreme gevolgen. Hoewel echte black swans niet te vergelijken zijn met gebeurtenissen in de online marketingwereld, komen onverwachte gebeurtenissen met een grote impact vaker voor dan gedacht. Welke inzichten en kansen bieden dergelijke gebeurtenissen de internetmarketeer?

Een black swan event

Een black swan event is een zeldzame gebeurtenis die nauwelijks voorkomt, maar vervolgens een extreem negatief of positief gevolg teweegbrengt. Een negatieve black swan is bijvoorbeeld een vliegtuigongeluk, tsunami of beurscrash. Heb je veel winst gemaakt door crypto’s, win je een loterij of gaat je nieuwe content viral, dan zou je dit kunnen schalen in de categorie positieve black swans.

In deze voorbeelden is de kans op die specifieke gebeurtenis erg klein (het komt nooit tot bijna nooit voor), maar is het gevolg (de impact) asymmetrisch groot. In dit blog ga ik het over deze categorie gebeurtenissen hebben.

In de internetmarketing wereld onderschatten we de frequentie van zeldzame gebeurtenissen ook.

Door de hindsight en availability bias onderschatten de frequentie dat zeldzame gebeurtenissen voorkomen. “People are surprised by catastrophes lying outside their anticipation, beyond their historical probability distributions.” -Eliezer Yudkowsky

Mijn Digital Advertising collega Tim ervoer een situatie waarbij de B2C zoekvolumes voor het onderwerp ‘dakonderhoud’ tijdens de storm van januari spikes van 1500% hoger dan gemiddeld vertoonden, tot wel vijf dagen daarna. Gevolg hiervan was dat er in een korte periode 15 keer zoveel budget was verbruikt, waardoor het maandbudget er in een aantal dagen doorheen was gegaan. Conversies stegen niet evenredig mee met het verhoogde B2C volume.  

Daar waar structureel onderhoud noodzakelijk is om je websiteperformance op peil te houden, kunnen black swans daar een grote, onvoorziene impact op hebben. Een verkeerde hotfix, een Google update of livegang van een nieuwe site kunnen onverwachts leiden tot minder conversies en dus tot minder omzet. Tot op zekere hoogte kun je deze gebeurtenissen niet voorkomen. Wat je wel kunt doen is trachten je downside te minimaliseren door bewust naar je performance afhankelijkheden te kijken.

Slim omgaan met je afhankelijkheden maakt meer robuust, en kan dus leiden tot conversie-optimalisatie in geval van een ‘mini black swan’ met (voor jou) significante gevolgen.  

Fragiliteit

Op 30 april 2018 had Schiphol behoorlijk last van een eenmalige stroomuitval. Consequenties: zesduizend gestrande passagiers. Het zal je maar gebeuren, niet op reis kunnen door een stroomstoring. Eigenlijk vinden we dat Schiphol dit risico gedekt moet hebben. Duidelijk is wel dat het systeem van Schiphol, en dus jouw vliegreis, afhankelijkheid is van stroom.

Volgens Nassim N. Taleb kenmerkt een fragiel systeem zich door sterke downside, en onmogelijke upside van willekeurige stressoren. Makkelijker gezegd is de kans op downside groot bij elke willekeurige gebeurtenis die zich in de toekomst kan voordoen.

 

Van fragiliteit naar antifragiliteit

 

Website performance is een fragiel iets: er hoeft maar wat te gebeuren en de gevolgen kunnen dramatisch zijn. Een website is fragiel ten opzichte van stroom en van een stabiele internet verbinding van jouw bezoeker. Fluctuatie in beide systemen zorgt altijd voor downside (een gefrustreerde bezoeker en een marketing manager die zijn targets niet haalt), en kan per definitie nooit voor upside zorgen (een bezoeker die meer tevreden is, of een marketing manager die meer conversies behaald).

Ook zijn top 3 keyword rankings fragiel voor Google updates. Rolt Google een update uit voor zijn algoritme, heb je gelimiteerde upside (je gaat wellicht van plaats drie naar twee), maar er is een kleine kans dat je rankings, ten gevolge van de update, kelderen als een baksteen. En daarmee keldert gelijk je binnenkomend organisch (goed converterend) verkeer. Het risico is gelijkmatig verdeeld voor elke SEO concurrenten, maar er is een kans dat jouw specifieke keyword rankings onevenredig hard getroffen worden. Verzekering tegen dit risico wordt je door de afhankelijkheid van Google’s monopolie ook nog eens lastig gemaakt (je kunt wel hedgen met Bing).

Hoe zorgt A/B testing voor conversieverhoging?

In een A/B test laat je 50% van het verkeer een andere variant zien dan het origineel. Met A/B testing maak je eigenlijk gebruik van het random gedrag en de diversiteit van je bezoekers, om zo een voorspellende uitspraak te genereren over het toekomstig gedrag van deze doelgroep. Je gebruikt willekeurigheid in jouw voordeel en hier wordt jouw website performance beter door.  

Een positief A/B test resultaat is een positieve black swan

Sinds een A/B test maar voor een beperkte tijd live staat, worden smalle fouten (small errors) gecorrigeerd bij een verslechtering van de resultaten: een variant die slechter presteert wordt uiteraard offline gehaald. Je downside is dus gelimiteerd. Presteert een variant statistisch beter, dan kan deze theoretisch gezien voor eeuwig live worden gezet, en genereer je met je vondst een positieve black swan.  

Positieve black swans hebben vervolgens weer invloed op de performance van de website in zijn geheel. Dit zorgt ervoor dat je exponentiële groei kan realiseren, omdat je van het Compound effect (rente op rente) gebruik maakt als je verbetering op verbetering realiseert.

Praktische aanbevelingen voor het managen van tail risk

Theorie uit de weg, wat kunnen we hiermee? Ten eerste: start met conversie-optimalisatie en vooral met A/B testing. Ten tweede: begrijpelijk ga je niet hedgen tegen stroomuitval.

Kijken we naar afhankelijkheid en de nadelen daarvan, kunnen we nagaan waar  jouw performance het meest afhankelijk van is. Misschien komt 60% van je online omzet uit affiliate verkeer, en wordt het tijd dat je gaat kijken wat je SEO technisch kunt verbeteren (mogelijk ook ter voorbereiding op je affiliatepartner afspraken van volgend jaar).

Daar waar optimalisatie on-site en in alle marketingkanalen super belangrijk is (het verbeteren van die zaken die goed gaan), kunnen we identificeren waar jouw grote afhankelijkheden liggen als het gaat om de performance van jouw website. Mocht er dan onvoorzien *plots* iets veranderen of gebeuren in dat domein, dan ben je daar in ieder geval deels op voorbereid. De performance die je dan vervolgens niet verliest, kun je dan schalen onder conversie-optimalisatie.   

Hieronder staan een aantal online marketing situaties beschreven waarvan we verwachten dat ze gewoon door zullen gaan zoals ze altijd zijn gegaan, maar waar er in werkelijkheid een kleine kans is op gebeurtenis met een grote impact.

Strategisch

  • Afhankelijkheid van één (online) marketingkanaal, vergelijker en/of affiliate partij maakt je kwetsbaar voor toekomstige gebeurtenissen in dat specifieke kanaal, vergelijker of affiliate partij. Het hoeft niet veel te kosten om een deel van je focus en budget in te zetten op een alternatief kanaal, zodat algemene performance minder wegzakt als het best scorende marketingkanaal om onvoorziene reden het minder goed doet.
    • Verplichting tot het lanceren van nieuwe websites op verzoek van bovenaf de organisatie. Een website is nooit af, er is een reden dat grote partijen vrijwel nooit overgaan tot een compleet andere website. De verplichte lancering van een nieuwe site kan vernietigend aflopen als hij niet beter presteert dan de oude site.

Kennis  

  • Afhankelijkheid van specialistische online marketing of technische kennis: zorg dat er nooit maar één persoon ‘alles weet’ van één bepaald proces of een bepaalde tool.  
    • Zo zou de kennis van inloggen en pauzeren van een A/B test onder meerdere personen in een organisatie bekend moeten zijn.
    • Zorg dat je voor technische aanpassingen op de website niet compleet webbouwer afhankelijk bent. Een hotfix of technische release zou idealiter zowel intern als extern uitgevoerd moeten kunnen worden.  

Richtlijnen en wettelijke voorwaarden

  • Afhankelijkheid van richtlijnen of wettelijke voorwaarden maakt kwetsbaar voor een wijziging in die specifieke richtlijn of voorwaarde.
    • GDPR: ben je GDPR compliant? De nieuwe wetgeving ging 25 mei 2018 in. Geen aandacht besteden aan GDPR compliance scheelt op korte termijn tijd en geld, maar voldoe je niet aan de richtlijn en wordt je gecontroleerd, dan kan het tot 4% van je wereldwijde jaaromzet kosten (lange termijn negatieve impact).
    • Wettelijke voorwaarden: boetes blijven nog lange tijd in het nieuws, en zorgen voor reputatieschade. De boete voor Daisycon is recent verlaagd, maar kwam bij veel lezers weer vers in het geheugen. Overtredingen zijn overbodig, en kosten op lange termijn tijd, geld en reputatie.  

Tijd

  • Afhankelijkheid van tijd: moeten voldoen aan krappe deadlines voor releases, blogs, stukken content of campagnes.
    • We kennen allemaal de situatie dat er binnen een bepaalde tijd een campagne live gezet moet worden of dat een stuk content geschreven moeten worden voor vrijdagmiddag 17.00 uur. Een krappe deadline heeft een asymmetrisch effect op de kwaliteit.
    • Door releases en A/B test starts aan het begin van de dag en het begin van de week te doen, kun je tussentijds bijsturen als blijkt dat zaken (technisch or otherwise) niet naar wens verlopen. 
    • Zet geen grote website aanpassingen op de website live zonder dit te A/B testen. Vaak zien we nog dat aanpassingen omwille van tijd toch live worden gezet, waarmee je vertrouwt op je onderbuik gevoel.

Budget

  • Afhankelijkheid van budget: inflexibele jaarbudgetten en potjes maakt gevoelig voor onverwachte gebeurtenissen. 
    • Display advertising: bij een onverwachte ramp of nieuwsgebeurtenis schiet het volume en irrelevantie omhoog, en daarmee asymetrisch je kosten en opbrengsten.
    • SEA: je kunt je Adwords account beschermen door het instellen van maximaal dagbudget tegen extreme spikes in zoekvolume. Dit heeft zijn voordelen, maar misschien is het juist het overwegen waard om ieder jaar budget ruimte te reserveren voor een offline, externe gebeurtenis die extreme spikes in zoekvolume teweegbrengt, zodat je hiervan juist kunt profiteren.  

Conclusie

Maximale websiteperformance en conversie-optimalisatie wordt niet alleen bewerkstelligd door onderzoek en een goed opgezet conversie-optimalisatie traject, maar ook door te kijken naar afhankelijkheden en worst case scenario’s.

Het voorspellen van gebeurtenissen in het internet marketing landschap, negatief of positief, is lastig. Wat je wel kunt doen, is nagaan waar jouw website performance afhankelijk van is, en wat je worst case scenario’s zijn. Zo kun je elk aspect van je marketing en website onder een loep bekijken, en speculeren wat mogelijke gevolgen kunnen zijn in de toekomst in geval van die worst case scenario’s.

Realiseer je dat zeldzame gebeurtenissen vaker voorkomen dat je kan inschatten (availability bias) en dat optimale website performance per definitie fragiel is: het is afhankelijk van veel factoren, en het continue monitoren en bijsturen van onderdelen.

Bronnen

-Cognitive Biases Potentially Affecting Judgment of Global Risks. Eliezer Yudkowsky, 2008. Machine Intelligence Research Institute.