Gegevens genereren voor machinaal leren

In recente columns heb ik mijn mening gegeven over de kwaliteit van de gegevens die veel bedrijven in hun datawarehouses, -meren of -moerassen hebben staan. Mijn ervaring is dat de meeste gegevens die bedrijven zo zorgvuldig hebben opgeslagen nutteloos zijn en nooit enige waarde voor het bedrijf zullen genereren. De gegevens die wel potentieel bruikbaar zijn, vereisen vaak enorme hoeveelheden voorbewerking voordat ze bijvoorbeeld voor machine learning kunnen worden gebruikt. Als gevolg hiervan wordt in de meeste data science teams meer dan 90 procent van alle tijd besteed aan het voorbewerken van de gegevens voordat ze zelfs maar kunnen worden gebruikt voor analytics of machine learning.

In een artikel dat we onlangs hebben ingediend, hebben we dit probleem bestudeerd voor systeemlogs. Vrijwel elk software-intensief systeem genereert gegevens die de toestand en belangrijke gebeurtenissen in het systeem op belangrijke tijdstippen vastleggen. De uitdaging is dat aan de ene kant de gegevens die worden vastgelegd in logs bedoeld zijn voor menselijke consumptie en dus een grote variabiliteit bevatten in de structuur, inhoud en type van de informatie voor elke logboekvermelding. Anderzijds is de hoeveelheid gegevens die is opgeslagen in logs vaak fenomenaal groot. Het is niet ongewoon dat systemen gigabytes aan gegevens genereren voor zelfs maar één enkele operationele dag.

Het voor de hand liggende antwoord op dit raadsel is om machine learning te gebruiken om de relevante informatie uit de systeemlogs af te leiden. Deze aanpak kent een aantal belangrijke uitdagingen vanwege de manier waarop logs worden gegenereerd. Op basis van ons onderzoek in de literatuur en bedrijfscases hebben we verschillende uitdagingen geïdentificeerd.

Door de aard van de gegevensgeneratie vereisen de logbestanden uitgebreide voorbewerking, wat de waarde vermindert. Het komt ook vaak voor dat meerdere systeemprocessen in hetzelfde logbestand schrijven, wat tijdreeksanalyse en andere machine learning technieken die uitgaan van sequentiële data bemoeilijkt. Omgekeerd genereren veel systemen meerdere soorten logbestanden en voor het vaststellen van een betrouwbare grondwaarheid is het nodig om gegevens uit meerdere logbestanden te combineren. Deze logbestanden bevatten vaak gegevens op fundamenteel verschillende abstractieniveaus, wat het trainen van modellen voor machinaal leren bemoeilijkt. Als we eenmaal in staat zijn om machine learning modellen toe te passen op de voorbewerkte gegevens, vereist de interpretatie van de resultaten vaak uitgebreide domeinkennis. Ontwikkelaars zijn vrij om nieuwe code aan het systeem toe te voegen die logboekvermeldingen in ad-hoc formaten genereert. Het veranderende formaat van logbestanden bemoeilijkt het gebruik van meerdere logs voor het trainen van machine-learning modellen, omdat de logs niet noodzakelijkerwijs vergelijkbaar zijn. Tot slot, alle tools die gebouwd zijn om logbestanden te verwerken, zoals geautomatiseerde parsers, falen onvoorspelbaar en zijn erg broos, waardoor constant onderhoud nodig is.

We hebben het probleem specifiek bestudeerd voor systeemlogs, maar mijn ervaring is dat onze bevindingen vrij typerend zijn voor vrijwel elk type geautomatiseerde gegevensgeneratie. Hoewel dit een enorm probleem is voor bijna alle bedrijven waar ik mee werk en er enorme hoeveelheden middelen worden besteed aan het voorbewerken van gegevens om er waarde uit te halen, is het een verloren strijd. De hoeveelheid gegevens die wordt gegenereerd in elk product, door klanten, in het hele bedrijf, enzovoort, zal alleen maar toenemen. Als we dit probleem niet aanpakken, zal elke datawetenschapper, ingenieur en wiskundige binnenkort weinig anders meer doen dan data voorbewerken.

'Data should be generated in such a way that preprocessing isn’t required at all'

De oplossing, zoals we die in het artikel voorstellen, is vrij eenvoudig: in plaats van eerst de gegevens te genereren en ze dan voor te bewerken, moeten we software bouwen om gegevens te genereren in een formaat dat helemaal geen voorbewerking vereist. Alle gegevens moeten zo worden gegenereerd dat ze onmiddellijk en automatisch kunnen worden gebruikt voor machinaal leren. Bij voorkeur zonder menselijke tussenkomst.

Het bereiken van dit doel is iets ingewikkelder dan wat ik in deze post kan schetsen, maar er zijn een aantal belangrijke elementen die volgens mij gemeenschappelijk zijn voor elke benadering die dit doel nastreeft. Ten eerste moeten alle gegevens numeriek zijn. Ten tweede moeten alle gegevens van het nominale type (verschillende elementen hebben geen volgorde of relatie tot elkaar) een-hot gecodeerd zijn, wat betekent dat de elementen worden weergegeven in een binaire tekenreeks die net zo lang is als het aantal elementtypes. Ten derde kunnen gegevens van het ordinale type dezelfde aanpak gebruiken of, in het geval van niet-dichotome gegevens, een verscheidenheid aan coderingen. Ten vierde moeten interval- en ratiogegevens worden genormaliseerd (in kaart gebracht naar een waarde tussen 0 en 1) voor optimaal gebruik door machine- en deep-learningalgoritmen. Ten vijfde moet, waar nodig, de statistische verdeling van de gegevens in kaart worden gebracht naar een standaard Gaussiaanse verdeling voor betere trainingsresultaten.

Om dit te bereiken op het moment dat gegevens worden gegenereerd, moeten ingenieurs en ontwikkelaars mogelijk samenwerken met datawetenschappers. Daarnaast vraagt het om afstemming binnen de hele organisatie, wat tot nu toe niet nodig was. Door dit te doen, kunnen bedrijven echter systemen bouwen die volledig autonoom modellen voor machine learning kunnen verzamelen, trainen en hertrainen en deze kunnen inzetten zonder menselijke tussenkomst (zie de figuur).

Systeemregistratie voor machinaal leren

Concluderend zijn de meeste gegevens in de meeste bedrijven nutteloos omdat ze op de verkeerde manier zijn gegenereerd en zonder de juiste structuur, codering en standaardisatie. Vooral voor het gebruik van deze gegevens in het trainen van modellen voor machinaal leren is dit problematisch, omdat het uitgebreide hoeveelheden gegevensvoorbewerking vereist. In plaats van onze activiteiten op het gebied van gegevensvoorbewerking te verbeteren, moeten we gegevens genereren op een manier die voorbewerking helemaal overbodig maakt. Datawetenschappers en -ingenieurs zouden er baat bij hebben als ze zich zouden richten op hoe gegevens gegenereerd moeten worden. In plaats van achteraf te proberen de rommel op te ruimen, moeten we om te beginnen proberen geen rommel te maken.

AI is GEEN analyse van grote gegevens

In het big data tijdperk was een van de belangrijkste uitgangspunten voor het succesvol realiseren van je big data strategie het creëren van een centraal datawarehouse of data lake waar alle gegevens werden opgeslagen. De data-analisten konden dan naar hartenlust hun analyses uitvoeren en relevante correlaties, uitschieters, voorspellende patronen en dergelijke vinden. In dit scenario draagt iedereen zijn gegevens bij aan het data lake, waarna een centrale data science-afdeling deze gebruikt om, meestal uitvoerende, ondersteuning te bieden bij het nemen van beslissingen (figuur 1).

Figuur 1: Iedereen draagt zijn gegevens bij aan het data lake, waarna een centrale data science-afdeling deze gegevens gebruikt om, meestal uitvoerende, ondersteuning te bieden bij het nemen van beslissingen.

 

Hoewel dit er in theorie geweldig uitziet, is de realiteit in veel bedrijven natuurlijk heel anders. We zien ten minste vier uitdagingen. Ten eerste vereist het analyseren van gegevens van producten en klanten in het veld vaak aanzienlijke domeinkennis die datawetenschappers op een centrale afdeling meestal ontberen. Dit leidt gemakkelijk tot onjuiste interpretaties van gegevens en dus tot onnauwkeurige resultaten.

Ten tweede doen verschillende afdelingen en groepen die gegevens verzamelen dit vaak op verschillende manieren, wat resulteert in gegevens die er ongeveer hetzelfde uitzien maar een verschillende semantiek hebben. Dit kunnen kleine verschillen zijn, zoals de frequentie waarmee gegevens worden gegenereerd, bijvoorbeeld seconden, minuten, uren of dagen, maar ook veel grotere verschillen, zoals gegevens over individuele producten in het veld versus vergelijkbare gegevens over een hele productfamilie in een specifieke categorie. Omdat datawetenschappers op een centrale afdeling vaak proberen om gegevens uit verschillende bronnen met elkaar in verband te brengen, kunnen er gemakkelijk onjuiste conclusies worden getrokken.

Ten derde, vooral door de toenemende toepassing van DevOps, zal zelfs dezelfde bron na verloop van tijd andere gegevens genereren. Als de software evolueert, verandert de manier waarop gegevens worden gegenereerd meestal mee, wat leidt tot soortgelijke uitdagingen als hierboven beschreven. Het resultaat is dat de belofte van het big data tijdperk niet altijd uitkomt bij bedrijven en bijna nooit in de volle omvang die werd verwacht bij de start van het project.

Tot slot, om waarde te halen uit big data analytics heb je een sterke data science skillset nodig en er zijn gewoon niet zoveel mensen die deze skillset hebben. Het is een hele uitdaging om je bestaande personeel te trainen in data science-vaardigheden en het is zeker moeilijker dan om engineers en ontwikkelaars te trainen in machine learning.

'Every team, business unit or product organization can start with AI'

Velen in de sector zijn van mening dat toepassingen voor kunstmatige intelligentie, en in het bijzonder machine- en deep-learningmodellen, met dezelfde uitdagingen te kampen hebben. Maar hoewel zowel data analytics als ML/DL-modellen sterk gebaseerd zijn op gegevens, is het belangrijkste verschil dat er voor ML/DL geen gecentraliseerd datawarehouse hoeft te worden opgezet. In plaats daarvan kan elk team, bedrijfsonderdeel of productorganisatie aan de slag met AI zonder uitgebreide coördinatie met de rest van het bedrijf.

Elk bedrijfsonderdeel kan zijn eigen ML/DL-modellen bouwen en deze implementeren in het systeem of de oplossing waarvoor ze verantwoordelijk zijn (afbeelding 2). De gegevens kunnen afkomstig zijn van het data lake of van de lokale oplossingen voor gegevensopslag, dus je hoeft niet eens te hebben gekozen voor de aanpak van gecentraliseerde gegevensopslag voordat je begint met het gebruik van ML/DL.

Afbeelding 2: Elke business unit kan zijn eigen ML/DL-modellen bouwen en deze implementeren in het systeem of de oplossing waarvoor ze verantwoordelijk zijn.

Concluderend, AI is **niet** data analytics en vereist niet dezelfde randvoorwaarden. In plaats daarvan kun je vandaag al beginnen met de gegevens die je beschikbaar hebt, zelfs als jij en je team maar aan één functie of subsysteem werken. Kunstmatige intelligentie en vooral deep learning bieden geweldige mogelijkheden om kosten te verlagen en nieuwe zakelijke kansen te creëren. Het is de meest opwindende technologie die in misschien wel tientallen jaren tot wasdom is gekomen. In plaats van te wachten tot de rest van de wereld je inhaalt, kun je vandaag beginnen met het gebruik van AI en DL.

Waarom je gegevens nutteloos zijn

Vrijwel alle organisaties waar ik mee werk hebben terabytes of zelfs petabytes aan gegevens opgeslagen in verschillende databases en bestandssystemen. Er is echter een interessant patroon dat ik de afgelopen maanden ben gaan herkennen. Aan de ene kant zijn de gegevens die worden gegenereerd bijna altijd bedoeld voor menselijke interpretatie. Bijgevolg staan er veel alfanumerieke gegevens, opmerkingen en andere ongestructureerde gegevens in deze bestanden en databases. Aan de andere kant is de omvang van de opgeslagen gegevens zo fenomenaal groot dat een mens er onmogelijk kop of staart aan kan knopen.

Het gevolg is dat er enorme hoeveelheden tijd nodig zijn om de gegevens voor te bewerken om ze bruikbaar te maken voor het trainen van machine-learningmodellen of voor inferentie met behulp van al getrainde modellen. Datawetenschappers bij een aantal bedrijven hebben me verteld dat zij en hun collega’s hier meer dan 90 procent van hun tijd en energie aan besteden.

'Most of the data is mud pretending to be oil'

Voor de meeste organisaties is de enige manier om enige waarde te genereren uit de enorme hoeveelheden gegevens die zijn opgeslagen op hun servers, dan ook om er heel veel personeel tegenaan te gooien. Omdat de business case om dit te doen vaak onduidelijk of onvoldoende is, is de enige logische conclusie dat de overgrote meerderheid van de gegevens die bij bedrijven zijn opgeslagen gewoon nutteloos zijn. Het is dood gewicht en zal nooit enige relevante bedrijfswaarde genereren. Hoewel het gezegde luidt dat “gegevens de nieuwe olie zijn”, is de realiteit dat de meeste gegevens modder zijn die doet alsof het olie is.

Zelfs als de gegevens relevant zijn, zijn er verschillende uitdagingen verbonden aan het gebruik ervan in analytics of machine learning. De eerste is actualiteit: als je een dataset hebt van bijvoorbeeld klantgedrag die 24, 12 of zelfs maar 6 maanden oud is, is het zeer waarschijnlijk dat je klantenbestand geëvolueerd is en dat voorkeuren en gedrag veranderd zijn, waardoor je dataset ongeldig wordt.

Ten tweede, vooral in bedrijven die vaak nieuwe software uitbrengen, zoals bij het gebruik van DevOps, is het probleem dat bij elke softwareversie de manier waarop gegevens worden gegenereerd kan zijn veranderd. Vooral als de gegevens worden gegenereerd voor menselijk gebruik, bijvoorbeeld engineers die systemen in bedrijf debuggen, is het tijdrovend om datasets samen te voegen die door verschillende versies van de software zijn geproduceerd.

Ten derde worden in veel organisaties continu meerdere gegevenssets gegenereerd, zelfs door hetzelfde systeem. Om de informatie af te leiden die echt relevant is voor het bedrijf, moeten vaak gegevens uit verschillende sets worden gecombineerd. De uitdaging is dat verschillende gegevenssets mogelijk niet dezelfde manier van tijdstempelen gebruiken, gegevens op zeer verschillende abstractieniveaus en frequentie kunnen opslaan en op zeer onvoorspelbare manieren kunnen evolueren. Hierdoor kost het combineren van gegevens veel moeite en is automatisering die voor dit doel is ontwikkeld erg broos en zal waarschijnlijk onvoorspelbaar falen.

Mijn belangrijkste boodschap is dat we, in plaats van ons te richten op het voorbewerken van gegevens, veel meer tijd en aandacht moeten besteden aan hoe de gegevens in eerste instantie worden geproduceerd. Het doel moet zijn om gegevens zo te genereren dat ze helemaal geen voorbewerking nodig hebben. Dit opent een groot aantal gebruikssituaties en mogelijkheden die ik in toekomstige artikelen zal bespreken.

Concluderend: ondanks alle aandacht voor gegevens, is het een feit dat de meeste gegevens in de meeste bedrijven nutteloos zijn of onbetaalbare hoeveelheden menselijke inspanning vereisen om de waarde die ze bevatten te ontsluiten. In plaats daarvan moeten we ons richten op hoe we gegevens genereren. Het doel moet zijn om dat op zo’n manier te doen dat de gegevens zonder enige voorbewerking kunnen worden gebruikt voor analyses en machine learning. Ruim dus de rotzooi op, verwijder de nutteloze gegevens en genereer gegevens op manieren die echt zinvol zijn.

 

Het plan voor 2020

Bij reinforcement learning (een vakgebied binnen AI) moeten algoritmen leren over een nog niet verkende ruimte. Deze algoritmen moeten een evenwicht vinden tussen exploratie (leren over nieuwe opties en mogelijkheden) en exploitatie (de verworven kennis gebruiken om een goed resultaat te genereren). De algemene vuistregel is dat hoe minder er bekend is over het probleemdomein, hoe meer het algoritme zich moet richten op exploratie. Evenzo geldt dat hoe beter het probleemdomein wordt begrepen, hoe meer het algoritme zich moet richten op exploitatie.

De balans tussen exploratie en exploitatie geldt ook voor bedrijven. De meeste bedrijven hebben lange tijd gewerkt in een zakelijk ecosysteem dat stabiel was en goed werd begrepen. Er waren natuurlijk concurrenten, maar iedereen gedroeg zich in principe hetzelfde, kreeg ongeveer op hetzelfde moment toegang tot nieuwe technologieën, reageerde op dezelfde manier op klanten, enzovoort. In een dergelijke context richt een bedrijf zich van nature meer en meer op exploitatie omdat de beloning voor exploratie laag is. Dit is precies wat ik zie in veel van de organisaties waar ik mee werk: ondanks al het gepraat over innovatie en bedrijfsontwikkeling, is het resultaat bijna altijd duurzame innovaties die het bestaande product- of oplossingenportfolio een beetje beter maken.

Nu digitalisering en de bijbehorende technologieën – software, data en AI – industrie na industrie steeds meer in hun greep krijgen, wordt het stabiele bedrijfsecosysteem op nieuwe en onvoorspelbare manieren verstoord. Veel bedrijven komen er op de harde manier achter dat hun klanten nooit om hun product hebben gegeven. In plaats daarvan had de klant een behoefte en was jouw product toevallig de beste manier om aan die behoefte te voldoen. Wanneer een nieuwkomer een nieuwe oplossing biedt die beter aan de behoefte voldoet, wordt jouw product vervangen door deze nieuwe oplossing.

'Companies need to significantly increase the amount of exploration'

De enige manier om deze uitdaging aan te gaan is door de hoeveelheid exploratie die je bedrijf uitvoert aanzienlijk te verhogen – we hebben het over echte exploratie, waarbij de uitkomst van de inspanningen onbekend is en waarbij iedereen begrijpt dat de meerderheid van de initiatieven zal mislukken. Om dit te bereiken, heb je echter een spelplan nodig. Dit gameplan moet ten minste vier elementen bevatten: strategische toewijzing van middelen, minder inspanningen voor standaardfunctionaliteit, verkenning van nieuwe bedrijfsecosystemen en/of nieuwe posities in het bestaande bedrijfsecosysteem en verkenning van ontwrichtende innovatie-inspanningen die mogelijk worden gemaakt door data en AI.

Veel bedrijven wijzen het overgrote deel van hun middelen toe aan hun grootste activiteiten. Dit klinkt intuïtief logisch, maar het biedt geen longitudinaal perspectief op de uitdaging van middelentoewijzing. Een model dat zeer nuttig kan zijn in deze context is het drie horizonten model. Dit model structureert de bedrijven waarin het bedrijf actief is in drie groepen. Horizon één zijn de grote, gevestigde bedrijven die vandaag de rekeningen betalen. Horizon twee zijn de nieuwe, snelgroeiende bedrijven die echter veel kleiner zijn dan de bedrijven van horizon één. Het is de bedoeling dat dit onze toekomstige horizon één bedrijven worden. Horizon drie zijn alle nieuwe, onbewezen innovatie-initiatieven en bedrijven waarvan het onzeker is of ze zullen slagen, maar die de voedingsbodem vormen voor toekomstige horizon twee bedrijven. De toewijzing van middelen zou horizon één middelen moeten beperken tot maximaal 70% van het totaal. Horizon twee moet maximaal 20% krijgen en minstens 10% van de totale bedrijfsmiddelen moet worden toegewezen aan horizon drie.

Binnen horizon één zou elk bedrijf zijn grondstoffengebruik langzamer moeten laten groeien dan de inkomstengroei. Dat zou kunnen betekenen dat een horizon één bedrijf dat met 5% per jaar groeit, zijn grondstoffenverbruik met 5% per jaar zou moeten verminderen, omdat dit bedrijf verondersteld wordt te fungeren als melkkoe om de ontwikkeling van toekomstige horizon één bedrijven te financieren.

In de meeste bedrijven zijn omzet en middelentoewijzing nauw op elkaar afgestemd, maar dit is een vergissing vanuit een langetermijnperspectief. Een nieuw bedrijf zal jaren van investeringen vergen voordat het de status van horizon één kan bereiken en dit nieuwe bedrijf kan zichzelf niet financieren. Natuurlijk kun je het zichzelf laten opstarten, maar het resultaat zal meestal zijn dat concurrenten met een meer strategische toewijzing van middelen de marktleiders zullen worden in deze nieuwe activiteiten.

'Once you’ve defined the commodity, **stop** virtually all investment in it'

Ten tweede, verminder investeringen in standaard functionaliteit. Uit ons onderzoek blijkt dat bedrijven 80-90% van hun middelen besteden aan functionaliteit en mogelijkheden die klanten als standaard beschouwen. Ik heb dit in eerdere blogposts en columns besproken, maar ik blijf me verbazen over het gebrek aan bereidheid van bedrijven om te kijken naar nieuwe manieren om investeringen te verminderen op plaatsen waar het niet loont. Doe niet zo dom en maak in plaats daarvan een strategische evaluatie van je hele productportfolio en de functionaliteit in je producten en definieer samen met klanten en anderen wat basisproducten zijn en wat onderscheidend is. Zodra je de basisproducten hebt gedefinieerd, **stop** dan vrijwel alle investeringen daarin. U hebt deze middelen nodig voor duurzame innovaties die de differentiatie van uw producten stimuleren.

Ten derde beschouwen veel bedrijven hun bestaande bedrijfsecosysteem als de enige manier om klanten te bedienen. In de praktijk worden ecosystemen echter verstoord en het is veel beter om de verstoorder te zijn dan de verstoorder. Dit vereist een constante verkenning van mogelijkheden om jezelf te herpositioneren in je bestaande ecosysteem, evenals een verkenning van nieuwe ecosystemen waar je capaciteiten ook relevant kunnen zijn.

Tot slot bieden digitale technologieën – met name data en AI – nieuwe manieren om aan de behoeften van klanten te voldoen die je moet onderzoeken om niet verstoord te worden door, met name, nieuwkomers. Accepteer dat de waarde in bijna elke branche verschuift van atomen naar bits, dat gegevens kunnen worden gebruikt om de verkoop van producten in meerzijdige markten te subsidiëren, dat AI het mogelijk maakt om taken te automatiseren die zelfs enkele jaren geleden nog onmogelijk te automatiseren waren en, in het algemeen, onderzoek proactief de waarde die digitale technologieën kunnen bieden voor jou en je klanten. Dit is waar het grootste deel van de middelen naartoe zou moeten gaan die je hebt vrijgemaakt door horizonplanning en het verminderen van investeringen in standaardfunctionaliteit.

Concluderend heb je aan het begin van 2020 een spelplan nodig om de verkenning aanzienlijk uit te breiden ten koste van de exploitatie om nieuwe kansen te identificeren en verstoringsrisico’s op te sporen en om voldoende te investeren in gebieden die groeikansen bieden. Dit vereist strategische toewijzing van middelen, het identificeren en verwijderen van commodity’s, een zorgvuldige herziening van je positie in bestaande en nieuwe bedrijfsecosystemen en grote verkenningsinitiatieven in de data- en AI-ruimte. Het is riskant, het is eng, de meeste initiatieven zullen niets opleveren en klanten, je aandeelhouders en je eigen mensen zullen moord en brand schreeuwen. En toch is het grootste risico om helemaal niets te doen, want dat zal zeker leiden tot de ondergang van je bedrijf. Laat je dat gebeuren terwijl je toekijkt?

Waarom zou je je zorgen maken over het doel in het bedrijfsleven?

Peter Drucker zei ooit dat het doel van een bedrijf is om een klant te creëren en een klant wordt gedefinieerd als iemand die betaalt voor de producten en diensten die het bedrijf aanbiedt. Dit perspectief lijkt te worden gedeeld door velen in het bedrijfsleven: zolang er inkomsten en winst worden gegenereerd, is er geen reden om je druk te maken over iets anders. Het gaat allemaal om het geld!

Wanneer er een discussie is over moraal en ethiek, wordt er altijd lippendienst bewezen aan deze vragen, maar alleen als er een monetaire reden voor is. Bijvoorbeeld als handel drijven met bepaalde soorten industrieën zou worden afgekeurd door andere klanten en dus zou kunnen leiden tot minder verkoop. In dit geval weegt het inkomstenverlies bij bestaande klanten zwaarder dan de extra inkomsten en als gevolg daarvan kan het bedrijf besluiten om deze sectoren niet te bedienen. Hoewel het resultaat wenselijk kan zijn, is de beweegreden voor de beslissing alleen geldelijk.

Tegelijkertijd zijn er veel bedrijven die doelgericht werken en expliciet streven naar een betere wereld en een verbetering van de toestand van de mensheid. In de VS zijn Whole Foods en Patagonia hier goede voorbeelden van. Om de voormalige co-CEO van Whole Foods, John Mackey, te parafraseren: bedrijven moeten geld verdienen, net zoals ons lichaam rode bloedcellen moet aanmaken als we willen leven. Maar het doel van ons lichaam is niet om rode bloedcellen te maken. Op dezelfde manier moeten bedrijven verder gaan dan alleen maar geld verdienen.

'Interestingly, focusing on purpose proves to be good for making money'

Interessant is dat, in tegenstelling tot wat je zou verwachten, focussen op het doel goed blijkt te zijn om geld te verdienen. Onderzoek toont aan dat doelgerichte bedrijven hogere winstmarges hebben dan hun concurrenten. In “Corporate culture and performance” tonen John Kotter en James Heskett aan dat doelgerichte bedrijven over een periode van tien jaar een factor twaalf beter presteren op het gebied van aandelenkoersen dan hun tegenhangers.

De typische redenen waarom een doelgericht bedrijf het beter zou doen, hebben te maken met meer betrokken werknemers en meer gepassioneerde klanten. Gallup laat zien dat het percentage werknemers dat betrokken is bij hun werk wereldwijd in de lage tieners ligt, dus het is duidelijk dat het significant verhogen van dat percentage wonderen zal doen voor de productiviteit en output van een bedrijf. Op dezelfde manier weten we dat mond-tot-mondreclame een van de krachtigste en meest kosteneffectieve manieren is om nieuwe klanten te bereiken.

Waarom zijn er dan zo weinig bedrijven die expliciet hun doel uitdragen? Een van de belangrijkste uitdagingen is denk ik dat er een instinctieve angst is dat het uiten van een doel als negatief wordt gezien door ten minste sommige groepen in de samenleving, wat ertoe leidt dat sommige delen van het klantenbestand van hen vervreemden. Zoals Simon Sinek het zo treffend uitdrukte: “Mensen kopen niet wat je doet; ze kopen waarom je het doet!” De keerzijde van deze uitspraak is dat de mensen die het niet eens zijn met je waarom, niet van je zullen kopen.

Een andere reden is volgens mij dat het uitspreken van een doel werknemers gemakkelijk van je kan vervreemden. Door zo’n paal in de grond te zetten, kunnen sommigen van hen terugdeinzen voor je bedrijf, terwijl ze waarde zouden kunnen toevoegen vanuit een technisch perspectief. Het gevolg is natuurlijk dat werken met mensen die niet op één lijn zitten met je impliciete missie demotiverend werkt, omdat jij en anderen gemakkelijk verschillende richtingen op kunnen gaan.

De belangrijkste reden is echter dat, naar mijn ervaring, veel leiders geen duidelijkheid hebben over hun eigen doel of over het doel van het bedrijf dat ze leiden. En als je zelf onduidelijk bent over je professionele doel, is het moeilijk om dat duidelijk uit te drukken naar anderen. De belangrijkste uitdaging is vaak niet of een aspect van iemands doel positief is of niet, maar eerder de relatieve prioriteit van verschillende aspecten. Als je moet kiezen tussen inkomsten en milieu-impact, hoeveel kostenbesparingen rechtvaardigen dan welk niveau van impact? Zou je bedrijf net als Patagonia een advertentie plaatsen waarin een jas wordt getoond met de tekst “Koop deze jas niet”? Of, zoals Tesla, je patentenportfolio openbaar maken zolang je concurrenten het gebruiken om klimaatverandering positief te beïnvloeden?

Artsen hebben als doel patiënten te genezen. Brandweermannen willen mensen en eigendommen beschermen tegen schade. Leraren willen de volgende generatie onderwijzen. In het bedrijfsleven mag het niet alleen gaan om geld verdienen. We hebben de verplichting om onszelf aan een hogere norm te houden. Wat is het doel van je bedrijf? En hoe stemt je missie daarmee overeen? En welke moeilijke beslissingen neem je om dat doel en die missie waar te maken?

Met Kerstmis en Nieuwjaar voor de deur moedig ik ons allemaal aan om na te denken over waarom we doen wat we doen. Wat doen we om bij te dragen aan een wereld die steeds beter wordt? Want de wereld **wordt** beter en technologie is daar de kern van. Maar het gaat niet vanzelf. Het vereist dat wij, als technologen, ons expliciet richten op het doel en de betekenis van wat we doen.

Meer proces helpt niet

De afgelopen weken ben ik naar drie verschillende conferenties geweest waar ik presentaties heb gehoord die variaties waren op een gemeenschappelijk thema: als we gewoon meer structuur en meer proces zouden toevoegen aan het onderwerp in kwestie, als we alleen maar meer stappen zouden introduceren, meer controlepunten, meer mensen zouden betrekken, enzovoort, dan zouden alle problemen die we ervaren met deze product roadmapping, deze innovatie-initiatieven, deze bedrijfsontwikkelingsactiviteiten, op magische wijze verdwijnen.

Hoewel de meesten het ermee eens zouden zijn dat dit duidelijk verkeerd is, is het een feit dat dit in veel bedrijven, universiteiten en overheidsinstellingen precies is wat er gebeurt. De organisatie ervaart een of ander probleem, misschien zelfs een probleem dat in de media aan het licht komt en het management in een kwaad daglicht stelt. Het daaropvolgende proces is duidelijk voor degenen die er deel van hebben uitgemaakt. Eerst is er een activiteit om het proces te beschrijven dat heeft geleid tot het naar boven komen van het probleem. Dit wordt gevolgd door een beoordeling van alle acties en andere factoren, met als doel te identificeren wat er fout ging. Tot slot wordt een nieuw proces geïntroduceerd of een bestaand proces bijgewerkt om de waargenomen beperkingen, gaten of zwakke punten in de huidige manier van werken aan te pakken.

Eenmaal ingevoerd, is de volgende stap ervoor te zorgen dat de nieuwe manier van werken wordt gehandhaafd. Het is duidelijk dat het nieuwe of geüpdatete proces overhead toevoegt en het moeilijker maakt om de taken efficiënt uit te voeren. Dus voordat je overhaast aan de slag gaat om de bestaande processen in de organisatie nog ingewikkelder te maken, zijn er vijf factoren waarmee je rekening moet houden.

Ten eerste, een van de zorgen die velen negeren, maar die voor de hand ligt als je erover nadenkt, is dat de toekomst fundamenteel onkenbaar is. Terugkijkend hebben we volledige kennis van wat er is gebeurd. Bijgevolg is het duidelijk wat de optimale manier zou zijn geweest om een probleem aan te pakken. Als we echter op het punt staan dat we een beslissing moeten nemen, doen we dat met grote onzekerheid over de gevolgen.

'Incompetence cannot be cured by more process'

Ten tweede kan het, afhankelijk van de organisatiecultuur, erg moeilijk zijn om erop te wijzen dat individuen hebben gehandeld vanuit een fundamenteel gebrek aan competentie. Het is belangrijk om te beseffen dat incompetentie niet kan worden genezen door meer processen. Incompetentie vereist het opleiden van mensen of, als dat niet haalbaar blijkt, het vervangen van individuen door nieuwe mensen.

Ten derde, hoe meer processen worden ingevoerd en hoe meer de handhaving van processen plaatsvindt, hoe meer mensen hun aandacht richten op het correct volgen van het proces, in plaats van zich te richten op het bereiken van het gewenste resultaat. Dit leidt tot een fundamenteel gebrek aan verantwoordelijkheid in de organisatie, waarbij iedereen zich verschuilt achter het volgen van het proces en geen verantwoordelijkheid neemt voor de gewenste resultaten.

Ten vierde kan een teveel aan processen meer problemen veroorzaken dan oplossen. Aangezien processen gemaakt zijn om herhaalbaar te zijn en om toegepast te worden op een grote verscheidenheid aan verschillende situaties, is een te gedetailleerde procesdefinitie per definitie ineffectief in de meeste situaties. Vooral in organisaties die veel waarde hechten aan het volgen van de juiste processen, kunnen de inefficiënties en de schade van het blind volgen van processen enorm oplopen, mogelijk zelfs tot het punt waarop bedrijven ontwricht raken.

Tot slot worden in de meeste organisaties waar ik mee werk processen en methoden ontwikkeld door mensen die buiten de arena staan, wat betekent dat ze niet worden beïnvloed door de implicaties van de proces- en methodedefinities. Hoewel ze het werk niet echt uitvoeren, is er een sterke neiging om te fungeren als “maandagochtend quarterbacks”, een verwijzing naar de maandagse watercoolerbijeenkomsten in met name Amerikaanse bedrijven waar de gebreken van de quarterback van een team worden besproken. Het interessante is dat de kritiek meestal komt van mensen die zelf nooit als quarterback gekwalificeerd zouden worden.

Concluderend, voordat je in de val van ‘meer proces’ trapt, vraag jezelf dan af of het zou helpen om de toekomst beter te voorspellen, of je mensen misschien onvoldoende competent zijn, of je verantwoordelijkheid bevordert, of de hoofdoorzaak misschien te veel proces is en of je luistert naar zogenaamde experts die eigenlijk niet voldoende inzicht hebben in de situatie.