Be om underlaget bakom slutsatsen. Ett välskrivet svar kan fortfarande använda fel period, räkna samma post två gånger eller förväxla samband med orsak. Om ni inte kan följa hur svaret togs fram behöver ni begränsa hur det används.
Börja med en återkommande fråga som redan har en känd definition. Då går det att jämföra stödet mot ett facit innan ni ber om friare analyser.
Gör frågan entydig
Frågan vilka kunder som växer mest behöver fler beslut. Menar ni intäkt, orderantal eller marginal? Jämför ni samma period föregående år? Ska krediteringar ingå? Vilken kundidentitet används?
Skriv dessa beslut i ett gemensamt underlag. Annars kan två rimliga tolkningar ge olika svar, utan att något uppenbart tekniskt fel har inträffat.
Kontrollera beräkningen före förklaringen
Låt resultatet gå att återskapa med den fråga, rapport eller beräkning som användes. Kontrollera urval, filter, enheter och hantering av saknade värden. Granskaren bör kunna ta en delmängd och räkna om den.
Ett illustrativt test är att samma kund finns i två system. En sammanfogning som ger flera träffar kan öka summan utan att den verkliga försäljningen ökat. Ett tydligt svar från modellen upptäcker inte nödvändigtvis den felaktiga sammanfogningen.
Bevara skillnaden mellan observation och hypotes
En rapport kan visa att omsättningen minskat i ett segment. Förklaringen kan bero på volym, pris, kundmix, saknade bokningar eller något annat. Om underlaget inte skiljer alternativen åt ska svaret lämna orsaken öppen.
NIST:s AI-riskramverk och Playbook betonar bland annat att AI-system behöver utvärderas och risker hanteras under användningen. Granskningsprotokollet här är ett redaktionellt förslag för en avgränsad företagsanalys.
Ett granskningsprotokoll för svaret
- Kan frågan förstås på bara ett sätt?
- Är period, filter och mått tydliga?
- Går siffrorna att återskapa från källan?
- Har bortfall och databrister redovisats?
- Skiljs observerade värden från möjliga förklaringar?
- Vet mottagaren vilket beslut svaret får stödja?
Ge inte analysen mer åtkomst än den behöver
En läsande analys behöver inte automatiskt rätt att ändra affärssystemet. Börja med godkänt underlag och definierade frågor. Om resultatet senare ska utlösa en åtgärd krävs en separat bedömning av konsekvens, behörighet och godkännande.
