Hvernig á að yfirfara spá: Gátlisti fyrir niðurstöður hermunar

Til að fara yfir spá í hermun skaltu athuga sjö atriði í réttri röð: hvort spurningin var vel sett fram, hvort skjölin væru tæmandi og nákvæm, hvort þekkingargrafið missti af mikilvægum þáttum, hvaða forsendur ráða úrslitum, hvort niðurstaðan standist endurteknar næmisprófanir, hversu öruggur þú getur verið í raunveruleikanum og hvað þarf að staðfesta í raunveruleikanum áður en þú framkvæmir aðgerðir. Spá sem stenst þessar athuganir er endurskoðanleg tilgáta sem þú getur varið; sú sem fellur ekki er bara saga.

Af hverju þarf að endurskoða allar spár

Skýrsla um hermun er sannfærandi lesin. Hún inniheldur frásögn, tilvitnanir í umboðsmenn og skýrar niðurstöður. Þessi flæði er einmitt ástæðan fyrir því að hún þarfnast endurskoðunar: vel skrifuð skýrsla sem byggir á eyðu í inntaki getur litið eins vel út og skýrsla sem byggir á góðu efni.

Í InfoDome kemur spá úr keðju skrefa. Þú hleður inn skjölum og lýsir því hvað á að spá fyrir um; þjónustan býr til þekkingargraf yfir fólk, stofnanir, hópa og tengsl; hún býr til hundruð umboðsmanna með sína eigin persónu, stöðu og minni; þeir hafa samskipti í valinn fjölda umferða á Twitter -líkum straumi og Reddit -líkum vettvangi; síðan skrifar greiningaraðili skýrsluna. Hægt er að athuga hvern hlekk í þeirri keðju og umsögnin hér að neðan fylgir í kjölfarið.

Gátlistinn, skref fyrir skref

1. Umgjörð: var rétta spurningin spurð?

Byrjaðu á spurningunni sjálfri, því óljós spurning leiðir af sér óljóst svar.

• Er niðurstaðan nákvæm? „Hvernig mun fólk bregðast við?“ er veik. „Munu foreldrahópar á staðnum andmæla skólasameiningunni fyrsta mánuðinn og hvaða rök munu þeir nota?“ er sterk.
• Er tímaramminn skýr? Fjöldi umferða (til dæmis 10, 20 eða 40) ætti að passa við tímabilið sem þér þykir vænt um, eins og fyrstu dagana eftir tilkynningu eða lengri umræðu.
• Er markhópurinn skilgreindur? Ef viðbrögðin eru mismunandi eftir löndum, gakktu úr skugga um að rétt markhópslönd hafi verið valin. Þú getur valið allt að 10 og umboðsmenn eru skipt jafnt á milli þeirra.
• Er spurningin hlutlaus? Ef spurningin inniheldur þegar væntanlegt svar hefur hún tilhneigingu til að staðfesta það.

2. Gæði skjala: hvað vissi hermunin í raun og veru?

Umboðsmenn vita aðeins hvað skjölin og grafið gefa þeim. Lestu innsláttinn þinn eins og efasemdarmaður myndi gera.

• Eru staðreyndirnar réttar? Úrelt verð, dagsetning eða nafn mun breiðast út í alla keyrsluna.
• Er efnið einhliða? Ef öll skjöl koma frá þinni eigin stofnun gætu gagnrýnendur verið vanmetnir eða skopmyndaðir.
• Eru lykilatriði til staðar? Algengasta falin orsök undarlegra niðurstaðna er smáatriði sem skjölin nefna einfaldlega aldrei.
• Er einhver hávaði? Langir viðaukar eða ótengt efni geta dregið umboðsmenn að aukaefnum.

3. Bil á línuritum: hver vantar?

Skoðið einingarnar og tengslin sem kerfið fann. Spyrjið hver myndi raunhæft tala í þessari stöðu og athugið hvort þau séu til staðar í grafinu.

• Eftirlitsaðilar, verkalýðsfélög, fjölmiðlar, samkeppnisaðilar, áhrifamiklir einstaklingar, stjórnarandstöðuhópar.
• Sambönd sem skipta máli: hver fjármagnar hvern, hver keppir, hver á sér sögu um átök.
• Hópar sem verða fyrir áhrifum en eru sjaldan nefndir í opinberum skjölum, svo sem næturvaktafólk eða notendur í dreifbýli.

Ef mikilvægur þáttur vantar skal bæta við skjali sem lýsir honum og keyra aftur. Þetta eina skref breytir oft niðurstöðunni meira en nokkuð annað.

4. Forsendur: hvað knýr niðurstöðuna áfram?

Sérhver skýrsla byggir á nokkrum forsendum. Finndu þær skýrt.

• Spyrðu greinanda skýrslunnar: „Hvaða þrjár forsendur hafa mest áhrif á niðurstöðu þína?“
• Taktu viðtal við tvo eða þrjá umboðsmenn með gagnstæða afstöðu og spurðu hvers vegna þeir brugðust við eins og þeir gerðu. Ef ástæður þeirra byggjast á staðreynd sem er ekki sönn, þá hefur þú fundið veikan hlekk.
• Aðgreina aðferðir (til dæmis „ruglingur um hæfi dreifist í gegnum foreldraspjallborð“) frá stærðargráðum (til dæmis „flestir umboðsmenn urðu neikvæðir“). Aðferðir eru yfirleitt áreiðanlegri en stærðir.

5. Endurtekningar á næmi: stenst niðurstaðan?

Niðurstaða sem snýst við þegar eitt smáatriði breytist er brothætt. Prófaðu hana.

• Endurtaktu óbreytta til að sjá hversu mikil frávik koma frá sjálfri hermuninni.
• Breyttu einni breytu í einu : orðalag lykilsetningarinnar, tímasetningunni, verðinu, nærveru eins gagnrýnanda.
• Breyttu fjölda umferða til að sjá hvort viðbrögðin eru stutt toppur eða varanleg breyting.
• Berðu skýrslurnar saman hlið við hlið. Það sem helst óbreytt í gegnum keyrslurnar er traust niðurstaða þín; það sem breytist er óvissan.

Hvað-ef greiningaraðstæður okkar eru hannaðar fyrir nákvæmlega þessa tegund af samanburði.

6. Sjálfstraust: hversu viss geturðu í alvöru verið?

Skrifaðu niður öryggisstig fyrir hverja niðurstöðu, ekki fyrir skýrsluna í heild sinni.

• Hátt: Niðurstaðan birtist í hverri endursýningu, hefur skýra verkunarháttur og er ekki háð umdeildum staðreyndum.
• Miðlungs: það birtist í flestum keyrslum, en styrkur þess er breytilegur eða það fer eftir einni forsendu sem þú gast ekki staðfest.
• Lágt: það kemur fyrir einu sinni eða byggir á týndu skjali eða óvissu.

Hermir eru endurskoðanlegar tilgátur sem styðja mat, ekki vissu. Að segja „miðlungs öryggi, fer eftir því hvernig stéttarfélög lesa 4. grein“ er gagnlegra fyrir ákvarðanatökumann en örugg en óskoðuð spá.

7. Raunveruleg staðfesting: hvað þarf að athuga áður en aðgerð er tekin

Síðasta skrefið breytir spánni í aðgerðir. Fyrir hverja niðurstöðu sem hefur mikil áhrif skal ákveða hvernig á að prófa hana ódýrt í raunveruleikanum.

• Spyrjið nokkra raunverulega einstaklinga úr gagnrýna hópnum, til dæmis í stuttum viðtölum.
• Keyrðu litla könnun um þá einu spurningu sem hermunin merkti sem úrslitaþátt.
• Sýnið samstarfsmanni sem ekki var viðriðinn breytta orðalagið.
• Setjið eftirlitsmerki fyrir útgáfudaginn: hvaða orðasambönd eða hópar myndu segja ykkur að hermt atburðarás sé að þróast.

Virkað dæmi: endurskoðun á spá um sameiningu skóla

Sveitarfélag hyggst sameina tvo grunnskóla. Fyrsta hermunin spáir miðlungs neikvæðum viðbrögðum sem dvína innan tveggja vikna.

• Rammi: spurningin sem spurt er um „íbúa“ almennt. Teymið þrengir hana að foreldrum, kennurum og fjölmiðlum á staðnum í 20 umferðum.
• Skjöl: einu gögnin sem lögð voru fram voru ákvörðun sveitarstjórnar og fréttatilkynning. Teymið bætir við samantekt á samgönguáætlun fyrir börn.
• Bil á grafi: kennarasambandið og foreldraráð minni skólans vantaði. Stutt skjal sem lýsir þeim er bætt við.
• Endursýning: nýja spáin er skarpari. Foreldraráð minni skólans verður fyrsti magnarinn og aðalrökin eru lengri og óöruggari leiðin í skólann, ekki sameiningin sjálf.
• Næmi: með birtri skólaakstursáætlun minnkar neikvæða bylgjan verulega í þremur af þremur endursýningum; án hennar helst bylgjan.
• Traust: hátt fyrir ferlið (öryggi leiðarinnar), meðalstórt fyrir stærð viðbragðsins.
• Staðfesting: Teymið á tvö samtöl við raunverulega foreldra sem staðfesta áhyggjuefni varðandi leiðina. Strætóáætlunin er birt ásamt ákvörðuninni.

Fyrsta skýrslan var ekki röng, bara ófullkomin. Endurskoðunin breytti henni í eitthvað sem sveitarstjórnin gat brugðist við. Sjá samanburð á ákvörðunum eins og þessari í atburðarásinni um ákvarðanatöku .

Að nota gátlistann í reynd

Hafðu gátlistann nógu stuttan til að nota hann í hvert skipti. Algeng endurskoðun tekur styttri tíma en fundurinn þar sem spáin er kynnt og hún verndar þig fyrir algengustu mistökunum: að treysta reiprennandi skýrslu sem byggð er á þunnu efni. Þú getur undirbúið og endurkeyrt atburðarásir í InfoDome stjórnborðinu ; áætlunin er €29 á mánuði með €9 mánaðarlegri notkunarfjárhæð fyrir gervigreind og ótakmörkuðum verkefnum.