Hoe om 'n voorspelling te hersien: 'n kontrolelys vir simulasieresultate

Om 'n simulasievoorspelling te hersien, kyk na sewe dinge in volgorde: of die vraag goed geformuleer is, of die dokumente volledig en akkuraat was, of die kennisgrafiek belangrike akteurs gemis het, watter aannames die gevolgtrekking dryf, of die resultaat sensitiwiteitsherhalings oorleef, hoe selfversekerd jy eerlikwaar kan wees, en wat in die werklike wêreld geverifieer moet word voordat jy optree. 'n Voorspelling wat hierdie toetse slaag, is 'n hersienbare hipotese wat jy kan verdedig; een wat hulle misluk, is net 'n storie.

Waarom elke voorspelling 'n hersiening benodig

'n Simulasieverslag lees oortuigend. Dit het 'n narratief, aanhalings van agente en duidelike gevolgtrekkings. Daardie vlotheid is presies hoekom dit 'n hersiening nodig het: 'n goed geskrewe verslag wat op 'n gaping in die insette gebou is, kan net so solied lyk as een wat op goeie materiaal gebou is.

In InfoDome kom 'n voorspelling uit 'n ketting van stappe. Jy laai dokumente op en beskryf wat om te voorspel; die diens bou 'n kennisgrafiek van mense, organisasies, groepe en verhoudings; dit skep honderde agente met hul eie karakter, posisie en geheue; hulle kommunikeer vir 'n gekose aantal rondtes op 'n Twitter -agtige voer en 'n Reddit -agtige forum; dan skryf 'n ontlederagent die verslag. Elke skakel in daardie ketting kan nagegaan word, en die resensie hieronder volg daarop.

Die kontrolelys, stap vir stap

1. Raamwerk: is die regte vraag gevra?

Begin met die vraag self, want 'n vae vraag lewer 'n vae antwoord op.

• Is die uitkoms spesifiek? "Hoe sal mense reageer?" is swak. "Sal plaaslike ouergroepe die skoolsamesmelting in die eerste maand teenstaan, en watter argument sal hulle gebruik?" is sterk.
• Is die tydshorison duidelik? Die aantal rondtes (byvoorbeeld 10, 20 of 40) moet ooreenstem met die tydperk waaroor jy omgee, soos die eerste dae na 'n aankondiging of 'n langer debat.
• Is die gehoor gedefinieer? Indien die reaksie per land verskil, maak seker dat die regte gehoorlande gekies is. Jy kan tot 10 kies, en agente word gelykop tussen hulle verdeel.
• Is die vraag neutraal? 'n Aanwysing wat reeds die verwagte antwoord bevat, is geneig om dit te bevestig.

2. Dokumentkwaliteit: wat het die simulasie eintlik geweet?

Agente weet slegs wat die dokumente en die grafiek vir hulle gee. Lees jou insette soos 'n skeptikus sou.

• Is die feite op datum? ’n Verouderde prys, datum of naam sal deur die hele reeks versprei.
• Is die materiaal eensydig? As alle dokumente van jou eie organisasie afkomstig is, kan kritici onderverteenwoordig of karikaturies wees.
• Is sleutelbesonderhede teenwoordig? Die mees algemene versteekte oorsaak van 'n vreemde resultaat is 'n detail wat die dokumente eenvoudig nooit noem nie.
• Is daar geraas? Lang bylaes of onverwante inhoud kan agente na newe-onderwerpe lok.

3. Grafiekgapings: wie ontbreek?

Kyk na die entiteite en verwantskappe wat die stelsel onttrek het. Vra wie realisties in hierdie situasie sou praat en maak seker dat hulle in die grafiek bestaan.

• Reguleerders, vakbonde, plaaslike media, mededingers, invloedryke individue, opposisiegroepe.
• Verhoudings wat saak maak: wie befonds wie, wie kompeteer, wie het 'n geskiedenis van konflik.
• Groepe wat geraak word, maar selde in amptelike dokumente genoem word, soos nagskofwerkers of landelike gebruikers.

Indien 'n belangrike akteur ontbreek, voeg 'n dokument by wat hulle beskryf en voer dit weer uit. Hierdie enkele stap verander dikwels die resultaat meer as enigiets anders.

4. Aannames: wat dryf die gevolgtrekking?

Elke verslag berus op 'n paar lasdraende aannames. Vind hulle eksplisiet.

• Vra die verslag se ontleder: "Watter drie aannames beïnvloed jou gevolgtrekking die meeste?"
• Onderhoud twee of drie agente met teenoorgestelde standpunte en vra hoekom hulle so gereageer het. As hul redes op 'n feit staatmaak wat nie waar is nie, het jy 'n swak skakel gevind.
• Skei meganismes (byvoorbeeld, "die verwarring oor geskiktheid versprei deur ouerforums") van groothede (byvoorbeeld, "meeste agente het negatief geword"). Meganismes is gewoonlik meer betroubaar as groottes.

5. Sensitiwiteitsherhalings: hou die resultaat stand?

'n Gevolgtrekking wat omslaan wanneer een detail verander, is broos. Toets dit.

• Herhaal onveranderd om te sien hoeveel variasie van die simulasie self afkomstig is.
• Verander een veranderlike op 'n slag : die bewoording van die sleutelsin, die tydsberekening, die prys, die teenwoordigheid van een kritikus.
• Varieer die aantal rondtes om te sien of 'n reaksie 'n kortstondige piek of 'n blywende verskuiwing is.
• Vergelyk die verslae langs mekaar. Wat oor lopies dieselfde bly, is jou robuuste bevinding; wat verander, is onsekerheid.

Ons "wat-as" -analisescenario is ontwerp vir presies hierdie soort vergelyking.

6. Vertroue: hoe seker kan jy eerlikwaar wees?

Skryf 'n vertrouensvlak vir elke gevolgtrekking neer, nie vir die verslag as geheel nie.

• Hoog: die bevinding verskyn in elke heruitsending, het 'n duidelike meganisme en hang nie van 'n betwiste feit af nie.
• Medium: dit verskyn in die meeste lopies, maar die sterkte daarvan wissel of dit hang af van een aanname wat jy nie kon nagaan nie.
• Laag: dit verskyn een keer, of steun op 'n ontbrekende dokument of 'n onsekere feit.

Simulasies is hersienbare hipoteses wat oordeel ondersteun, nie sekerheid nie. Om te sê "medium vertroue, hang af van hoe vakbonde klousule 4 lees" is nuttiger vir 'n besluitnemer as 'n selfversekerde maar onondersoekte voorspelling.

7. Werklike verifikasie: wat om te kontroleer voordat jy optree

Die laaste stap omskep die voorspelling in aksies. Vir elke gevolgtrekking met 'n hoë impak, besluit hoe om dit goedkoop in die werklikheid te toets.

• Vra 'n paar regte mense uit die kritiese groep, byvoorbeeld in kort onderhoude.
• Doen 'n klein meningspeiling oor die een vraag wat die simulasie as deurslaggewend gemerk het.
• Wys die hersiene bewoording aan 'n kollega wat nie betrokke was nie.
• Stel moniteringsseine vir die bekendstellingsdag: watter frases of groepe sal jou vertel dat die gesimuleerde scenario ontvou.

'n Uitgewerkte voorbeeld: hersiening van 'n skoolsamesmeltingsvoorspelling

'n Munisipaliteit beplan om twee laerskole saam te smelt. Die eerste simulasie voorspel 'n matige negatiewe reaksie wat binne twee weke vervaag.

• Raamwerk: die vraag wat oor "inwoners" in die algemeen gevra word. Die span vernou dit tot ouers, onderwysers en plaaslike media oor 20 rondes.
• Dokumente: die enigste insette was die raadsbesluit en 'n persverklaring. Die span voeg 'n opsomming van die vervoerplan vir kinders by.
• Grafiekgapings: die onderwysersunie en die ouerraad van die kleiner skool het ontbreek. 'n Kort dokument wat hulle beskryf, is bygevoeg.
• Herhaling: die nuwe voorspelling is skerper. Die ouerraad van die kleiner skool word die eerste versterker, en die hoofargument is die langer, minder veilige roete skool toe, nie die samesmelting self nie.
• Sensitiwiteit: met 'n gepubliseerde skoolbusplan krimp die negatiewe golf merkbaar in drie uit drie heruitsendings; daarsonder duur die golf voort.
• Vertroue: hoog vir die meganisme (veiligheid van die roete), medium vir die grootte van die reaksie.
• Verifikasie: die span voer twee gesprekke met regte ouers, wat die roete-bekommernis bevestig. Die busplan word saam met die besluit gepubliseer.

Die eerste verslag was nie verkeerd nie, net onvolledig. Die hersiening het dit in iets verander waarop die raad kon optree. Vir besluitnemingsvergelykings soos hierdie, sien die besluitnemingsondersteuningscenario .

Gebruik van die kontrolelys in die praktyk

Hou die kontrolelys kort genoeg om elke keer te gebruik. 'n Tipiese oorsig neem minder tyd as die vergadering waar die voorspelling aangebied word, en dit beskerm jou teen die mees algemene fout: om 'n vloeiende verslag te vertrou wat op dun materiaal gebou is. Jy kan scenario's in die InfoDome konsole voorberei en herhaal; die plan is €29 per maand met 'n maandelikse KI-gebruiksbegroting van €9 en onbeperkte projekte.