Sut i Adolygu Rhagolwg: Rhestr Wirio ar gyfer Canlyniadau Efelychu

I adolygu rhagolwg efelychu, gwiriwch saith peth yn eu trefn: a oedd y cwestiwn wedi'i fframio'n dda, a oedd y dogfennau'n gyflawn ac yn gywir, a fethodd y graff gwybodaeth actorion pwysig, pa dybiaethau sy'n gyrru'r casgliad, a yw'r canlyniad yn goroesi ail-redeg sensitifrwydd, pa mor hyderus allwch chi fod yn onest, a beth sydd raid ei wirio yn y byd go iawn cyn i chi weithredu. Mae rhagolwg sy'n pasio'r gwiriadau hyn yn ddamcaniaeth y gellir ei hadolygu y gallwch ei hamddiffyn; un sy'n eu methu yw stori yn unig.

Pam mae angen adolygu pob rhagolwg

Mae adroddiad efelychu yn darllen yn argyhoeddiadol. Mae ganddo naratif, dyfyniadau gan asiantau a chasgliadau clir. Dyna'n union pam mae angen ei adolygu: gall adroddiad sydd wedi'i ysgrifennu'n dda ac sydd wedi'i adeiladu ar fwlch yn y mewnbynnau edrych mor gadarn ag un sydd wedi'i adeiladu ar ddeunydd da.

Yn InfoDome mae rhagolwg yn dod o gadwyn o gamau. Rydych chi'n uwchlwytho dogfennau ac yn disgrifio beth i'w ragweld; mae'r gwasanaeth yn adeiladu graff gwybodaeth o bobl, sefydliadau, grwpiau a pherthnasoedd; mae'n creu cannoedd o asiantau gyda'u cymeriad, eu safle a'u cof eu hunain; maent yn rhyngweithio am nifer dewisol o rowndiau ar ffrwd debyg i Twitter a fforwm tebyg Reddit ; yna mae asiant dadansoddwr yn ysgrifennu'r adroddiad. Gellir gwirio pob dolen yn y gadwyn honno, ac mae'r adolygiad isod yn ei dilyn.

Y rhestr wirio, cam wrth gam

1. Fframio: a ofynnwyd y cwestiwn cywir?

Dechreuwch gyda'r cwestiwn ei hun, oherwydd mae cwestiwn amwys yn cynhyrchu ateb amwys.

• A yw'r canlyniad yn benodol? Mae "Sut fydd pobl yn ymateb?" yn wan. Mae "A fydd grwpiau rhieni lleol yn gwrthwynebu uno ysgolion yn y mis cyntaf, a pha ddadl fyddan nhw'n ei defnyddio?" yn gryf.
• A yw'r cyfnod amser yn glir? Dylai nifer y rowndiau (er enghraifft 10, 20 neu 40) gyd-fynd â'r cyfnod sy'n bwysig i chi, fel y dyddiau cyntaf ar ôl cyhoeddiad neu ddadl hirach.
• A yw'r gynulleidfa wedi'i diffinio? Os yw'r ymateb yn amrywio yn ôl gwlad, gwiriwch fod y gwledydd cynulleidfa cywir wedi'u dewis. Gallwch ddewis hyd at 10, ac mae asiantau'n cael eu rhannu'n gyfartal rhyngddynt.
• A yw'r cwestiwn yn niwtral? Mae prompt sydd eisoes yn cynnwys yr ateb disgwyliedig yn tueddu i'w gadarnhau.

2. Ansawdd dogfennau: beth oedd yr efelychiad yn ei wybod mewn gwirionedd?

Dim ond beth mae'r dogfennau a'r graff yn ei roi iddyn nhw mae asiantau'n ei wybod. Darllenwch eich mewnbynnau fel y byddai amheuwr yn ei wneud.

• A yw'r ffeithiau'n gyfredol? Bydd pris, dyddiad neu enw sydd wedi dyddio yn lledaenu drwy gydol y cyfnod.
• A yw'r deunydd yn unochrog? Os yw'r holl ddogfennau'n dod o'ch sefydliad eich hun, efallai na fydd beirniaid yn cael eu cynrychioli'n ddigonol neu eu bod yn cael eu gwneud yn wawdlyd.
• A oes manylion allweddol yn bresennol? Yr achos cudd mwyaf cyffredin dros ganlyniad rhyfedd yw manylyn nad yw'r dogfennau byth yn ei grybwyll.
• Oes sŵn? Gall atodiadau hir neu gynnwys anghysylltiedig ddenu asiantau tuag at bynciau ochr.

3. Bylchau yn y graff: pwy sydd ar goll?

Edrychwch ar yr endidau a'r perthnasau a echdynnwyd gan y system. Gofynnwch pwy fyddai'n siarad yn realistig yn y sefyllfa hon a gwiriwch eu bod nhw'n bodoli yn y graff.

• Rheoleiddwyr, undebau llafur, y cyfryngau lleol, cystadleuwyr, unigolion dylanwadol, grwpiau gwrthbleidiol.
• Perthnasau sy'n bwysig: pwy sy'n ariannu pwy, pwy sy'n cystadlu, pwy sydd â hanes o wrthdaro.
• Grwpiau sy'n cael eu heffeithio ond sy'n anaml yn cael eu crybwyll mewn dogfennau swyddogol, fel gweithwyr shifftiau nos neu ddefnyddwyr gwledig.

Os oes actor pwysig ar goll, ychwanegwch ddogfen sy'n ei ddisgrifio a'i hail-redeg. Yn aml, mae'r cam sengl hwn yn newid y canlyniad yn fwy nag unrhyw beth arall.

4. Rhagdybiaethau: beth sy'n sbarduno'r casgliad?

Mae pob adroddiad yn seiliedig ar ychydig o dybiaethau sy'n dwyn baich. Dewch o hyd iddynt yn benodol.

• Gofynnwch i ddadansoddwr yr adroddiad: "Pa dair rhagdybiaeth sy'n effeithio fwyaf ar eich casgliad?"
• Cyfwelwch â dau neu dri asiant sydd â safbwyntiau gwahanol a gofynnwch pam y gwnaethon nhw ymateb fel y gwnaethon nhw. Os yw eu rhesymau'n dibynnu ar ffaith nad yw'n wir, rydych chi wedi dod o hyd i gyswllt gwan.
• Gwahanwch fecanweithiau (er enghraifft, "mae'r dryswch ynghylch cymhwysedd yn lledaenu trwy fforymau rhieni") oddi wrth feintiau (er enghraifft, "daeth y rhan fwyaf o asiantau yn negyddol"). Fel arfer, mae mecanweithiau'n fwy dibynadwy na meintiau.

5. Ail-redeg sensitifrwydd: a yw'r canlyniad yn dal?

Mae casgliad sy'n newid pan fydd un manylyn yn newid yn fregus. Profwch ef.

• Ail-redeg heb ei newid i weld faint o amrywiad sy'n dod o'r efelychiad ei hun.
• Newidiwch un newidyn ar y tro : geiriad y frawddeg allweddol, yr amseru, y pris, presenoldeb un beirniad.
• Amrywiwch nifer y rowndiau i weld a yw adwaith yn bigyn byr neu'n newid parhaol.
• Cymharwch yr adroddiadau ochr yn ochr. Yr hyn sy'n aros yr un fath ar draws rhediadau yw eich canfyddiad cadarn; yr hyn sy'n newid yw ansicrwydd.

Mae ein senario dadansoddi beth os wedi'i gynllunio ar gyfer y math hwn o gymhariaeth yn union.

6. Hyder: pa mor sicr allwch chi fod mewn gwirionedd?

Ysgrifennwch lefel hyder ar gyfer pob casgliad, nid ar gyfer yr adroddiad cyfan.

• Uchel: mae'r canfyddiad yn ymddangos ym mhob ail-ddarllediad, mae ganddo fecanwaith clir ac nid yw'n dibynnu ar ffaith ddadleuol.
• Canolig: mae'n ymddangos yn y rhan fwyaf o rediadau, ond mae ei gryfder yn amrywio neu mae'n dibynnu ar un dybiaeth na allech chi ei gwirio.
• Isel: mae'n ymddangos unwaith, neu'n dibynnu ar ddogfen goll neu ffaith ansicr.

Mae efelychiadau yn ddamcaniaethau y gellir eu hadolygu sy'n cefnogi barn, nid sicrwydd. Mae dweud "hyder canolig, yn dibynnu ar sut mae undebau'n darllen cymal 4" yn fwy defnyddiol i benderfynydd na rhagfynegiad hyderus ond heb ei archwilio.

7. Gwirio yn y byd go iawn: beth i'w wirio cyn gweithredu

Mae'r cam olaf yn troi'r rhagolwg yn gamau gweithredu. Ar gyfer pob casgliad effaith uchel, penderfynwch sut i'w brofi'n rhad mewn gwirionedd.

• Gofynnwch i ychydig o bobl go iawn o'r grŵp beirniadol, er enghraifft mewn cyfweliadau byr.
• Cynhaliwch arolwg bach ar yr un cwestiwn a nodwyd gan yr efelychiad fel un pendant.
• Dangoswch y geiriad diwygiedig i gydweithiwr nad oedd yn rhan o'r broses.
• Gosodwch signalau monitro ar gyfer diwrnod lansio: pa ymadroddion neu grwpiau fyddai'n dweud wrthych fod y senario efelychiedig yn datblygu.

Enghraifft ymarferol: adolygu rhagolwg uno ysgolion

Mae bwrdeistref yn bwriadu uno dwy ysgol gynradd. Mae'r efelychiad cyntaf yn rhagweld ymateb negyddol cymedrol sy'n pylu o fewn pythefnos.

• Fframio: y cwestiwn a ofynnir am "drigolion" yn gyffredinol. Mae'r tîm yn ei gyfyngu i rieni, athrawon a'r cyfryngau lleol dros 20 rownd.
• Dogfennau: yr unig fewnbynnau oedd penderfyniad y cyngor a datganiad i'r wasg. Mae'r tîm yn ychwanegu crynodeb o'r cynllun trafnidiaeth i blant.
• Bylchau yn y graff: roedd undeb yr athrawon a chyngor rhieni'r ysgol lai ar goll. Ychwanegwyd dogfen fer yn eu disgrifio.
• Ail-ddarlledu: mae'r rhagolwg newydd yn fwy craff. Cyngor rhieni'r ysgol lai sy'n dod yn fwyhadur cyntaf, a'r prif ddadl yw'r llwybr hirach, llai diogel i'r ysgol, nid yr uno ei hun.
• Sensitifrwydd: gyda chynllun bws ysgol cyhoeddedig mae'r don negyddol yn crebachu'n sylweddol mewn tri allan o dri ail-ddarllediad; hebddo mae'r don yn parhau.
• Hyder: uchel ar gyfer y mecanwaith (diogelwch y llwybr), canolig ar gyfer maint yr adwaith.
• Gwirio: mae'r tîm yn cynnal dwy sgwrs gyda rhieni go iawn, sy'n cadarnhau'r pryder ynghylch y llwybr. Cyhoeddir cynllun y bws ynghyd â'r penderfyniad.

Nid oedd yr adroddiad cyntaf yn anghywir, dim ond yn anghyflawn. Trodd yr adolygiad ef yn rhywbeth y gallai'r cyngor weithredu arno. Am gymhariaethau penderfyniadau fel hyn, gweler y senario cefnogi penderfyniadau .

Defnyddio'r rhestr wirio yn ymarferol

Cadwch y rhestr wirio yn ddigon byr i'w defnyddio bob tro. Mae adolygiad nodweddiadol yn cymryd llai o amser na'r cyfarfod lle cyflwynir y rhagolwg, ac mae'n eich amddiffyn rhag y camgymeriad mwyaf cyffredin: ymddiried mewn adroddiad rhugl sydd wedi'i adeiladu ar ddeunydd tenau. Gallwch baratoi ac ailgynnal senarios yn y consol InfoDome ; y cynllun yw €29 y mis gyda chyllideb defnydd AI misol o €9 a phrosiectau diderfyn.