Panelistin prosessi kierros kierrokselta

Tämä opas kulkee paneelin läpi kutsusta lopputuloksiin. Se on kirjoitettu kutsutulle – sinä on panelisti – ja fasilitoija voi lukea sen kuvauksena siitä, mitä hänen panelistinsa oikeasti näkevät.

Rinnakkainen opas, Miten Delphi Pronoian kaksi käyttöliittymää on rakennettu, selittää suunnittelun. Tämä on kulkumatka: mitä ruudulla on missäkin kohdassa, järjestyksessä, ja miksi jotain ei vielä ole.

1. Mihin olet tulossa

Delfoi-paneeli ei ole kysely. Kysely kysyy sinulta kerran ja laskee sinut yhteen. Delfoi kysyy, näyttää sinulle, mitä muu paneeli vastasi ja miksi, ja kysyy uudelleen – ja kiinnostavaa on se, mitä siinä välissä tapahtuu.

Tästä seuraa kolme asiaa, jotka kannattaa tietää ennen ensimmäistä ruutua:

• Perustelusi merkitsee enemmän kuin numerosi. Arvio sijoittaa sinut asteikolle; perustelu on se, minkä muut panelistit lukevat ja josta analyysi lopulta tekee työnsä. Arvio ilman perustelua on puolikas vastaus.
• Olet muille panelisteille anonyymi. He näkevät koodin, eivät nimeä: ”Vastaat anonyymisti – muut panelistit näkevät sinut vain koodilla {code}”. Se, mitä fasilitoija sinusta näkee, riippuu tutkimuksen asetuksista, ja tietosuojaseloste kertoo, kumpi järjestely on käytössä.
• Erimielisyys ei ole paneelin epäonnistuminen. Se on usein tulos. Mikään käyttöliittymässä ei työnnä sinua keskelle, ja tulosnäkymät esittävät hajonnan tosiasiana eivätkä ongelmana.

Jos paneelissa on tekoälypanelisteja, siitä kerrotaan ennen aloitusta. ”Tässä paneelissa on tekoälypanelisteja” sanotaan etukäteen, ja tekoälyn osuus on merkitty jokaisella pinnalla, jolla se vaikuttaa: perustelun vieressä ja viivoitettuna osuutena jakaumassa.

2. Ennen kuin mikään on auki: kutsu ja suostumusruutu

Saavut henkilökohtaisella linkillä. Se on sinun, ja se tunnistaa sinut tutkimukseen ilman salasanaa – siksi sitä ei kannata välittää eteenpäin.

Ensimmäinen ruutu on Ennen kuin aloitat. Siinä kerrotaan, mikä tutkimus on, kuka sitä tekee, miten tietojasi käsitellään ja – jos paneelissa niitä on – että osa panelisteista on tekoälyä. Jatkat napista Olen lukenut tämän ja osallistun, ja Lue tietosuojaseloste pysyy valikossa saavutettavissa koko tutkimuksen ajan.

Tämä ruutu ei ole muodollisuus, jonka ohi suunnittelu yrittää päästä. Se on se, mihin suostut, joten se tulee ennen sisältöä eikä sen alta.

3. Kierros 0: orientaatiokeskustelu

Useimmat tutkimukset alkavat Kierros 0:sta – keskustelusta lomakkeen sijaan. Tekoälyapuri nimeltä Kastalia avaa ilmiön kanssasi omin sanoin, ennen kuin yhtään teesiä arvioidaan.

Kastalia kertoo itse, mikä se on:

”Olen tekoäly, en ihminen. Autan sinua avaamaan kysymykset omin sanoin ennen varsinaista kierrosta – en arvioi vastauksiasi enkä kerro, mikä olisi oikea kanta. Minä kannan aineiston, näkeminen on sinun.”

Ruudulla on TUTKITTAVA ILMIÖ, se, mitä paneelisuunnitelma jo tietää näkökulmastasi (”Paneelisuunnitelmassa sinusta kerrotaan:” – korjaa keskustelussa, jos se on väärin) ja etenemisrivi ”Vastattu {answered}/{total} orientaatiokysymykseen”. Kirjoitat vapaasti; asteikkoa ei ole.

Lopetat itse napista Olen valmis →. Sen jälkeen laskeudut omalle sivullesi, ja teesit avautuvat aikanaan.

Kierros 0 voidaan myös ohittaa. Silloin ensimmäinen ruutusi on luvun 5 ruutu.

4. Runko, joka ei muutu

Tästä eteenpäin yksi asia kannattaa sisäistää, koska se tekee kaikesta muusta helppoa: sivu ei vaihdu, sen keskiosa vaihtuu. Otsikko on siellä, missä ennenkin, valikkonappi on siellä, missä ennenkin, lomake on joka kierroksella samassa kohdassa.

Kolme rungon osaa on aina paikalla:

Paneelin pulssi näyttää prosessin, ei koskaan sisältöä. Se kertoo, että paneeli liikkuu – montako on vastannut, montako uutta kommenttia on – eikä tarkoituksella kerro mitä paneeli ajattelee, ennen kuin olet vastannut. Siinä ei ole tavoitelukua: se sanoo ”27 on vastannut”, ei ”27/40”. Tavoiteluku tekee elonmerkistä mittarin, ja mittari kertoo myöhäiselle vastaajalle, että hän on myöhässä.

5. Vastausvuorosi

Tätä varten sinut kutsuttiin. Pääsarakkeessa ovat kuluvan kierroksen teesit, ja kussakin: teesi, asteikko ja kenttä perustelulle – Perustele vastauksesi:.

Vastaaminen käytännössä

• Arvio ja perustelu kulkevat yhdessä. Kenttä kysyy sen suoraan: ”Miksi arvioit näin?” Osa teeseistä on avoimia eikä niissä ole asteikkoa lainkaan; osassa on kaksi kriteeriä (esimerkiksi todennäköisyys ja toivottavuus), ja silloin vastaat molempiin – ne ovat eri kysymyksiä samasta teesistä.
• Kaikki teesit eivät ole asteikkoja. Tutkimuksesta riippuen sinua voidaan pyytää asettamaan vaihtoehdot järjestykseen, valitsemaan yksi tai useampi, sijoittamaan piste tasolle, jakamaan pisteitä, merkitsemään aikaikkuna (Aikaisintaan / Viimeistään, tai Ei toteudu koskaan) tai jatkamaan aikasarjaa. Kaava on kaikissa sama: oma kantasi, sitten perustelusi.
• Yksi kerrallaan vai kaikki kerralla. Yksi kerrallaan näyttää yhden teesin (”Teesi {i}/{n}”) ja napit Edellinen / Seuraava; Näytä kaikki palauttaa koko listan. Tämä on lukutapa eikä muuta mitään muuta.
• Työsi säilyy kirjoittaessasi. Selaimeesi tallentuu luonnos kirjoittaessasi, ja lomake sanoo ”Luonnos tallennettu tälle laitteelle”. Jos poistut ja palaat, ”Tallentamaton luonnos löytyi” tarjoaa Palauta luonnos tai Hylkää. Luonnos on omassa selaimessasi, ei tutkimuksessa.
• Tallentaminen. Jokaisessa teesissä on Tallenna; Tallenna kaikki ({n}/{total}) lähettää ne, jotka olet täyttänyt. Kun kaikkiin on vastattu, näkymä sanoo ”Kiitos vastauksistasi!”

Mitä et vielä näe, ja miksi. Vastausvaiheessa paneelin sisältöä – jakaumaa, keskiarvoa, muiden perusteluja – ei näytetä, ennen kuin olet vastannut. Ei siksi, että se olisi salaista, vaan siksi, että sen näkeminen ensin muuttaa sitä, mitä kirjoitat. Ensimmäinen vastaus, joka on jo ankkuroitu paneelin keskiarvoon, on tutkimukselle vähemmän arvokas kuin ensimmäinen vastaus, joka on sinun. Ehto on teesikohtainen, ei sivukohtainen: vastaa tähän teesiin, näe tämän teesin jakauma.

Tutkimus voi olla tässä tiukempi tai väljempi. Kierroksen näkyvyysasetus on Sokea, Oman vastauksen jälkeen tai Avoin, ja vastausvaiheen tavallinen asetus on Oman vastauksen jälkeen.

6. Vastattu, ja kierros on yhä auki

Vastauksesi on perillä. Nyt on totta kaksi asiaa.

Voit yhä muuttaa sitä. ”Vastasit kaikkiin {total} teesiin. Voit palata muokkaamaan vastauksiasi kierroksen aikana.” – Muokkaa vastauksia avaa lomakkeen uudelleen. Mikään ei lukitu, ennen kuin kierros sulkeutuu – ei myöskään silloin, kun tutkimus siirtyy dialogivaiheeseen: teesi, johon et ehtinyt vastata, on vastattavissa vielä dialogin aikana.

Vastaamasi teesit alkavat näyttää paneelia. Vastaamasi teesin alle ilmestyy JAKAUMA: pylväät vastauksista, pystyviiva keskiarvolle, katkoviiva mediaanille, vaalea vyö kvartiiliväille ja oma vastauksesi merkittynä (★ ja oranssi pylväs). Vieressä ovat luvut, joita paneeli käyttää – Md, Kh, IQR ja ”{n} vastausta”.

Jos paneelissa on tekoälypanelisteja, jakauma kertoo sen: tekoälyn osuus on piirretty toisella värillä ja viivoitettu, selite nimeää molemmat joukot – Ihmiset ({n}) ja Tekoälypanelistit ({n}) – ja n annetaan eriteltynä, ”ihmisiä {h}, tekoälypanelisteja {a}”. Väri ei koskaan yksin kanna tuota tietoa, koska pelkkä väri pettää osalle paneelia.

7. Dialogi: kierros, jolla paneeli puhuu itselleen

Dialogivaihe tekee tästä delfoin. ”Näet nyt muiden panelistien vastaukset ja perustelut nimettöminä. Tutustu näkökulmiin ja harkitse, haluatko tarkentaa omaa vastaustasi.”

Dialogi on avoin. Tässä paneelin sisältö ei odota vastaustasi – dialogissa sisältö on juuri se, mihin osallistutaan, ja portti sulkisi ulos täsmälleen sen panelistin, jonka pitäisi päästä mukaan. (Tutkimus voi silti valita sokean dialogikierroksen; silloin käyttöliittymä sanoo sen.)

Teesikortti on yhdessä järjestyksessä, ja järjestys on perustelu:

1. teesi
2. oma vastauksesi – jotta luet muita sitä vasten, mitä itse sanoit
3. jakauma – mihin paneeli päätyi
4. keskustelu linkin takana, luvut linkin nimessä – ”Keskustelu · {a} perustelua · {c} kommenttia”

Luvut ovat linkin nimessä tarkoituksella: voit päättää kannattaako avata avaamatta sitä.

Keskustelun sisällä

• MUIDEN PERUSTELUT ovat arvioiden mukana annetut perustelut; kommentit ovat sitä, mitä paneeli sanoi toistensa perusteluista. Ne ovat eri asioita, ja siksi linkki laskee ne erikseen.
• Tekoälypanelistien puheenvuoroissa on tekoäly-merkki – sama tosiasia kuin viivoitettu osuus kaaviossa, samasta kentästä.
• Jos tutkimuksessa on roolipeli, nimimerkin vieressä näkyy kirjoittajan rooli. Ihmisen itse kirjoittama rooli on merkitty itse valittu, ja fasilitoijan tekoälylle teettämä rooli tekoälyn rooli. Oman roolisi kirjoitat ja sijoitat laatikkoon omalla sivullasi kortilla Roolipeli.
• Omaan perusteluusi et vastaa vaan tarkennat: painikkeessa lukee Lisää tarkennus. Tarkennus näkyy muille perustelusi alla merkinnällä oma tarkennus, mutta sitä ei lasketa dialogiksi – dialogi on sitä, mitä panelistit sanovat toistensa perusteluista.
• Voit Vastaata ja reagoida: Oivaltava, Samaa mieltä, Haastaa. Kommentti, johon toinen panelisti on vastannut, lukittuu muokkaukselta: ”Lukittu – kommenttiin on vastattu”. Sen muokkaaminen kirjoittaisi hiljaa uusiksi sen, mihin joku toinen on vastannut. Oma tarkennus omaan kommenttiin ei lukitse. Jos kantasi muuttuu lukon jälkeen, sanot sen uudella kommentilla – silloin muutos näkyy dialogina eikä jälkikäteen muokattuna historiana.
• Käännä näyttää puheenvuoron omalla kielelläsi, jos käännös on paneelissa käytössä; Näytä alkuperäinen palauttaa sen.

Mielen muuttaminen on koko idea. Jos kierroksella on revisio, muokkaat vastaustasi ja kerrot, mikä siihen vaikutti – kenttä kysyy ”Miksi muutit mielesi? (Mikä perustelu tai tieto vaikutti?)” – ja voit luokitella muutoksen: Enemmän samaa mieltä, Enemmän eri mieltä, Vivahde / täsmennys, Uudelleenkehystys. Sitten Tallenna tarkistettu arvio.

Myös se, ettet muuta mieltäsi, on tulos. Pidetty kanta, jonka perustelu on kestänyt vasta-argumentit, on vahvempi näyttö kuin kanta, jota kukaan ei haastanut.

8. Kierrosten väli – tutkimuksen tulosrikkain ruutu

Kun kierros sulkeutuu, ruutu ei sano ”odota”. Se sanoo Kierros {n} on sulkeutunut, ja näyttää, mitä kierros tuotti:

”Alla on se, mihin paneeli tällä kierroksella päätyi: jakaumat, muiden perustelut ja se, mikä jäi auki. Tämä on kierroksen välitulos – ei odotustila.”

Tämä on se hetki, jonka ympärille koko menetelmä on rakennettu, ja sen hukkaa helposti. Kierroksen tulos on edessäsi ilman velvoitetta: mitään ei täytetä, mikään ei ole myöhässä. Se näkemys, jonka viet seuraavalle kierrokselle, muodostuu tässä.

Jos seuraava kierros on aikataulutettu, sinulle kerrotaan, milloin – ”Kierros {n} avautuu {date}.” – ja jos ei: ”Seuraavan kierroksen ajankohtaa ei ole vielä ilmoitettu.” Välitulos ei riipu aikataulusta; aika on lisä, ei ehto.

Barometri-tutkimuksessa tähän päättyy aalto ja seuraava alkaa; välitulos on tulos, eikä loppuruutua ole.

9. Kun tutkimus päättyy

”Tutkimus on päättynyt” – kaikki kierrokset on suljettu. Lopulliset jakaumat, paneelin aineisto, keskustelu ja oma polkusi sen läpi jäävät luettaviksi. Jos revisioit vastauksiasi matkan varrella, käyttöliittymä kertoo, montako kertaa: ”Muutit arviotasi dialogin perusteella {count} kertaa.”

Se mitä tämän jälkeen tapahtuu, on paneelin ulkopuolella: tulkinta – teemoitus, skenaariot, argumentti- ja diskurssianalyysi – tehdään analyysiekosysteemissä, ja tulokset tulevat sinulle viestinä eivätkä uutena ruutuna. Pronoia kuvailee, se ei tulkitse.

10. Lisäpalvelut: hakemisto

Lisäpalvelut on hakemisto, ei laatikko. Se avaa listan, jossa on oma rivi kullekin palvelulle: kuvake, nimi, yksi rivi siitä, mistä on kyse, ja merkki oikealla.

Neljä asiaa tässä listassa on harkittuja:

1. Rivi on olemassa vain, jos palvelu on. Ryhmävertailu ilmestyy, kun tutkimuksessa on vertailuakselit; signaalikanava, kun tutkimus kerää signaaleja. Rivi, joka avautuu tyhjään, on huonompi kuin ei riviä.
2. Merkki on tosiasia, ei kehotus. Lukematon viesti korostuu, koska se odottaa sinua. Muut merkit ovat lukumääriä, ja tyhjä palvelu sanoo ei vielä sisältöä sen sijaan, että teeskentelisi olevansa täysi.
3. Yksi palvelu kerrallaan, ja yksi askel takaisin – Takaisin palveluihin. Työsi säilyy taustalla: ”Valitse palvelu – työsi säilyy avattuna taustalla.”
4. Tietosuojaseloste on aina saavutettavissa. Se ei ole palvelu, jonka pitäisi ansaita paikkansa kiinnostavuudella.

Kahdessa näistä on huomautus, joka kannattaa lukea.

Paneelin pulssi piirtää kullekin mittarille oman radan: vaalea kaista on ka ± kh, merkki on keskiarvo sijaintivärillä (”Väri kertoo sijainnin asteikolla, ei sitä, onko tulos hyvä vai huono”), pallot ovat ryhmien keskiarvoja silloin, kun ryhmiä on, ja radan alla ovat asteikon päät. Konsensusta ei piirretä geometriana missään: konsensusluku on luokitus, joka vaatii kalibroidun kynnyksen, ja se luokitus kuuluu analyysiin eikä palkkiin.

Ryhmävertailu piilotetaan, kun ryhmät ovat liian pieniä: ”raportoitavia vähintään 3 hengen alaryhmiä ei ole tarpeeksi. Tulokset näkyvät vain koko paneelin tasolla.” Pienet ryhmät tunnistavat ihmisiä. Piilotus on lupauksen toteutumista, ei vika.

11. Kaksi tapaa nimetä sama matka

Tutkimus valitsee toisen kahdesta sanastosta, ja valitsin lukee Esitystapa:, vaihtoehtoina Tarina ja Pelkistetty:

Tämä on nimeämistä, ei rakennetta. Tilat, säännöt ja pinnat ovat molemmissa samat; paneeli, jolle delfoilainen kuvasto olisi vieras, saa tavalliset sanat. Tarinatavassa aseman napauttaminen kertoo, mitä se vaihe tarkoittaa – ”Napauta asemaa, niin kerron, mitä se tarkoittaa”.

Missä ikinä oletkin, Olet tässä merkitsee nykyisen aseman ja Kierros {n} / {total} kertoo, miten pitkällä paneeli on.

12. Jos tutkimus on reaaliaikainen

Real-Time Delphi -tutkimuksessa kierroksia on yksi, ja vastaaminen ja dialogi ovat siinä auki yhtä aikaa heti alusta. Myös orientaatiokeskustelu (luku 3) voi kuulua siihen. ”Real-Time Delphi – muiden panelistien vastaukset näkyvät jatkuvasti. Voit muuttaa omaa vastaustasi milloin tahansa.”

Luvun 5 sääntö tekee silti työnsä teesi kerrallaan: teesi näyttää sinulle paneelin heti, kun sinä olet siihen vastannut. Päivitykset saapuvat elävästi silloin, kun yhteys sen sallii, ja käyttöliittymä kertoo kummassa tilassa se on teeskentelemisen sijaan – Päivitetty juuri nyt, ja vihje, joka erottaa elävän yhteyden varakyselystä.

Reaaliaikaisessa tutkimuksessa ei ole kierrosten välin ruutua, koska väliä ei ole. Barometer Delphi -tutkimuksessa taas samoihin teeseihin palataan mittausaalto kerrallaan: kierroksen väli on aallon väli, ja teesi voi sen aikana poistua käytöstä tai tulla korvatuksi uudella.

13. Vastauksesi, sinun tietosi

• Anonymiteetti paneeliin päin on rakenteellinen, ei asetus jota pitäisi etsiä. Muut panelistit näkevät koodin.
• Voit poistua ilman, että keskustelu pyyhkiytyy. Pyydät sitä tutkimuksen yhteyshenkilöltä, ja hän toteuttaa sen – lupauksen pitää se, joka pystyy sen pitämään. Vetäytyminen poistaa nimesi, sähköpostiosoitteesi ja henkilökohtaisen linkkisi pysyvästi; jo antamasi vastaukset jäävät aineistoon pseudonyymin alle, koska muut panelistit ovat lukeneet ja kommentoineet niitä. Epäsymmetria on tarkoituksellinen, ja se sanotaan tässä eikä paljastu jälkikäteen.
• Suljettu kierros pysyy suljettuna. Sen vastauksia ei muokata jälkikäteen – muuten jo näytetty vastausaste ja kierrosten välinen vertailu muuttuisivat hiljaa tutkimuksen alla.
• Tietosuojaseloste on tämän tutkimuksen osalta se, mikä kertoo, miten tietojasi käsitellään, ja se on yhden painalluksen päässä joka ruudulta.

14. Fasilitoijalle: mitä kannattaa sanoa ääneen

Kolme kysymystä, joita panelistit kysyvät ja joihin käyttöliittymä vastaa, mutta kutsukirje ei yleensä:

1. ”Pitääkö tämä tehdä yhdeltä istumalta?” Ei. Luonnokset säilyvät, vastauksia voi muokata kierroksen ollessa auki, ja tutkimus odottaa.
2. ”Miksi en näe tuloksia vielä?” Koska et ole vielä vastannut – ja sillä hetkellä, kun vastaat siihen teesiin, sen jakauma avautuu. Kyse on ankkuroitumisesta, ei pääsystä.
3. ”Mitä kirjoittamalleni tapahtuu?” Paneeli lukee sen dialogissa pseudonyymin alla, ja analyysi sen jälkeen. Perustelu on aineisto; numero on hakemisto siihen.

Kirjoitettu 26.8.2026. Käännös englanninkielisestä lähteestä en/30-pronoia/20-panelist-process.md, joka on kanoninen versio: jos nämä kaksi ovat eri mieltä, englanti on oikeassa ja tämä on vanhentunut. Nappien ja välilehtien nimet on otettu ohjelman omista suomenkielisistä merkkijonoista, ja vartija (scripts/test_guides_coverage.py) kaatuu, jos opas nimeää kontrollin toisin kuin ohjelma.