Resultat och rapportering

Facilitering (Pronoia)

Den här handledningen fortsätter där den föregående slutade: rundorna är genomförda och studien har avslutats eller är på väg att avslutas. I handledningen läser du resultaten i Pronoia, gör en beskrivande resultatrapport för panelen och exporterar materialet till DAE-analys.

Ha arbetsfördelningen i minnet. Pronoia beskriver vad panelen svarade: fördelningar, konsensus och dissensus, ändrade ståndpunkter och mängden diskussion. Siffrorna räknas fram med regler, utan AI. DAE tolkar: tematisering, argument- och diskursanalys, scenarier och syntes görs i DAE-analyskedjan under kvalitetsgrindar.

Var resultaten finns

Resultaten finns i området Analys. Dess flikar är Sammanfattning och, som verktyg, Statistik och förändring och Kvantitativ analys. Överst i området kan du välja vilken rundas material du tittar på (Runda som visas R1, R2). Rapporten och exporten finns i området Rapportering.

1. Sammanfattning

Sammanfattningen är studiens helhetsbild. Analys – materialets tillstånd överst visar om materialet går att läsa och hur mycket dialog och hur många ändrade ståndpunkter det innehåller. Med valen på raden INNEHÅLL visar eller döljer du avsnitt.

• Helhetsbild: antalet teser, panelister och svar samt svarsfrekvensen.
• Höjdpunkter: tesen med den bredaste spridningen och tesen som diskuterades mest. De är ofta de mest intressanta punkterna för analysen.
• Rundrörelse: förändringen mellan rundorna. Om runda 2 har egna nya frågor beräknas ingen rörelse per tes, eftersom frågorna är olika frågor. Då läses utvecklingen av de panelnivåsiffror som Kvantitativ analys visar och i DAE-analysen.
• Resultat per tes: varje tes med fördelning och centralvärden.

AI-hjälp. Sammanfattningens EPISTEMISK 7×3-VÄRMEKARTA klassificerar motiveringarna efter kunskapsgrund och funktion. Klassificeringen kan göras för hand eller föreslås med AI (AI-föreslå kodning). AI:ns förslag är förslag som du godkänner eller rättar. Den egentliga argumentanalysen görs i DAE.

2. Statistik och förändring

Statistik och förändring samlar rundornas siffror tes för tes.

• Panelstatistik per tes: svarande, kommentarer, kommentarer på kommentarer, reaktioner, ändrade ståndpunkter och tesens klass (gemensam syn, splittrad eller två läger). Teserna namnges med sin runda: R1-T1, R2-T1.
• Konvergens: konsensus och spridning (IQR) före och efter de ändrade ståndpunkterna. Stigande konsensus och minskande spridning betyder att panelen närmar sig varandra. En stabil dissensus är ett lika giltigt resultat.
• Dialogicitet: hur mycket panelisterna kommenterade varandras motiveringar och kommentarerna till dem.
• Ändringsriktningar och revideringar: vem som ändrade sin bedömning, i vilken riktning och på vilka grunder.

I Argument Delphi görs de ändrade ståndpunkterna under dialogen. Därför är de materialets viktigaste del: de visar vilken motivering som fick någon att ändra ståndpunkt.

3. Kvantitativ analys

Kvantitativ analys är grundanalysen av panelens svar. Den räknas med samma kod som DAE-analysens kvantitativa skede (CP-2), så Pronoias och DAE:s siffror är desamma för samma material.

• Vems svar: Människor, AI-panelister eller Alla. Som standard räknas människornas svar, och människor och AI blandas inte.
• Runda: i en studie med flera rundor visar analysen en rundas frågor, som standard den senaste. Du byter runda med knapparna.
• Enkätens sammansättning: hur stor del av rundans frågor som är gemensam syn, hur stor del splittrad och hur stor del två läger.
• Tabell: för varje fråga antalet svarande, samstämmighetsmåttet A, läget på skalan och klassen.
• Utveckling per runda: varje rundas egen klassfördelning. Frågorna i olika rundor är oftast olika frågor, så utvecklingen följs på panelnivå: växer andelen gemensam syn eller andelen två läger. En serie per fråga visas bara om samma tes har bedömts på nytt. I Argument Delphi visas också stoppregeln, som säger om dissensusen är motiverad och har stabiliserats.
• Gruppjämförelse och Kriteriepar: om panelens grupper skiljer sig från varandra och om två kriterier, till exempel sannolikhet och önskvärdhet, följs åt.

Siffrorna säger vad som finns i materialet. Vad de betyder för forskningsfrågan är en tolkningsfråga.

4. Den beskrivande resultatrapporten

Öppna Rapportering › Rapporter. Generera resultatrapport sammanställer en beskrivande rapport över panelens svar: en sammanfattning och spridningen per tes. Rapporten kan visas i webbläsaren och skrivas ut som PDF, och Ladda ner Word (.docx) ger den som en redigerbar fil.

Rapporten är källmaterial, ingen analys. Samma rapport kan visas för panelen tillsammans med avslutningsbrevet (föregående handledning).

5. Export till DAE-analys

Öppna Rapportering › Export. Listan Rapportering – vad återstår överst på sidan visar vad som fortfarande saknas för att slutföra studien: läsbart material, överlämningen till DAE-analys, resultatrapporten, avslutningsbrevet och att studien avslutas.

Exporten ger tre filer:

1. Ladda ner CSV: det kvantitativa materialet som en tabell, en rad per panelist.
2. Ladda ner Handoff-paketet (JSON): hela materialet med motiveringar, dialoger och ändrade ståndpunkter. Det är DAE-analysens egentliga indata.
3. Ladda ner DAE_STATE.json: analyskedjans styrdata, till exempel studiens metadata, panelprofilen och orienteringen.

Om studien har avslutats är överlämningen slutgiltig. En export som görs före avslutningen är en mellanöverlämning, och du kan göra en till exempel mellan rundorna.

Bron till DAE-analys

DAE-analys är en analyskedja som använder AI och körs i Cowork. Spara de tre filerna i samma mapp. Öppna sedan en ny Cowork-konversation, skriv metodix och välj DAE-analys i startmenyn. Bifoga Handoff-paketet. Kedjan går vidare kontrollpunkt för kontrollpunkt: den kvantitativa grunden, innehållsanalyser (dialog, argument, diskurs), systemanalyser, framtidsskedet, syntes, scenarier och rapporter. Den kvalitativa utvecklingen mellan rundorna, alltså hur frågorna och motiveringarna förändrades från runda till runda, läses just där.

Andra variationer

Classic Delphi söker en gemensam syn. Läs framför allt Konvergens och Kvantitativ analys ledande indikator (konsensusindikatorn) om samma teser har bedömts i flera rundor.

Real-Time Delphi är en enda runda. Ingen rundjämförelse görs; i stället läser Kvantitativ analys av tidslinjen om svaren har stabiliserats.

Barometer Delphi jämför vågor. Kvantitativ analys visar vad som har förändrats från våg till våg och vad som har bestått.

Kom ihåg

• Pronoia beskriver, DAE tolkar. Pronoias siffror är resultatet av regler, inte tolkning.
• Frågorna i olika rundor är oftast olika frågor. Utvecklingen följs som andelar konsensus och dissensus och kvalitativt i DAE, inte tes för tes.
• Exportera materialet efter att studien avslutats, så att DAE får den slutgiltiga överlämningen.
• Hela processen mer ingående: Facilitatorns process, från planering till överlämning.