Prikaz objav z oznako zanesljivost. Pokaži vse objave
Prikaz objav z oznako zanesljivost. Pokaži vse objave

četrtek, 31. januar 2013

Opombe h Kvalitativno raziskovanje... (5): fokusne skupine - Notes to the book Qualitative... (5): Focus groups

Naslednji v zborniku Kvalitativno raziskovanje v interdisciplinarni perspektivi je sestavek o kvalitativnem raziskovanju v medicini s predstavitvijo metode fokusnih skupin in delfske metode (Tonka Poplas Susič). V dosedanjih besedilih o kvalitativnem raziskovanju - mislim na razpravo F. Adama in na svoj Uvod ... - je bilo sorazmerno malo pozornosti posvečene metodam in tehnikam zbiranja empiričnega gradiva, več epistemološkim osnovam (Adam) ter metodam in tehnikam analize kvalitativnega gradiva (Mesec). To praznino v domačih besedilih je vsekakor treba zapolniti, zato je obravnavani sestavek dobrodošel. To, da se tematsko omejuje na področje medicine oziroma zdravstva, mu ni v škodo, saj z omejitvijo na konkretno področje preprečuje preveč splošno razpravljanje.
Fokusna skupina je mala skupina ne manj kot štirih in ne več kot 12 članov, ki so povabljeni k sodelovanju pri pogovoru z določeno temo. Pogovor naj ne bi trajal več kot uro ali uro in pol. Skupino usmerja moderator, ki naznači temo z odprtimi vprašanji, naslovljenimi na celotno skupino, in v nadaljevanju skrbi za to, da se razpravljalci ne oddaljijo od teme; spodbuja njihovo interakcijo in skrbi, da pridejo vsi do besede. Sam se med razpravo vsebinsko ne opredeljuje in razprave ne usmerja k določenim vsebinskim zaključkom.
Fokusne skupine so oblika skupinske razprave, tj. - po naši opredelitvi - nestandardiziranega, odprtega spraševanja (intervjuja) s popolno ali delno možnostjo metakomunikacije, pogovora o pogovoru. Razpravlja se sicer o določeni temi, razprava je osredotočena ali fokusirana (od tod naziv), vendar se spodbuja čim bolj odprta in vsestranska razprava. Po drugi strani je dana možnost metakomunikacije, tj. pogovora o tem, kako deluje skupina in kako se pogovarjamo; to vprašanje postavimo z namenom, da bi odstranili možnost nesporazuma o temi, namenu in pomenu posameznih vprašanj in izjav. Učinki skupine na posameznike so različni, vodijo pa lahko do tega, da se lahko nekateri člani prikrijejo, da misli ostanejo neizrečene. Skupina deluje po eni strani kot spodbujevalec izražanja mnenj (več glav več mnenj, interakcija), po drugi pa se lahko kmalu pojavi težnja h konformiranju z vplivnim ali večinskim mnenjem, saj deluje skupina kot ščit pred moderatorjem ali blažilec (buffer). Avtorica poudarja, da fokusne skupine ali skupinske razprave ne gre zamenjevati s skupinskim intervjujem. Pri slednjem "sodelujoči odgovarjajo neposredno na raziskovalčevo vprašanje", medtem ko se v fokusni skupini razvije odprta razprava med člani skupine in "moderator ne sprašuje udeležencev posamezno". "Dinamika v skupini pomaga udeležencem ugotoviti in raziskati svoja stališča v takem obsegu, ki ne bi bil mogoč pri navadnem intervjuju (str. 101)."
V nadaljevanju razpravlja avtorica o številu fokusnih skupin, ki naj bi jih zajeli v raziskavi in poudari, da gre pri tem za teoretično vzorčenje in ne statistično reprezentativno. Opiše postopek kodiranja, pri katerem sodelujeta dva raziskovalca, in načine zagotavljanja veljavnosti in zanesljivosti rezultatov s triangulacijo raziskovalcev, analitikov in virov. Posebej informativen je seznam raziskav, ki jih je izvedla ali pri njih sodelovala (mednarodne) Katedra za družinsko medicino v Ljubljani.
V nadaljevanju je v članku opisana sicer v literaturi znana metoda Delfi, to je metoda, s katero na različnih področjih, v tem primeru v medicini, "načrtno zbiramo stališča in mnenja sodelujočih" o kakem problemu, recimo preventivi alkoholizma, da bi po treh krogih brez razprave z izločanjem stališč ali predlogov, ki nimajo širše podpore, prišli na koncu do stališč, s katerimi se strinja velika večina sodelujočih (str. 113-114). Ta metoda sicer po mojem ni kvalitativna, saj gre za vrsto ocenjevalnih lestvic, ki dajo povsem kvantitativne rezultate (povprečja ipd.). Na koncu članka je navedenih 20 izključno tujih virov.

Karikatura, ki jo prilagam, je skeptični komentar o fokusnih skupinah, ki pravi: Če bi Henry Ford ("oče avtomobila") uporabljal (za generiranje idej in inovacij) fokusne skupine, bi imeli hitrejše konje. Opozarja na pojav niveliranja sodb v skupini okrog povprečja ali celo spust k bolj konservativnim sodbam.

Vir: Tonka Poplas Susič. 2012. Kvalitativno raziskovanje v medicini: fokusne skupine in delfska metoda. V: Adam, F. idr., Kvalitativno raziskovanje v interdisciplinarni perspektivi. Ljubljana IRSA.

torek, 25. december 2012

Zanesljivost kvalitativne raziskave

Problem zanesljivosti kvalitativne raziskave. Nekateri avtorji zagovarjajo, da je kriterij zanesljivosti težko oziroma nemogoče doseči, saj je ponovljivost situacije nemogoča.

V prihodnje nameravam nekaj zapisov bolj sistematično posvetiti kriterijem kakovosti kvalitativne raziskave, a tokrat moram odgovoriti na vprašanje, zastavljeno ob srečanju s tretjo generacijo slušateljev VŠZNJ.
Zanesljivost raziskave je eden od več kriterijev kakovosti, "dobrosti" ali znanstvenosti raziskave; drugi kriteriji so veljavnost, objektivnost in drugi. V okviru "kvantitativnega" raziskovanja definirajo, da je raziskava zanesljiva, če so zanesljiva njena ugotavljanja dejstev oziroma če so zanesljivi njeni merski postopki. Merski postopek je tem bolj zanesljiv, čim bolj podobne rezultate da ob ponovljenih merjenjih iste značilnosti na isti populaciji. Zanesljivost se torej nanaša na stabilnost rezultatov oziroma na njihovo nespremenljivost v času oziroma - če merimo lastnost, ki se v času napovedljivo spreminja (veča ali manjša) - napovedljivo spreminjanje; v slednjem primeru je merilo zanesljivosti korelacija med ponovljenimi meritvami.
Problem ugotavljanja zanesljivosti, ki je omenjen v vprašanju, to je, da ni mogoče ponoviti situacije, velja tudi za kvantitativno raziskavo. Strogo vzeto nobena situacija ni v celoti ponovljiva, celo pri naravoslovnem eksperimentu ne. Ni mogoče natanko ponoviti vseh pogojev eksperimenta. Gre za to, ali so ponovljive bistvene značilnosti situacije. V tem smislu so meritve v naravoslovju ponovljive, v družboslovju pa mnogokrat sploh ne vemo, katere so bistvene značilnosti neke situacije in kaj mora ostati konstantno, da bi lahko rekli, da imamo opraviti z enako, čeprav ne isto situacijo. (Prav razlika med pojmoma "enako" in "isto" lepo nakaže, v čem je problem; ponovljena situacija nikoli ni ista, je pa lahko enaka po bistvenih značilnostih.)
Pri kvantitativnih raziskavah ta problem ugotavljanja zanesljivosti, to je, da situacije ne moremo ponoviti, rešimo na primer tako, da koreliramo odgovore na lihih postavkah testa z onimi na sodih (metoda dveh polovic -"split-half"-metoda), ali pa tako, da primerjamo rezultate dveh ali več slučajnostnih vzorcev, vzetih iz iste populacije. Čim bolj podobni so ti rezultati, tem bolj zanesljiva je tehnika merjenja.
Problem ponovljivosti torej ni samo problem kvalitativnih raziskav. Gotovo pa je pri teh še bolj poudarjen, zato ker pri kvalitativni raziskavi pogosto iščemo prav posebne, individualne, izjemne značilnosti situacije, osebe ali skupine. Po definiciji take izjemne situacije ni mogoče ponoviti. Zdi se, da je v takem primeru protislovno zahtevati zanesljivost opisa, saj ta predpostavlja - vsaj idealno - ponovljivost situacije. Kako naj torej ugotovimo, ali so naši opisi zanesljivi? Ali je ta zahteva sploh upravičena? Kaj pomeni zanesljivo opisati enkraten, neponovljiv zgodovinski dogodek, če zanesljivost definiramo kot ponovljivost ugotovitev? 
Tu se srečamo z velikim razponom kvalitativnih raziskav, ki vključujejo tako idiografske kot nomotetske raziskave; prve skušajo čim verneje opisati enkraten dogodek, druge skušajo odkriti splošne zakonitosti. Ali lahko zanesljivost definiramo tako, da bi upoštevala oboje?
Razprave o kakovosti kvalitativnih raziskav, ki so mi bile dosegljive (Seale 1999; Flick 1998; Denzin&Lincoln 1994), predpostavljajo, da nam gre pri raziskovanju za odkrivanje splošnih zakonitosti; ti avtorji se ne ukvarjajo z zanesljivostjo zgodovinskih raziskav.
Ker se  zavedajo problema ponovljivosti in da bi razlikovali ta problem pri kvalitativnih raziskavah od istega problema pri kvantitativnih, so pojem zanesljivosti nadomestili s pojmom "avditabilnosti". "Avdit" je izvirno pregled računov, torej računovodska revizija ali inspekcija. "Avditabilnost" je torej tako stanje računov, ki omogoča pregled in presojo, ali so v redu. Mislim, da bi bil vsebinsko ustrezen prevod, da gre za "sledljivost".
Raziskava je zanesljiva, če je sledljiva, to je, če lahko za njene ugotovitve pokažemo empirično gradivo, na katerem temeljijo, in postopek sklepanja, ki je do njih privedel.
Drug vidik zanesljivosti kot avditabilnosti je doslednost klasificiranja ali kodiranja. In tretji vidik je dejanska ponovljivost.
Doslednost kodiranja povečamo s konstantnim primerjanjem kod (kar je osnovno pravilo kodiranja), tako da se kode jasno razlikujejo med seboj in da se množice izjav, ki sodijo pod posamezne kode, ne prekrivajo. Doslednost kodiranja povečamo, če pri opazovanju in opisovanju interakcij uporabljamo konkretne ne abstraktnih izrazov. Pravimo, da uporabljamo "nizkoinferenčne deskriptorje" ne "visokoinferenčnih". Primer: Bolje je, če zapišemo "Janez je udaril Petra", kot če zapišemo "Janez je izrazil agresijo do Petra". Doslednost kodiranja povečamo, če uporabimo več koderjev, ki se pri kodiranju glede vsake kode uskladijo.
Raziskava je sledljiva, če lahko drug raziskovalec sledi pripovedi in pride do istih ali podobnih ugotovitev. V poročilu o raziskavi mora biti povsem razvidno opisana pot od začetka do konca raziskave, predvsem od empiričnega gradiva preko kodiranja, oblikovanja pojmov in kategorij do zaključnih ugotovitev oziroma do tentativne teorije.
Sled raziskovalnih odločitev mora biti jasna; jasno mora biti, kaj je raziskovalec storil in zakaj. Zgodba mora biti notranje skladna, logična. 
V nekaterih primerih je možno zanesljivost ugotovitev preverjati s ponovitvijo raziskave. Tu seveda ne bo šlo za ponovitev "v enakih pogojih", ampak zgolj za nekakšno ponovitev. Tako so bili poskusi, da bi preverili pretekle raziskave s ponovnim obiskom. Neki etnolog je obiskal Samoo, da bi preveril ugotovitve Margaret Mead o odraščanju na Samoi (Coming of Age in Samoa). Drugi je ponovno obiskal predmestje Chicaga, v katerem se je odvijala Whyteova raziskava o družbi na uličnem oglu (Street Corner Society). V obeh primerih te replikacije niso bile uspešne, saj sploh niso bile ponovitve, zgolj ponovni obiski istega kraja. Vsi pogoji so se spremenili, vključno z metodo opazovanja.
Zanesljivost kvalitativne raziskave torej lahko povečamo z doslednostjo kodiranja in sledljivostjo vseh sklepov, to je, popolno transparentnostjo. K temu prispevajo na primer vnaprej izdelani pripomočki, kot so obrazci za zapise ipd. (Mesec 1999).
Iz povedanega sledi, da je o zanesljivosti mogoče smiselno govoriti tudi pri zgodovinskih raziskavah. K večji zanesljivosti le-teh prispeva čim večje število relevantnih virov, njihova ureditev po relevantnosti, kakor tudi logično povezovanje informacij iz različnih virov.
Viri:
Denzin, N. K., Y. S. Lincoln (eds.). 1994. Handbook of Qualitative Research. London: SAGE publ.
Flick, U. 1998. Qualitative Forschung. Reinbeck: Rohwolt Verlag.
Mesec, B. 1998. Uvod v kvalitativno raziskovanje v socialnem delu. Ljubljana: Visoka šola za socialno delo.
Seale, C. 1999. The Quality of Qualitative Research. London: SAGE publ.