![Image](https://www.worldsupporter.org/sites/default/files/styles/medium/public/tips_suggestions/wereldbol_summaries_joho_single_boek_1_150x190px.png?itok=rEljlfYL)
Je vertrek voorbereiden of je verzekering afsluiten bij studie, stage of onderzoek in het buitenland
Study or work abroad? check your insurance options with The JoHo Foundation
Wetenschappelijk onderzoek levert ons zo betrouwbare en accuraat mogelijke kennis.
Manieren van kennis opdoen zijn:
De wetenschappelijke methode is ideeën te testen in het publieke domein (de werkelijkheid).
De hypothese is de mogelijke verklaring voor het probleem. De procedure ten aanzien van probleemoplossing die ten grondslag ligt aan onderzoek is als volgt:
Een onderzoeksprobleem is een probleem dat iemand wil onderzoeken of daar waar in het onderzoek de focus op ligt.
De onderzoeksvraag: het onderzoeksprobleem wordt omgezet in te beantwoorden vragen. Karakteristiek is, dat in de vraag een soort informatie zit die verzameld kan worden om de vraag te beantwoorden.
Empirische referentie is de mogelijkheid om iets waar te kunnen nemen in de werkelijkheid.
Goede onderzoeksvragen zijn:
Onderzoeksvragen onderzoeken meestal de relaties van karakteristieken en/of kwaliteiten.
Ethisch: verwijst naar vragen van goed en kwaad. Zijn er bepaalde vormen van onderzoek die niet moeten worden uitgevoerd?
De fundamentele vraag in dit verband is dan ook: kan door mijn onderzoek eventuele lichamelijke of psychische schade worden veroorzaakt?
Hieruit kunnen drie hele belangrijke punten worden gehaald:
Bescherming van de deelnemers van schade
Elk soort onderzoek waarbij schade mogelijk is, mag niet worden uitgevoerd, tenzij het onderzoek informatie gaat geven dat een groot voordeel levert voor de mens. Zelfs wanneer dit het geval kan zijn, dienen de deelnemers volledig te worden geïnformeerd over de betrokken gevaren en mag het geen verplichting zijn om deel te nemen.
Drie ethische vragen hierbinnen:
Het is belangrijk dat deelnemers goed worden behandeld. Wanneer ze het gevoel hebben dat dit niet gebeurt, willen ze ook niet meer deelnemen aan een onderzoek. Voor wetenschappelijk onderzoek is dit erg belangrijk, zodat de zoektocht naar betrouwbare gegevens niet wordt belemmerd.
Belangrijk bij onderzoek met kinderen:
IRB Board classificeren voorstellen van onderzoek in drie categorieën
Categorie 1 (vrijgestelde herziening): het voorgestelde onderzoek geeft geen mogelijke risico’s voor de volwassen deelnemers.
Categorie 2 (versnelde herziening): het voorgestelde onderzoek geeft niet meer dan minimale risico’s voor de deelnemers. Bijvoorbeeld een onderzoek naar het individuele gedrag van een groep volwassenen. Schriftelijke toestemming is niet nodig, wel mondelinge toestemming.
Categorie 3 (volledige herziening): elk onderzoek dat twijfelachtige elementen bevat. Bijvoorbeeld onderzoeken met speciale populaties.
Sommige onderzoekers waren ontevreden over de richtlijnen. Bogdan en Biklen bieden de volgende suggesties voor een kwalitatieve onderzoeker:
Het probleem van beschrijvende onderzoeken is dat het laat zien wat, waar of wanneer iets gebeurt, maar niet waarom. Zowel het aantonen van ‘wel verband’ als ‘geen verband’ is belangrijk.
Een variabele is een gegeven in een onderzoek dat niet vaststaat (sekse, lengte). Een constante is een gegeven in een onderzoek dat vaststaat en niet verandert (vrouw, in een klaslokaal, rechtshandig). Niet alles is gemakkelijk als variabel of constant gegeven te beschouwen: motivatie is moeilijk te bepalen en moet nader toegelicht worden.
Kwantitatief versus categoriale variabelen
Een kwantitatieve variabele is een bepaalde hoeveelheid van iets (lengte, gewicht). Ook interesse kan een kwantitatieve variabele worden, bijvoorbeeld als er waarden aan gekoppeld worden (0 = ‘helemaal niet geïnteresseerd’, 4 = ‘heel erg geïnteresseerd’).
Een categoriale variabele is niet onder te verdelen in hoeveelheden (sekse, eigenschappen).
Onafhankelijke versus afhankelijke variabelen
Onafhankelijke variabelen worden gebruikt om te kijken of ze invloed hebben op iets anders (bijvoorbeeld wel of geen klassenassistent in de klas).
Bij afhankelijke variabelen wordt gekeken of de onafhankelijke variabele hier invloed op heeft (bijvoorbeeld op de vooruitgang in leerprestaties).
Een gemanipuleerde of experimentele variabele wordt door de onderzoeker gecreëerd (bijvoorbeeld de hoeveelheid complimenten die gegeven wordt).
Een uitkomstvariabele is de afhankelijke variabele die uit het onderzoek naar voren komt (bijvoorbeeld als beste).
Moderator variabele
Een moderator variabele is een onafhankelijke variabele die het verband tussen twee andere variabelen beïnvloedt (bijvoorbeeld de variabele ‘sekse’ op het onderzoek of kinderen sneller leren wanneer er een klassenassistent in de klas aanwezig is; je krijgt dan een uitkomst voor jongens en een uitkomst voor meisjes).
Bijkomende/storende variabelen
Bijkomende/storende variabelen zijn onafhankelijke variabelen die de afhankelijke variabelen kunnen beïnvloeden in een onderzoek. Om een verband aan te tonen, moeten deze bijkomende of storende variabelen worden uitgesloten.
Een hypothese is een voorspelling van een mogelijke uitkomst van een onderzoek.
De hypothese kan als toevoeging bij een onderzoeksvraag worden gebruikt.
De voordelen van hypothesen zijn:
De nadelen van hypothesen zijn:
Een hypothese is zinvol als:
Directionele versus niet-directionele hypothesen
Een directionele hypothese wijst naar een specifieke richting (bijvoorbeeld hoger, meer, kleiner), gebaseerd op andere onderzoeken en literatuur. Als er nog geen duidelijkheid is over de richting van een onderzoek, dan heet dit een niet-directionele hypothese.
De meeste observaties zijn gebaseerd op een aantal mensen uit het geheel. Op basis van deze individuen worden conclusies getrokken over een groter geheel, waar zij onderdeel van uitmaken.
Een sample is een kleine groep individuen, ook wel steekproef genoemd.
De meeste mensen trekken hun conclusies over een groep/populatie (bijvoorbeeld een groep studenten, voetballers, o.i.d.), gebaseerd op de ervaringen die zij hebben met een kleinere groep mensen; een sample (in vervolg steekproef genoemd).
Eén van de belangrijkste stappen in het onderzoeksproces is het selecteren van de individuen die gaan deelnemen aan het onderzoek (sampling).
Steekproef is waar de informatie uit verkregen wordt.
Populatie is de grotere groep waarop de resultaten van toepassing zijn.
De voorkeur van onderzoekers is om de gehele populatie te onderzoeken.
Nadelen van het onderzoeken van een gehele populatie zijn:
De populatie is de groep waar de onderzoeker geïnteresseerd in is. Dit is de groep waarvan de onderzoeker de resultaten van wil generaliseren.
Voorbeelden van populaties zijn:
Let op: een populatie is altijd alle individuen met bepaalde karakteristieken!
Target populatie is de actuele populatie waarvan de onderzoeker graag de resultaten wil generaliseren, bijvoorbeeld: alle eerste en tweedejaars studenten in de provincie Groningen.
Accessible populatie is de populatie welke voor de onderzoeker mogelijk is om te generaliseren, bijvoorbeeld alle eerste en tweedejaars studenten op een bepaalde school in een gemeente van de provincie Groningen.
Van belang is dat de karakteristieken van de actuele steekproeven gedetailleerd beschreven worden.
Random steekproef is dat elke deelnemer uit de populatie evenveel kans heeft in de steekproef te komen. Het doel hiervan is om een representatieve steekproef te selecteren uit de populatie. Hierdoor geeft de steekproef een betrouwbaar beeld van de gehele populatie.
Middelen: voorkomen van een bias.
De onderzoeker moet in het proces van het selecteren van de individuen niet beïnvloed worden.
Bij een non-random steekproef heeft elke deelnemer uit de populatie niet evenveel kans om in de steekproef te komen; sommige deelnemers maken zelfs geen kans. Dit wordt ook wel purposive steekproef genoemd.
De voorkeur van onderzoekers is een random steekproef.
De drie meest voorkomende random steekproeven zijn:
Bij een simple random steekproef heeft elke deelnemer uit de populatie een gelijke en onafhankelijke kans om in de steekproef terecht te komen.
De beste manier is om een grote steekproef te gebruiken; hoe groter de random steekproef is, des te beter het een beeld zal geven van de populatie. Dit is mogelijk door middel van het opstellen van een lijst willekeurige nummers en hier een aantal uit te trekken. Elk nummer staat voor een bepaalde individu.
Een gestratificeerde random steekproef is een proces waarin subgroepen gemaakt zijn (strata). Deze zijn in de steekproef geselecteerd in dezelfde proporties als dat ze in de populatie zijn, bijvoorbeeld een subgroep mannen en een subgroep vrouwen.
Een cluster steekproef wordt gedaan wanneer het niet mogelijk is individuen te selecteren uit een populatie. Hierbij worden groepen of clusters geselecteerd.
Het voordeel hiervan is dat het gebruikt kan worden wanneer het moeilijk of onmogelijk is om individuen te selecteren uit een random steekproef. Het nadeel hiervan is dat er een grotere kans bestaat op het selecteren van een steekproef die niet representatief is voor de populatie.
Van een twee stappen random steekproef (‘Two stage’) is sprake, wanneer een cluster random steekproef gecombineerd wordt met een individuele random steekproef.
Systematische steekproeven
Elk individu in de populatie is geselecteerd om in de populatie terecht te kunnen komen.
Bijvoorbeeld: in een bak met de cijfers 1 t/m 10 wordt nummer 3 gepakt. Ieder kind met het nummer drie (3, 13, 23, 33) wordt geselecteerd. Deze methode gaat door totdat er bijvoorbeeld honderd personen zijn geselecteerd in de steekproef.
Twee begrippen die refereren aan systematische steekproeven:
Sampling interval is de afstand die tussen elke geselecteerde individu zit (in bovenstaande voorbeeld is dat 10):
= grootte populatie / gewenste grootte van de steekproef
Sampling ratio is de proportie individuen binnen de populatie die geselecteerd wordt voor de steekproef (in het voorbeeld was dit 10%):
= grootte steekproef / grootte populatie
Gevaar van een systematische steekproef is dat er bepaalde patronen in de lijst van individuen kunnen zitten, waardoor je een bias kan krijgen. Bijvoorbeeld een lijst geordend op de beste leerlingen; doordat deze bovenaan staan zou het gevolg hiervan kunnen zijn dat de minste leerlingen nooit gekozen worden.
Convenience sampling
Een groep individuen die op dat moment beschikbaar zijn voor een studie. Bijvoorbeeld bij onderzoeken naar wat leerlingen van het eten in de kantine vinden. De verkoper staat in de kantine en de eerste vijftig leerlingen die bij hem langs komen wordt gevraagd om iets te kopen.
Nadelen van convience sampling zijn:
Purposive steekproef
Onderzoekers gebruiken hun eigen kennis en oordeel voor het selecteren van een steekproef, gebaseerd op hun eigen prioriteiten wat zij nodig hebben qua informatie (niet betrouwbaar en representatief). Bijvoorbeeld: een docent kiest de twee beste, twee slechtste en twee gemiddelde leerlingen om uit te vinden hoe haar klas denkt over discussiëren.
Sample size
Een onderzoeker is er nooit helemaal zeker van dat zijn/haar steekproef een perfect beeld geeft van de populatie. Sommige steekproeven zijn zo klein (N=3) dat ze niet representatief kunnen zijn. Een steekproef kan ook te groot zijn, waardoor de onderzoeker er te veel tijd in moet steken. Een steekproef zou zo groot moeten zijn dat de onderzoeker er een verantwoorde hoeveelheid tijd en energie in kan steken.
Minimum grootte van steekproeven:
Externe validiteit
Generaliseren van een steekproef
Onderzoekers trekken een steekproef om hun uitvindingen te kunnen generaliseren.
Wanneer een random steekproef niet mogelijk is, moeten onderzoekers hun steekproef zo grondig mogelijk beschrijven, zodat de geïnteresseerden voor zichzelf kunnen beoordelen of het wel of niet geschikt is.
Data is informatie die de onderzoeker bij zijn onderzoek verkrijgt.
Instrumentatie is het verzamelen van data, daarbij is belangrijk:
Wie verstrekt de informatie?
Er kan zelf een instrument ontwikkeld worden of een instrument gebruikt worden dat al ontwikkeld is. Het is het beste om een instrument te gebruiken dat al ontwikkeld is, want dit kost minder tijd en het is ontwikkeld door experts die weten wat noodzakelijk is bij het ontwikkelen van een instrument. In de Eric database staan veel van dit soort instrumenten.
Een andere manier om instrumenten in te delen is om te beoordelen of geschreven antwoorden van de proefpersonen nodig zijn, of een meer algemene evaluatie van de prestaties van proefpersonen. Geschreven antwoord instrumenten zijn bijvoorbeeld ratingscales, interviewlijsten en checklisten. Prestatie instrumenten worden onderverdeeld in procedures en producten. Hierbij wordt gekeken naar de prestaties van de proefpersonen. De voorkeur gaat uit naar geschreven antwoord instrumenten.
Voorbeelden van gegevensverzameling instrumenten
Informant is zelf onderzoeker
Ratingscales: beoordelingsschalen zijn onder te verdelen in gedragsbeoordeling en productbeoordeling. Bij bijvoorbeeld gedragsbeoordeling wordt gekeken hoe een leerling naar de instructies van de leraar luistert. Er worden cijfers van 1 t/m 5 gegeven, waarbij 5 = ‘Altijd’, 4 = ‘Geregeld’, 3 = ‘Af en toe’, 2 = ‘Zelden’, 1 = ‘Nooit’. Bij productbeoordeling wordt bijvoorbeeld het handschrift van iemand beoordeeld (zie voorbeeld boek).
Interviewlijst: is eigenlijk hetzelfde als een vragenlijst, met het verschil dat bij een interview de onderzoeker de vragen mondeling stelt en de vragen door de onderzoeker worden opgeschreven.
Observatieformulier: wanneer een activiteit geobserveerd moet worden, kan er op een observatieformulier een vinkje gezet worden wanneer iets heeft plaatsgevonden. Bijvoorbeeld onderzoek naar hoe vaak een leraar een vraag stelt aan een student, wordt er per keer dat dit gebeurt een vinkje zetten. Daarna wordt er opgeteld hoe vaak hij dit gedaan heeft.
Frequentiestaten: hierbij wordt geturfd hoe vaak iets heeft plaatsgevonden. Er wordt bijvoorbeeld onderzocht hoe vaak een student reageert op andere studenten uit de klas en of dat wel of niet verband heeft met de les.
Het resultaat van ‘hij reageert op andere studenten’ ziet er als volgt uit:
Flowchart: flowchart (stroomschema) een bijzonder type van frequentiestaten. Dit kan worden gebruikt bij het analyseren van klassendiscussies. In het boek staat een plaatje hoe een stroomschema eruit ziet.
Gedragschecklist: een checklist is een instrument dat het meest gebruikt wordt. Bij een gedragschecklist kan gekeken worden of een persoon een bepaald gedrag wel of niet vertoond heeft. Wanneer hij het wel gedaan heeft, wordt er een kruisje gezet. Bijvoorbeeld: ‘hij heeft zijn bed opgemaakt’ of ‘hij heeft zijn kleren gestreken’.
Anekdotische informatie: een andere manier om gedrag van individuen te registreren is op basis van anekdotische informatie. Dit kan op vier manieren: evaluatief, interpretatief, gegeneraliseerd en specifiek. Het beste is om het op de specifieke manier te doen. Er wordt dan een anekdote gemaakt met specifieke en beschrijvende concrete gegevens, waarbij er bijvoorbeeld precies verteld wordt wat een kind deed of zei.
Time-and-motion log: dit is een instrument dat gebruikt kan worden wanneer een onderzoeker een gedetailleerde observatie van een individu of groep wil maken. Er wordt dan per minuut of minuten beschreven wat een persoon heeft gedaan.
Informant is zelf subject
Vragenlijst: een proefpersoon wordt gevraagd om een vragenlijst met vragen in te vullen. Een voordeel hiervan is dat veel mensen het tegelijk kunnen doen. Een nadeel is dat onduidelijke vragen niet verduidelijkt kunnen worden en de onderzoekers niet kunnen reageren op het antwoord van de proefpersoon.
Gedragschecklist: wordt vaak gebruikt wanneer onderzoekers willen dat studenten hun eigen gedrag/prestaties in kaart brengen. Hierbij moet de proefpersoon een vinkje zetten bij de activiteiten die hij/zijn die dag gedaan heeft. Hij/zij moet de activiteit omcirkelen waarvan hij/zij vindt dat die een andere dag meer aanbod moet komen.
Attitudeschaal: hiervan zijn twee soorten, namelijk de Likert schaal en de Segmantische differentiaal.
Leuk :___:___:___:___:___:___:___:___: Niet leuk.
Persoonlijkheidstest: deze wordt gebruikt om te kijken hoe personen zich bij bepaalde zaken voelen. Er wordt een vraag gesteld en daarbij zijn drie keuzemogelijkheden waarbij ze één keuze mogen maken.
Bijvoorbeeld: ‘Vermijd je het ontmoeten van nieuwe mensen?
Keuze 1: ‘Best vaak’, Keuze 2: ‘Soms’, Keuze 3: ‘Bijna nooit’.
Prestatietest: hierbij wordt gekeken wat de prestaties van een individu zijn op een bepaald onderwerp. Deze wordt vaak op scholen gebruikt om te kijken wat de effectiviteit van instructie is op het gebied van rekenen, taal en (natuur)wetenschappen.
Aanlegtest: dit is de IQ-test.
Vaardigheidstest: bij deze test wordt de individuele vaardigheid voor een bepaalde taak getest.
Projectieve test: door middel van projectie komen gevoelens van individuen naar buiten. Een persoon moet bijvoorbeeld aan de hand van een plaatje vertellen wat hij/zij ziet en daarmee kan de onderzoeker zien wat een persoon voelt.
Socio-gram: maakt het mogelijk sociale verbindingen en relaties binnen een groep of klas zichtbaar te maken.
Item-format
Vragen in een test kunnen verschillende vormen aannemen, hierbij zijn twee soorten:
Onopvallende maatregelen: de meeste instrumenten hebben personen nodig om iets te testen, maar er kan ook gebruik gemaakt worden van onopvallende maatregelen. Hierbij wordt indirect gemeten, zonder het subject te storen. Bijvoorbeeld een onderzoek over de hoeveelheid stress die een opleiding met zich meebrengt; door de absentie is te zien of er sprake is van stress.
Type scores
De ruwe score is de eerste score die is behaald bij het gebruik van een instrument.
Een afgeleide score is een ruwe score die vertaald is naar een meer nuttige score op een soort van gestandaardiseerde basis voor steun in de interpretatie. Dit maakt het voor de onderzoeker mogelijk om te bepalen hoe een individu heeft gepresteerd in vergelijking met anderen die dezelfde test hebben gemaakt. Voorbeelden van afgeleide scores zijn leeftijds-equivalent scores en beoordelingsequivalent scores, percentile ranks (percentage van een specifieke groep die op of beneden een gegeven ruwe score scoort) en standaard scores.
Norm- versus criteriumgerichte toetsen
Normgerichte toetsen: hierbij worden scores vergeleken met een normpopulatie, bijvoorbeeld: ‘80% scoort beter dan de proefpersoon’.
Criteriumgerichte toetsen: hierbij worden scores vergeleken met een gewenst beheersingsniveau, bijvoorbeeld ‘hij scoort boven de 90% vergeleken met alle studenten in de klas’.
Meetschalen
Er zijn vier soorten meetschalen die worden gebruik bij onderzoek in het onderwijs:
Voorbereiding van de data voor analyse
Hierbij zijn twee dingen belangrijk:
Verzamelde gegevens moeten nauwkeurig en consequent worden gescoord. Daarna moeten de gegevens in een tabel gezet worden en gecodeerd worden.
Valide instrumenten zijn belangrijk om de juiste conclusies te trekken uit de informatie afkomstig van de gebruikte instrumenten.
Validiteit is de geschiktheid, zinvolheid, juistheid en het nut van de gevolgtrekkingen van onderzoekers.
Betrouwbaarheid is de consistentie van scores/antwoorden van het ene instrument vergeleken met een andere, en van de ene set items naar de andere.
Validiteit
Kern: juiste conclusies trekken uit de verkregen onderzoeksinformatie.
Validitatie is het proces van verzamelen en analyseren van bewijs ter ondersteuning van gevolgtrekkingen. Het zijn de gevolgtrekkingen met betrekking tot het specifieke gebruik van een instrument die valide zijn, niet het instrument zelf.
Een betekenisvolle gevolgtrekking zegt iets over de betekenis van de informatie verkregen door het gebruik van een instrument. Dit helpt onderzoekers bij het maken van beslissingen met betrekking tot hun onderzoeksdoel (zie ook figuur 8.1 in het boek).
Inhoud gerelateerd bewijs van validiteit
Inhoud en formaat van het instrument: een instrument moet representatief zijn ten opzichte van het te onderzoeken doel. Verder moet het instrument er ‘goed’ uit zien, qua lay-out en taalgebruik etc. Om een instrument te testen op geschiktheid, wordt een instrument vaak geëvalueerd door mensen die er verstand van hebben.
Criterium gerelateerd bewijs
De relatie tussen scores verkregen uit de instrumenten en scores verkregen uit één of meer andere instrumenten of metingen. Deze worden vergeleken.
Criterium: het criterium is een tweede test of onderzoeksprocedure bedoeld om dezelfde variabele te meten. Er zijn twee vormen.
Correlatie coëfficiënt: dit is een sleutelbegrip met betrekking tot validiteit. Correlatie coëfficiënt is de graad van de relatie tussen individuele scores verkregen uit twee instrumenten. Deze kan positief (beide scores hoog of laag) of negatief (de ene score hoog, de andere score laag) zijn.
Validiteit coëfficiënt: als de correlatie coëfficiënt gebruikt wordt om de relatie tussen informatie afkomstig van het ene instrument te vergelijken met het criteriuminstrument is dit de validiteit coëfficiënt. Hoe hoger, hoe geschikter de voorspellingen van de onderzoeker.
Voorspellingstabel: zie tabel 8.1 in het boek; deze laat duidelijk verbanden zien.
Opbouw gerelateerd bewijs
Kern: de aard van de psychologische opbouw of kenmerken gemeten door het instrument (zie figuur 8.1 in het boek). Hiervoor moet zoveel mogelijk (gevarieerd) bewijs verzameld worden om de onderzoeksvraag te beantwoorden.
Dit gebeurd in 3 stappen:
Betrouwbaarheid
Betrouwbaarheid is de consistentie van de verkregen scores/gegevens. Uitkomsten uit vergelijkbare onderzoeken geven vergelijkbare scores. Scores verkregen uit een test kunnen betrouwbaar zijn, maar niet valide (zie figuur 8.2 in het boek).
Betrouwbaarheid en validiteit hangen samen met de context waarin het onderzoek wordt uitgevoerd.
Meetfouten: wanneer er variatie in uitkomsten is, dan is er sprake van een meetfout.
Verwachtingen van de onderzoeker met betrekking tot de variatie in onderzoeksuitkomsten wordt weergegeven in een betrouwbaarheidscoëfficiënt. Dit is de relatie van scores van dezelfde individuen op hetzelfde instrument, of twee verschillende tijdstippen, of op twee delen van hetzelfde instrument.
De test-hertest methode is een methode waarbij drie keer dezelfde test bij dezelfde groep op verschillende tijdstippen gedaan wordt, waarna een betrouwbaarheidscoëfficiënt wordt berekend. Uitkomsten zijn afhankelijk van het gekozen tijdsinterval; hoe langer, hoe lager de betrouwbaarheid. Betrouwbaarheid is ook afhankelijk van de stabiliteit van een variabele.
Gelijkwaardige vormen methode is wanneer twee verschillende maar gelijkwaardige instrumenten worden toegepast bij dezelfde groep tijdens eenzelfde periode. Deze instrumenten onderzoeken dezelfde inhoud. Deze is te combineren met de test-hertest.
Interne consistentie methoden zijn de split-half procedure en de alpha coëfficiënt:
De standaardmeetfout is een index die de mate laat zien waarin een meting zou variëren onder bepaalde omstandigheden.
Scoringsovereenkomst: directe observaties zijn erg gevoelig voor kenmerken van de onderzoeker. Als een onderzoeker gebruikt maakt van dit soort instrumenten zijn ze verplicht de graad van scoringsovereenkomst te benoemen (op blz. 161 van het boek staat een korte samenvatting van wat hierboven allemaal besproken is).
Validiteit en betrouwbaarheid zijn bij kwalitatief onderzoek vaak niet relevant of passend. In plaats hiervan zijn begrippen als eerlijkheid, geloofwaardigheid, expertise en integriteit van de onderzoeker van belang.
De relatie tussen twee variabelen moet enkel veroorzaakt worden door één duidelijke oorzaak in plaats van veroorzaakt te worden door een onbekende variabele.
Wanneer het niet duidelijk is welke variabele/ oorzaak de resultaten veroorzaakt hebben, mag een onderzoeker geen conclusies trekken. Geobserveerde verschillen van de afhankelijke variabele moeten direct gerelateerd zijn aan de onafhankelijke variabele en niet door een andere variabele veroorzaakt worden.
Als onderzoekers vanaf het begin van het onderzoek aan de interne validiteit denken, kunnen ze hun onderzoeksvaliditeit verhogen.
Een manier om problemen bij het generaliseren te voorkomen is bewijzen dat de uitgevallen personen niet verschillen van de rest van de groep personen. Ook kan de reden van uitval onderzocht worden en bewezen worden dat deze niets te maken heeft met het onderzoek.
De locatie kan invloed hebben op de onderzochten bijvoorbeeld door grootte, licht, betere materialen of geluid.
Sommige mensen hebben voorkeur voor een methode; de onderzoeker kan de groep dan beïnvloeden. Oplossing hiervoor is de onderzoekers zelf te laten kiezen voor een methode of alle methodes door de onderzoekers uit te laten voeren.
Experiment
Een experiment is de vergelijking tussen een behandelde groep en een niet-behandelde groep. Experimenteel onderzoek is een van de meest succesvolle methodes voor onderzoekers.
Experimenteel onderzoek is het enige onderzoek waarmee je het effect kunt meten van een zelfstandige variabele. Het is het beste soort onderzoek om hypothesen te onderzoeken over oorzaak-gevolg relaties.
Het karakteristieke van experimenteel onderzoek is dat onderzoekers de onafhankelijke variabele manipuleren. Het basisidee van experimenteel onderzoek: probeer iets en observeer systematisch wat er gebeurt.
Twee voorwaarden van experimenteel onderzoek zijn:
Een experiment bestaat uit:
Bij random assignment heeft iedereen die meedoet aan het onderzoek evenveel kans om in de experimentele groep als in de controlegroep te komen.
Bij random selection heeft elk individu uit de populatie evenveel kans om aan het experiment mee te doen.
Random assignment:
Hoe krijg je controle over deze ‘extraneous’ variabelen (vreemde variabelen van buitenaf)? Door:
Zwakke experimentele onderzoeken zijn:
Echte experimentele onderzoeken zorgen ervoor dat de ‘subjecten’ at-random worden toegewezen aan de verschillende groepen. Eén groep is gemanipuleerd en de andere is de controlegroep. Voorbeelden hiervan:
Bij Mechanical Matching worden personen die hetzelfde scoren samengenomen; deze vormen steeds een paar. Statistical Matching is een voorspelde score op basis van samenhang tussen de variabelen. Het verschil tussen de voorspelde-geobserveerde score is waarmee gewerkt wordt.
Quasi-experimenteel designs zijn niet gerandomiseerd; je hebt als onderzoeker op bepaalde variabelen geen grip, zoals op:
Bij deze manier van onderzoeken wordt er maar gekeken naar één onderwerp of groep. Hiervan wordt gebruik gemaakt om veranderingen in gedrag te bestuderen na behandeling of interventie. Single subject design wordt vooral gebruikt in het speciaal onderwijs.
Single subject researchers
Deze gebruiken vooral lijngrafieken om de data en de effecten van de interventie weer te geven. Langs de y-as staat de afhankelijke variabele en langs de x-as staat de tijd weergegeven. De horizontale as moet altijd 1 of 1,5 zo groot zijn als de verticale as.
In de baseline periode (A) wordt er gekeken naar het gedrag op dat moment, bij de verticale lijn wordt de interventie ingezet en bij de praise (B) wordt data verzameld tijdens interventie.
Bedreiging voor de interne validiteit bij single-subject research zijn:
Controleren van bedreigingen in single-subject designs. Single-subject designs zijn:
Externe validiteit en single subject designs: single subject designs zijn vaak niet generaliseerbaar, omdat het maar om een kleine groep gaat.
Correlatie onderzoek
Correlatie onderzoek wordt ook wel associational onderzoek of observationeel onderzoek genoemd. Hierin worden twee variabelen vergeleken zonder manipulatie.
Correlatie onderzoek is ook beschrijvend omdat het de relatie tussen twee variabelen beschrijft.
Correlatie onderzoek is beschrijven hoe de kwantitatieve variabelen overeenkomstig zijn, de uitkomst hiervan is de correlatie coëfficiënt en die wordt uitgedrukt als r.
Correlatie onderzoek heeft als doel om te helpen bij het uitleggen van menselijk gedrag en om gevolgen (explanatory studies) of uitkomsten te voorspellen (prediction studies).
Variabelen die geen relatie of een beetje relatie met elkaar hebben worden vaak niet verder onderzocht.
Bij correlatie onderzoek is er soms ook een derde variabele in het spel waardoor je soms een andere uitkomst heb dan dat je zou verwachten.
De variabele waarmee de voorspelling wordt gedaan heet de predictor-variabele dus de voorspellende variabele.
De voorspelde variabele heet de criterium variabele.
Een hulpmiddel bij correlatie is een scatterplot en/ of een regressielijn.
Wanneer je een rechte lijn kan trekken in een scatterplot maak je gebruik van een regressielijn. Een onderzoeker kan deze lijn gebruiken als voorspeller.
De standaard error of estimatie (schatting) is een index die een schatting geeft voor de variabele waarmee de voorspelling wordt gedaan, in hoeverre deze score correct is.
Meer complexe correlatie technieken
Het essentiële idee achter path analyse is om een theorie te formuleren van mogelijke oorzaken van een apart fenomeen en dan te bepalen of de correlaties tussen alle variabelen constant is met de theorie.
Problemen
Steekproeven
Steekproeven moeten in een correlatie onderzoek nauwkeurig worden geselecteerd en als het mogelijk is random. Je moet eerst een geschikte populatie zoeken. Je moet minimaal 30 personen in je steekproef hebben.
Instrumenten
De instrumenten die je gebruikt moeten betrouwbaar zijn en evidence based.
Wat vertelt een correlatie efficiënt ons?
Dit hangt ervan af hoe een correlatie efficiënt is toegepast.
Alleen een correlatie van hoger dan 0.65 is redelijk goed voor voorspellingen.
Correlatie van 0.85 duidt een goede relatie aan.
Correlaties zijn er ook voor bedoeld om de betrouwbaarheid en validiteit te checken.
Problemen bij validiteit in een correlatie onderzoek
Onderwerpen kenmerken (subject characteristics)
Wanneer twee of meer kenmerken van individuen of groepen een goede correlatie hebben, bestaat er de mogelijkheid dat een ander kenmerk kan verklaren hoe de relatie is die gevonden is. In dit soort zaken dat het andere kenmerk kan gecontroleerd worden door de statische techniek noemen we gedeeltelijke correlatie.
Door een scatterplot te maken en daarin de regressielijn te verwerken krijg je een duidelijk beeld.
Locatie
Een locatieprobleem is mogelijk wanneer alle instrumenten zijn toegediend aan elk onderwerp op een bepaalde locatie, maar de locatie verschillend is voor verschillende onderwerpen. Voor onderzoekers is er niet onderuit te komen dat er verschillen zijn in testlocaties, vooral wanneer individuen in verschillende settings worden getest.
Instrumentation
Instrument vervalt/bederf (instrument Decay)
Dit wordt het meest gebruikt in observational studies, in correlatiestudies gebruik je niet steeds dezelfde instrumenten. Het is belangrijk dat de observerende de test niet saai vindt doordat het steeds hetzelfde is.
Data verzamelaar kenmerken (data collector characteristics)
Zij kunnen ervoor zorgen dat er fouten komen wanneer personen verschillende informatie verstrekken voor een instrument. Geslacht, leeftijd of etniciteit kunnen effect hebben op de antwoorden.
Data verzamelaar bias (data collector bias)
Een ander probleem kan zich voor doen door resultaten van (unconscious) bias op het deel van de data van de ontvanger wanneer beide instrumenten verschillende scores geven bij dezelfde persoon.
Testen
De ervaring van antwoorden is dat het eerste instrument dat is gegeven in een correlatie onderzoek invloed heeft op het tweede instrument (wanneer je een leraar haat dan zeg je toch dat je hem leuk vindt want dat zou de test willen horen).
Mortaliteit (mortality) (sterfelijkheid)
Strikt genomen is dit niet een probleem van interne validiteit in correlatie studies omdat iemand die “lost” uitgesloten wordt van het onderzoek, de correlaties kunnen niet opgenomen worden alleen wanneer de onderzoeker een score heeft voor ieder persoon op beide variabelen die goed afgemeten zijn.
Waarom externe validiteit: omdat de steekproeven eigenlijk direct bestudeerd worden en vaak niet eerst wordt gekeken naar hoe de steekproef geselecteerd is, sterft de steekproef uit, omdat de mensen die geselecteerd zijn bijvoorbeeld niet meer mee willen doen enz.
Evaluatie
Stap 1: vraag: wat zijn de specifieke factoren dat het geweten te beïnvloeden is of kon logisch gezien iets van de variabelen beïnvloeden die worden gecorreleerd.
Het maakt niet uit welke variabele geselecteerd is.
Stap 2: vraag: wat is het meest aannemelijk van al deze factoren die ook beïnvloeden van de andere variabele in correlatie met de eerste?
We moeten ons geen zorgen maken dat iedere factor niet is gerelateerd aan een variabele. Een factor moet gerelateerd zijn aan beide variabelen om een bedreiging te kunnen zijn.
Stap 3: evalueer de verschillende bedreigingen in volgorde van aannemelijkheid, maak een plan hoe je ze onder controle kunt houden.
Onderwerpen kenmerken (subject characteristics)
Mortaliteit (mortality) (sterfelijkheid)
1: verdwenen deelnemers hebben vaak een slechtere werk ervaring
2: slechtere sociale vaardigheden
3: de waarschijnlijkheid van het hebben van een effect tenzij het gecontroleerd is: hoog.
Locatie
Instrumentation
Instrument vervalt/bederf (instrument Decay)
1. hoge sociale vaardigheden
2. onprettig effect op het gebied van werk
3. laag
Data verzamelaar kenmerken (data collector characteristics)
1. goede relatie met werk
2. geen relatie met sociale vaardigheden
3. gemiddeld
Data verzamelaar bias (data collector bias)
1. geen werk succes
2. zou een relatie kunnen hebben met sociaal gedrag
3. hoog
Testen
Het doel van causaal-comparatief onderzoek is de reden of de consequenties van verschillen tussen reeds bestaande groepen of individuen achterhalen.
Het gaat dus om iets dat al geweest is en niet zoals bij experimenteel onderzoek om een gecreëerde situatie.
Vaak is een variabele bij dit soort onderzoek niet of erg moeilijk te manipuleren. Dit hangt regelmatig samen met ethische kwesties als geslacht, huidskleur, IQ, en dergelijke. Deze zijn achteraf wel te vergelijken (wat gebeurt bij causaal-comparatief onderzoek), maar het wordt als ethisch onverantwoord gezien om op die manier groepen te vormen.
Na het doen van causaal-comparatief onderzoek wordt echter vaak nog wel verder gekeken met behulp van experimenteel onderzoek. Dit om te controleren of er geen sprake was van eventuele variabelen die niet gezien waren in het causaal-comparatief onderzoek.
De interne validiteit van causaal-comparatief onderzoek is niet hoog, aangezien er nog onbekende variabelen mee kunnen spelen. De interpretaties en redenaties van dit onderzoek kunnen dus ook nooit als volledig waar worden aangenomen.
De drie belangrijkste kenmerken zijn:
Waarom zijn survey onderzoeken belangrijk?
Onderzoekers vinden het minder belangrijk waarom er spreiding bestaat, maar meer wat de spreiding is.
Cross-sectionele onderzoeken
Je zoekt informatie over een groep uit een vooraf vastgestelde populatie, op een bepaald moment in de tijd. Deze moet hetzelfde zijn als je bijvoorbeeld meerdere leeftijdsgroepen onderzoekt.
Wanneer een volledige populatie is onderzocht noem je het census (= volkstelling).
Longitudinale onderzoeken
De informatie wordt verzameld op verschillende momenten in de tijd.
Er zijn 3 meest gebruikt longitudinale designs:
Kijken of er sprake is van een 'trend' over de jaren (is er een lijn te bekennen?). De onderzochte personen kunnen dus veranderen na verloop van tijd.
Is een specifieke groep in de populatie die niet verandert in het verloop van het onderzoek.
Onderzoek naar dezelfde groep van individuen op verschillende momenten tijdens het verloop van het onderzoek.
Nadeel hierbij: het kan lang duren, als het onderzoek over een lange periode is uitgesmeerd.
Inspectie onderzoek en correlatie onderzoek
Als je de relaties van bepaalde variabelen wilt onderzoeken, dan moet je je vragen daarop afstemmen (zie ook Hst. 15). Inspectie onderzoek is niet geschikt voor alle onderzoeksonderwerpen (bijvoorbeeld observaties).
Zoeken van het probleem
Het is allereerst belangrijk dat een vragenlijst/enquête interessant is, zodat het motiveert om er mee aan de slag te gaan. Er dient een duidelijk doel te zijn; elke vraag dient een relatie te hebben met het onderzoeksdoel. Een goede strategie is om een hiërarchisch model te handhaven: eerst de meest globale vragen en langzaamaan meer specifiekere vragen. Daarbij zijn tevens de verdeling in categorieën raadzaam, zodat personen een keuze kunnen maken of iets op hen van toepassing is, zo niet kunnen ze die vraag overslaan (kost tijd).
Identificeer de populatie waar het omgaat
Wat wordt onderzocht in een onderzoek heet de unit of analysis (= de eenheid van analyse). Let op je doelpopulatie!: deze moet goed worden uitgewerkt.
Kiezen van de manier van data verzameling
Er zijn vier basiswegen om data te verzamelen. Voor elke manier zijn er voor- en nadelen.
Deze methode wordt gebruikt als de onderzoeker de beschikking heeft over alle leden van een bepaalde groep, op dezelfde plaats en dezelfde tijd (bijvoorbeeld studenten in een collegezaal). Voordelen van deze manier zijn: de hoge respons (meestal tegen de 100%), de lage kosten, de onderzoeker kan het onderzoek uitleggen en eventueel vragen beantwoorden.
Nadelen zijn: er zijn maar weinig type onderzoeken die gebruik maken van individuen in een samengestelde groep.
Voordelen: weinig kosten, het kan alleen door de onderzoeker worden voltooid, je kunt moeilijk benaderbare groepen bereiken en de respondenten kunnen lang over de antwoorden nadenken.
Nadelen: weinig aanmoedigmogelijkheid om de respondent deel te laten nemen aan het onderzoek, geen assistentiemogelijkheid, de respons is vrij laag en niet alle voor alle groepen toepasbaar (bijvoorbeeld analfabeten).
Voordelen: goedkoop, snel, handig bij gestandaardiseerde vragenlijsten, doorvraagmogelijkheid, uitlegmogelijkheid, makkelijk een follow-up toepasbaar en er kan meteen verslaglegging plaatsvinden.
Nadelen: het bereik van sommige groepen (bijvoorbeeld mensen met geen telefoon of een geheimnummer), geen visuele observatie, niet altijd geschikt voor persoonlijke vragen.
Over het algemeen is er in telefoononderzoek een 5% lagere respons dan met persoonlijke interviews.
Er zijn veel voordelen, waarschijnlijk de meest effectieve methode.
Voordelen zijn onder andere: rapport kan meteen worden opgemaakt, vragen kunnen worden verduidelijkt, er wordt minder gevraagd van de respondenten (lezen en schrijven).
Nadeel: kosten zijn hoog, er zijn getrainde interviewers nodig, dataverzamelingstijd is lang, omdat de identiteit van de persoon bekend is kan er een blokkade optreden voor persoonlijke vragen en sommige groepen zijn lastig persoonlijk te spreken in grote getale.
Kiezen van de onderzoeksgroep
Belangrijk is een randomselectie uit de gekozen populatie.
De onderzoekers moeten er zeker van zijn dat de ondervraagden de informatie die de onderzoekers willen verkrijgen bezitten en de vragen willen beantwoorden.
Het is soms goed om te informeren naar de bereidwilligheid van de respondenten. Soms is het verstandig om bijvoorbeeld via een docent de vragenlijst uit te delen in plaats van direct naar de student zelf.
Klaarmaken van het instrument
De meest gebruikte instrumenten zijn de vragenlijst en de enquête (zie ook Hst. 7).
Ze lijken hetzelfde, maar de vragenlijst wordt meestal zelf door de respondent ingevuld en de enquête door de onderzoeker zelf.
Het gebruikte instrument is belangrijk voor het succes van het onderzoek. Het dient aantrekkelijk te zijn, niet te lang en makkelijk te beantwoorden te zijn. Tevens is de manier van vragen stellen belangrijk.
Er zijn vier praktische uitgangspunten die alle onderzoeksvragen dienen te bezitten (welke allemaal met 'ja' moeten worden beantwoord:
De vraagstelling moet uitnodigend zijn (in persoonlijk interview of telefonisch).
Tevens moeten er geen lastige woorden worden gebruikt of leg deze uit. Belangrijk gegeven: aan alle respondenten moeten dezelfde vragen worden gesteld. Tevens moet de conditie, waarin de vragen worden gesteld (ongeveer) gelijk zijn.
Type vragen
Voordelen: makkelijk en sneller te analyseren, standaardisering mogelijk, populair bij respondenten.
Nadelen: lastig op te stellen, vaak moet er een antwoord alternatief zoals 'overige' worden gegeven, er is een limiet aan antwoordmogelijkheden.
Voordelen: makkelijk op te stellen, makkelijk een follow-up, meer individuele antwoorden.
Nadelen: lastig te interpreteren, moeilijk te scoren en te standaardiseren door de verschijnende antwoorden.
Soms is er een combinatie van open en gesloten vragen mogelijk. Er is een voorkeur voor gesloten vragen (MC) met korte antwoorden.
Suggesties voor gesloten vragen
1. De vraag moet ondubbelzinnig zijn
2. Simpel houden
3. Korte vragen
4. Begrijpelijke taal
5. Vermijd termen die waarschijnlijk verschil in antwoorden geven
6. Vermijd leidende vragen
7. Vermijd dubbele ontkenning
Voortesten van de vragenlijst
Het is goed om de vragenlijst op een kleine gelijkvormige groep, net als in het onderzoek, uit te proberen.
Hierdoor kun je de 'slechte' vragen filteren en kijken of het doel duidelijk is.
Overall format
De lay-out is belangrijk. Onder andere de spreiding van de vragen en de invulmogelijkheid van de antwoorden.
Soms is er sprake van een afhankelijke vraag: een vraag die afhankelijk is van het antwoord ervoor (bijvoorbeeld bij 'ja' ga verder naar vraag...). Afhankelijke vragen maken het makkelijker de vragen te beantwoorden en verbeteren de kwaliteit van de te ontvangen data. Let goed op de lay-out van de afhankelijke vragen, deze moet duidelijk georganiseerd zijn.
Het maken van de inleidbrief
Bij onder andere mailingen is het belangrijk dat je een inleidbrief hebt die het doel van de vragenlijst uitlegt. Dit kan een rol spelen bij de motivatie van de respondenten om deel te nemen aan het onderzoek.
De brief moet gericht zijn aan de respondent, uitleg van het doel, het belang van het onderzoek, de hoop dat er mee gewerkt wordt, er eventueel delen van de resultaten worden gedeeld, de anonimiteit wordt gewaarborgd en de retourdatum voor de ingevulde vragenlijst.
Training interviewers
Zowel telefonische als persoonlijke interviewers dienen te zijn getraind.
Bij telefonische interviews is het van belang dat de persoon wordt gebonden, voordat het interview is begonnen. De interviewer dient zo kort en bondig mogelijk het doel van het onderzoek e.d. uit te leggen. De vraagstelling is hierbij van belang.
Persoonlijke interviewers hebben bovenstaande ook nodig en moeten leren gemakkelijk te rapporteren. Tevens moet de interviewer leren wanneer hij moet doorvragen etc. en moet hij letten op houding, expressie e.d. Een verkeerde gezichtsuitdrukking kan ertoe leiden dat er geen antwoord op een vraag wordt gegeven. Onderstaande geeft aan wat er vooral in de training van interviewers aanwezig moet zijn:
Het gebruik van een interview als meetbare mogelijkheid
Interviews zijn veel in gebruik in de cognitieve en ontwikkelingspsychologie, om inzicht te krijgen in de inhoud en het proces van denken (bijvoorbeeld het onderzoek van Piaget).
Non respons
Het lijkt erop dat steeds meer mensen niet willen deelnemen aan een onderzoek (wegens bepaalde redenen; geen interesse, vergeten etc.).
'Geen reactie' is een probleem, omdat de mensen die niet reageren verschillen van de mensen die wel reageren en zo krijg je misleidende uitkomsten.
Totaal niet reageren
Je kunt niet reageren omdat je bijvoorbeeld niet thuis bent, ziek bent of de taal niet beheerst. De meest voorkomende reden is weigering om mee te werken of het niet thuis zijn. Bij mailingen kan het zijn dat de mail niet goed aankomt of onbeantwoord wordt teruggestuurd.
Er zijn een aantal manieren om non respons te verminderen. Een aantal voorbeelden: goed getrainde interviewers, op een tijdstip dat het uitkomt, anonimiteit behouden, start met makkelijke vragen, terugbellen als mensen niet opnemen (op verschillende dagen en tijdstippen). Bij mailingen kun je een vervolgmail sturen. Tevens kan een beloning meer reacties opleveren.
Er zit verschil tussen het wel of niet reageren op de manier van vragen (persoonlijk, telefonisch of per mail). Telefonisch is er het minste reactie, bij mailingen is de reactie wisselend.
Zo speelt ook het gebied waar het onderzoek plaatsvindt mee, zoals steden.
Een oplossing voor 'geen reactie' op telefonisch onderzoek is random vervanging: doorgaan met benaderen totdat het gewenste aantal reacties is bereikt. Een nadeel hieraan is dat je een verkeerd beeld krijgt, omdat je alleen de mensen onderzoekt die willen meewerken.
Nog een oplossing is zoveel mogelijk demografische informatie van de respondenten verzamelen, ook die niet mee willen werken, met deze informatie kun je namelijk meer verklaren. Alleen hoeven de demografische gegevens niet voor de populatie beschikbaar te zijn. Echter de cijfers van de mensen die niet hebben gereageerd dienen altijd in het onderzoek genoemd te worden.
Gedeeltelijke gaten
Het kan ook zijn dat er gedeeltelijke gaten zijn in de informatie van een respondent (bijvoorbeeld als de respondent geen antwoord op de vraag weet). Het kan ook zo zijn dat bepaalde vragen eruit worden gehaald door de onderzoeker vanwege inconsequente antwoorden.
Samengevat, om de reactie hoog te houden moet je rekening houden met:
Hou rekening met de omgeving (plaats en tijd) waarin het onderzoek (vragenlijstafname) plaatsvindt en de persoon die de vragen stelt, dit kan namelijk het antwoord op de vragen beïnvloeden.
Bedreiging van de interne validiteit
Er zijn vier bedreigende factoren: sterfte, locatie, gebruik van onderzoeksinstrument en uitval (decay) van de geïnterviewde (bijvoorbeeld moe zijn).
Data analyse
Uiteindelijk moeten de antwoorden worden samengevoegd en tot conclusies leiden. Tevens moet worden aangegeven hoeveel procent van de ondervraagden antwoord heeft gegeven en welke.
Bij kwalitatief onderzoek, doet men onderzoek naar de kwaliteit van relaties, activiteiten, situaties of materialen.
1. De natuurlijke omgeving is een directe bron en belangrijk element
2. Gegevens worden verzameld in de vorm van woorden en plaatjes
3. De onderzoekers zijn geïnteresseerd in hoe dingen gebeuren
4. Inductief werken, een theorie vormen
5. Belangstelling voor de gedachten van het individu
Stappen in kwalitatief onderzoek:
Benaderingen in kwalitatief onderzoek:
Steekproeftrekkingen die veel voorkomen:
Probleem bij deze verschillende steekproeven is dat er niet altijd duidelijk is welke doelgroep er onder de steekproef verstaan wordt.
Daarnaast is het bij kwalitatief onderzoek moeilijk om te generaliseren, daarom repliceren bij kwalitatief onderzoek: op een ander tijdstip andere mogelijkheden onderzoeken.
Ethiek binnen kwalitatief onderzoek:
Respectvol omgaan met de privacy, bescherming en identificeerbaarheid van een persoon.
Rollen
Onderzoeker maakt deel uit van de situatie die hij observeert.
Complete participant: de mensen die worden geobserveerd zijn zich niet bewust van de identiteit van de observeerder. Hierbij bestaan ethische vraagtekens. De ‘geheime’ observeerder verzamelt wel meer valide observaties.
Participant-as-observer: de mensen die worden geobserveerd zijn zich bewust van de identiteit van de observeerder, ze weten dat ze worden geobserveerd.
Observeerder zit aan de zijlijn, is niet direct betrokken bij de situatie.
Observers-as-participant: observeerder maakt zichzelf bekend, mensen weten dat ze worden geobserveerd.
Complete observer: onderzoeker observeert zonder deel te nemen aan de activiteiten. Deze vorm verkrijgt waarschijnlijk het meest werkelijke beeld, maar er bestaan ethische vragen.
Duur: eenmalig of langdurig over maanden of zelfs jaren.
Focus: smal: één element of breed: holistische kijk/alle elementen
Vormen
Observeren van individuen in hun natuurlijke setting. Variabelen worden niet gemanipuleerd. Het is vaak de basis voor meer formele experimenten.
De geobserveerde wordt verteld wat het moet doen, maar niet hoe. Een onderzoeker kan kijken wat er onder bepaalde omstandigheden gebeurt: variabelen worden gemanipuleerd.
Individueel rollenspel: iemand speelt een rol op basis van hoe diegene denkt dat iemand zal reageren op een bepaalde situatie.
Team rollenspel: aandacht gaat uit naar de interactie tussen het team.
Nadeel: kunstmatigheid. Geen garantie dat een situatie hetzelfde verloopt in werkelijkheid. Resultaten van simulatie dienen vaak als hypotheses voor ander onderzoek.
Effecten
De aanwezigheid van een observeerder kan effect hebben op de geobserveerde en kan dus effect hebben op de uitkomst. Als een observator lang genoeg aanwezig is, raken de mensen er aan gewend. Een goede observator in bijvoorbeeld een klas gaat pas rapporteren na vier of vijf dagen. Ook zijn er mensen die beweren dat men wel geïnformeerd moet worden over de observatie, maar dat er pas na afloop moet worden verteld wat er is geobserveerd.
De mogelijkheid dat een observator bevooroordeelt wat hij ziet. Hieraan is niet te ontkomen. Niemand is totaal objectief. Een observator dient zich er bewust van te zijn en moet het proberen te controleren. Door bijvoorbeeld vanuit meerdere perspectieven te kijken en door observaties met een andere observator te overleggen.
Observer expectations: observatoren verwachten soms een bepaald soort gedrag, bijvoorbeeld als zij op de hoogte zijn van het IQ van de geobserveerde. Door geluid en video-opnames te maken kan data overlegd worden.
Coderen van observatiedata
Codeschema’s worden vaak gebruikt bij observaties. Een codeschema bevat een aantal categorieën waarin de frequentie van bepaalde gedragingen weergegeven kan worden. Deze schema’s staan in contrast met zoveel mogelijk opschrijven wat je ziet in een bepaalde situatie.
Het gebruik van technologie
Bij codeschema’s moet ook gekozen worden uit meerdere alternatieven. Wanneer is een leraar bijvoorbeeld ontmoedigend of kritisch? Video-opnames maken dat er niet meteen gecodeerd hoeft te worden.
Daarnaast kan een observator veel missen/niet zien. Iemand die gespecialiseerd is in het onderwerp kan meekijken wat er gebeurt.
Voordelen geluid/videomateriaal: het kan opnieuw bekeken worden door de observator, ook door anderen die hun visie kunnen geven. Het kan gebruikt worden voor verder onderzoek en kan vergeleken worden met andere (voor)beelden.
Nadelen: videocamera’s zijn niet altijd gemakkelijk om te verkrijgen, je moet er mee kunnen werken. De aanwezigheid van video of geluid apparatuur kan gedrag beïnvloeden. Het kost geld. Geluidsmateriaal is over het algemeen iets gemakkelijker maar neemt alleen geluid op, geen non verbale communicatie. Bovendien is geluidsmateriaal niet altijd goed verstaanbaar. Desalniettemin blijft het een waardevolle ondersteuning bij het verzamelen van data.
Interviewen is een manier om de nauwkeurigheid van observatie te checken.
De opzet van interviewen is uitvinden hoe mensen ergens over denken/hoe ze zich ergens bij voelen, dit zijn niet direct observeerbare zaken.
Typen interviews
Verbale vragen, gericht op het ontlokken van specifieke antwoorden. Vaak worden uitkomsten gebruikt om te vergelijken of contrasteren. Bij kwalitatief onderzoek kunnen ze het best aan het eind van een onderzoek toegepast worden, omdat interviews de waarneming van een onderzoeker beïnvloeden. Interviews zijn beter toepasbaar om een bepaalde hypothese te testen.
Interview guide approach: interviewer bepaalt de volgorde en de manier van stellen van vragen, onderwerpen zijn vooraf gegeven. Voordeel: richtlijnen zijn vooraf aangebracht, het is interactief. Nadeel is dat de resultaten uiteindelijk wellicht minder goed vergeleken kunnen worden.
Standardized open-ended interview: dezelfde open vragen aan alle individuen.
Voordeel: uitkomsten kunnen beter vergeleken worden. Minder interviewer effecten en oordelen. Nadeel: niet flexibel, niet natuurlijk.
Close, fixed-response interview: mogelijke antwoorden zijn vooraf gegeven. Voordeel: data analyse is simpel, veel vragen kunnen in korte tijd gesteld worden.
Nadeel: is onpersoonlijk, er komt wellicht niet uit wat er echt speelt.
Dit is het meest voorkomende type interview bij kwalitatief onderzoek. Er wordt geen gebruik gemaakt van vragenlijsten. De interviewer is er op gericht uit te vinden wat de visie van iemand is op een bepaald onderwerp, vergeleken met die van anderen. Dit lijkt gemakkelijk, maar is juist één van de moeilijkste interviews om goed uit te voeren. Ethisch: wanneer is een vraag te persoonlijk. Hoe creëert een interviewer een gemakkelijke vertrouwde sfeer?
Daarbij is het van belang de juiste vragen op het juiste moment te stellen. Bovendien wordt er verschillende informatie van verkregen: organiseren van data is ingewikkeld. De kracht is dat de meest relevante vragen gesteld kunnen worden, afgestemd op het individu en zijn omstandigheden.
Retrospective interviews kunnen op de drie bovenstaande manieren gestructureerd worden. Bij dit type interview gaat het om het herinneren/terugblikken op een gebeurtenis in het verleden. Dit type is het minst nauwkeurig en betrouwbaar van alle types.
In een onderzoek kunnen verschillende types gebruikt worden.
Key-actor interviews
Sleutelfiguren (personen die ergens in gespecialiseerd zijn/ergens veel vanaf weten) zijn waardevol voor het verkrijgen van gedetailleerde informatie. Onderzoekers moeten tijd in dit soort mensen investeren om een vertrouwensband met hen op te bouwen. De info van een sleutelfiguur kan gebruikt worden als cross-check met de dataverzameling. Er moet voor gewaakt worden dat een sleutelfiguur niet aan een onderzoeker vertelt wat deze wil horen.
Types interviewvragen
Routine vragen als leeftijd, opleidingsniveau, inkomen.
Feiten vragen, bijvoorbeeld hoeveel studies biedt de RUG aan.
Vragen over wat de ondervraagde doet of heeft gedaan in het verleden. Mogelijke vraag: hoe ziet je schooldag eruit?
Deze vragen worden gesteld om uit te vinden wat iemands mening is over een bepaald onderwerp.
Vragen om te achterhalen hoe de ondervraagde zich voelt over bepaalde dingen.
Opinie en gevoelsvragen worden vaak verward. Het is belangrijk het verschil te onderscheiden. Opinie heeft betrekking op denken, gevoelsvragen en op gevoel.
Deze vragen hebben betrekking op de zintuigen: zien, horen, tast/voelen, proeven of ruiken. Bijvoorbeeld wat zag je toen je de klas binnenliep? Deze vragen kunnen beschouwd worden als ervaringsvragen en worden dan ook vaak over het hoofd gezien als losstaande categorie.
Gedragscode voor interviews
Niet bekritiseren, hij of zij neemt de tijd om te antwoorden.
Bijvoorbeeld niet gezellig een biertje in de kroeg drinken na het interview.
Groepsfocus interview
Groepsfocus interview: een interviewer vraagt 4 tot 8 personen over een aantal vragen na te denken. Doel: erachter komen wat de personen denken over die vragen in een sociale context. De personen horen de kijk van anderen en kunnen hun eigen kijk naar aanleiding daarvan opnieuw beschouwen. Let op: het is geen discussie, het is niet probleemoplossend en het is niet om beslissingen te maken. Het is een interview!
Registratie interview data
Door middel van tape opnames en aantekeningen.
Voordelen tape opnames: leggen gesprekken niet stil, woorden worden niet veranderd door interpretatie. Het maken van aantekeningen blijft noodzakelijk naast het opnemen van een tape.
Ethiek bij interviewen
Deelnemers aan een interview moeten beschermd worden. Bijvoorbeeld diepte interviews kunnen intiem zijn, deelnemers stellen zich dan kwetsbaar op. Bovendien dienen geïnterviewden goed ingelicht te worden over de opzet en het doel van het interview. Het is ethisch verantwoord om bij deelname een overeenkomst met daarin informatie te laten ondertekenen.
Dataverzameling en analyse bij kwalitatief onderzoek
Er zijn belangrijke verschillen in de dataverzameling van kwalitatief en kwantitatief onderzoek. Bij kwalitatief onderzoek gaat de voorkeur uit naar minder gestructureerde, open dataverzameling. De structuur wordt dan later aangebracht als de inhoud wordt geanalyseerd. Dit gebeurt meestal aan de hand van het scoren van frequenties.
Validiteit en betrouwbaarheid bij kwalitatief onderzoek
Bij kwalitatief onderzoek verwijzen validiteit en betrouwbaarheid naar:
Centrale vraag: hoe kunnen onderzoekers er zeker van zijn dat ze niet misleid worden.
Validiteit: nauwkeurigheid, betekenis en bruikbaarheid van de gevolgtrekkingen die een onderzoeker doet op basis van de data.
Betrouwbaarheid: bestaansrecht van gevolgtrekkingen over tijd, locatie en omstandigheden.
Bij kwalitatief onderzoek is veel afhankelijk van de kijk van de onderzoeker. Iedere onderzoeker heeft zijn vooroordelen. Technieken die de kijk van onderzoekers checken om te verzekeren dat zij niet misleid worden:
Een kwalitatief onderzoek kent verschillende doelen:
Wat gebeurt er overdag in de kantine van de RUG?
Hoeveel leerlingen zitten er op de RUG?
Welke gebeurtenissen bepalen de cultuur van deze school?
Wat zal er in de toekomst gebeuren op basis van de uitkomst van de verkiezingen?
De derde methode die onderzoekers gebruiken om data te verzamelen en te analyseren is inhoudsanalyse. Hiervan is het analyseren van documenten het grootste deel.
Wat is inhoudsanalyse?
Veel activiteiten van de mens zijn niet direct observeerbaar of meetbaar. Inhoudsanalyse is een methode waarmee onderzoekers menselijk gedrag indirect kunnen onderzoeken, door hun communicatie te analyseren. Bewuste en onbewuste overtuigingen ideeën en waarden zijn vaak zichtbaar in communicatie. Onder communicatie vallen ook door mensen gemaakte objecten die niet bedoeld zijn als communicatie bijvoorbeeld aardewerk.
Om deze communicatie te analyseren moet de onderzoeker veel informatie verwerken.
Dit wordt gedaan door het ontwikkelen van passende categorieën, waarderingen of scores die de onderzoeker kan gebruiken om latere vergelijking te verlichten.
Inhoudsanalyse wordt vaak in combinatie met andere soorten onderzoek verricht, vooral met historisch en etnografisch onderzoek.
Het is zeer bruikbaar bij observatie en interview informatie.
De methode is breed inzetbaar in onderzoek in onderwijs, bijvoorbeeld:
Inhoudsanalyse kan ook als aanvulling op meer directe onderzoeksmethoden gebruikt worden.
En het kan gebruikt worden om onderzoekers inzicht te geven in problemen en hypothesen die zij daarna met meer directe methoden onderzoeken.
Er zijn twee manieren om informatie in categorieën in te delen:
Wat wordt er geanalyseerd; zinnen, woorden, schilderijen?
De onderzoeker moet een link leggen tussen de doelstelling en de data. Meestal wordt er gebruik gemaakt van bestaande data, soms ook hun eigen data, zoals vragenlijsten.
Bijvoorbeeld een roman kan op verschillende manieren getoetst worden bijvoorbeeld op woorden, zinnen, paragrafen etc.
Een van de doelgerichte steekproef designs uit hst 18 wordt het meest gebruikt.
De steekproeftechnieken uit hst 6 kunnen eveneens gebruikt worden, bijvoorbeeld, random sample, stratified sample en cluster sampling.
De onderzoeker moet categorieën formuleren die relevant zijn voor het onderzoek. Dit zijn vragen zoals bij analyse van een tekstboek bijvoorbeeld: Hoe zijn vrouwen omschreven, wat zijn hun psychische en sociale karakters. Deze vragen zijn de categorieën van de analyse en kunnen nog weer worden opgebroken in kleinere coderingen. Voor een voorbeeld zie tabel 20.1
In een inhoudsanalyse kan de onderzoeker zowel de manifeste als de verborgen inhoud onderzoeken of beide. Het verschil: Het manifest verwijst naar het vanzelfsprekende aan de oppervlakte. De latente inhoud verwijst naar de onderliggende bedoeling.
Manifest heeft als voordeel dat het makkelijk is te coderen en betrouwbaar, een andere onderzoeker heeft grote kans op dezelfde uitkomst. De validiteit is minder goed. Bijvoorbeeld als het woord ‘denken’ word geteld, wordt er niet naar de manier waarop het gebruikt wordt gekeken.
De latente inhoud heeft het voordeel dat je achter de onderliggende betekenis van een document komt, maar ten koste van de betrouwbaarheid.
Daarom is de beste oplossing ze beide te gebruiken.
Hoewel het zelden gebeurt geloven wij dat sommige van de procedures om betrouwbaarheid en validiteit te checken (hst. 8) op zijn minst in sommige gevallen op inhoudsanalyse kunnen worden toegepast.
Tellen is een belangrijk aspect van sommige data analyses. Het is goed om een referentiepunt te hebben. Weten dat een stuk 15 bepaalde zinnen bevat heeft geen nut als je niet weet hoeveel zinnen er in totaal zijn.
Voorbeeld zie tabel 20.2. De stap is de data in de tabel analyseren.
De computer gebruiken bij inhoudsanalyse
Er zijn tegenwoordig allerlei computerprogramma’s die onderzoek makkelijker maken. Programma’s zoeken woorden in teksten en maken moeilijke berekeningen.
Deze programma’s identificeren woorden, uitspraken of zinnen, zetten ze in een tabel en maken er een grafiek van.
Een groot voordeel van inhoudsanalyse is dat het onopvallend is. Het observeren beïnvloedt de ander niet. Informatie die onmogelijk via directe observatie kan worden verkregen wordt op deze manier gewonnen.
Het tweede voordeel is dat het erg handig is om observaties en interviews mee te analyseren.
Het derde voordeel is dat de onderzoeker niet begrensd wordt door tijd en ruimte, hij kan ook documenten van eerdere tijden gebruiken.
Het vierde voordeel is het is simpeler en goedkoper dan andere onderzoeksmethoden.
Als laatste voordeel is dat het onderzoek makkelijk over gedaan kan worden doordat de bron bewaard blijft: Papier, videotape etc.
Het grootste nadeel is dat inhoudsanalyse zich beperkt tot vastgelegde informatie. Hoewel de onderzoeker wel zelf deze vastlegging kan regelen door open vragenlijsten en projectieve technieken (zie blz. 129). Een ander nadeel is validiteit verkrijgen.
Bij historisch onderzoek is het nadeel dat alleen beschikbaar wat de tijd heeft overleefd of wat een ander belangrijk genoeg vond om op te schrijven.
Laatste nadeel is dat er soms de verleiding is de opgedane interpretaties van een inhoudsanalyse te zien als een oorzaak van een fenomeen in plaats van een reflectie ervan. Bijvoorbeeld geweld op tv als oorzaak van geweld op straat, in plaats van dat beide een afspiegeling van de veranderde maatschappij zijn.
Etnografisch onderzoek
Etnografisch onderzoek is de meest complexe manier van onderzoek doen. De bedoeling is dat je een holistisch (geheel, volledig) beeld krijgt van een bepaalde gemeenschap, groep, instituut, setting of situatie. Je documenteert of portretteert de alledaagse belevenissen van individuen door hen, en andere belangrijke anderen, te observeren en te interviewen.
Etnografisch procedures bevatten drie dingen:
Eindproduct: een holistisch, cultureel portret van de groep.
Door mensen te bestuderen in hun natuurlijke omgeving, stelt je in staat dingen te zien die je anders misschien niet eens had opgemerkt.
Cultuur
Cultuur is het meest belangrijke van alle etnografische concepten. Bij cultuur kun je je richten op gedrag van de mens, of op ideeën van de mens. Je moet hierbij letten op je eigen culturele interpretatie.
Een holistisch perspectief
Onderzoekers beschrijven zoveel als ze kunnen over de cultuur van een groep. Het beschrijven van een holistisch beeld kost erg veel tijd omdat ze verschillende soorten data moeten verzamelen (in de buurt, op school, etc.).
Contextualisatie
Als een onderzoeker zijn data ‘contextualiseerd’ dan plaatst hij wat hij gehoord of gezien heeft in een groter perspectief.
Een ‘emic’ perspectief
Een ‘emic’ perspectief is een insider’s perspectief van de waarheid. Het is het hart van het etnografisch onderzoek. Hij erkent het idee van de verschillende, meervoudige waarheden van mensen.
Een ethisch perspectief is het externe objectieve perspectief van de waarheid.
Meestal proberen onderzoekers vanuit beide perspectieven te kijken (dus vanuit binnen, maar ook vanuit buiten).
Volledige beschrijving
Dit is het laatste verslag van het onderzoek. Dit is alles wat ze gehoord en gezin hebben tot in detail. Ze laten de groep die ze onderzocht hebben tot leven komen in dit rapport.
Member checking
De deelnemers checken wat de onderzoekers hebben opgeschreven.
Onderwerpen/situaties die geschikt zijn voor etnografisch onderzoek
Etnografische onderzoekers gebruiken bijna geen hypotheses
Ze ondergaan de situaties. Ze observeren vooral. Een vraag die ze zouden kunnen stelling is bijv. 'Wat is het leven op een internaat?'
Datacollectie bij etnografisch onderzoek
Data analyse bij etnografisch onderzoek
Een voordeel is dat de onderzoeker een veel meer volledig beeld krijgt dan bij andere vormen van onderzoek. Ook richten zij zich op onderwerpen die niet makkelijk te kwantificeren zijn (bijvoorbeeld gedachten van mensen). Een ander voordeel is dat gedrag onderzocht wordt in een natuurlijke omgeving. Ook is etnografisch onderzoek geschikt om een onderwerp langere tijd te bestuderen.
Een nadeel is dat etnografisch onderzoek erg afhangt van de observatie van de onderzoeker, en er is geen methode om de validiteit van de observaties van de onderzoeker te meten. Een ander nadeel is dat de onderzoeker niet werkt vanuit een hypothese, waardoor verwarring kan ontstaan.
Historisch onderzoek behoeft een andere aanpak dan andere onderzoeken. Er is geen manipulatie of controlegroep mogelijk, het is gericht op het verleden. Er wordt geprobeerd te reconstrueren wat er is gebeurd in die tijd, zo compleet en nauwkeurig mogelijk. Ondanks dat kan het nooit precies zo worden geconstrueerd omdat de informatie over het verleden niet volledig compleet is.
Historisch onderzoek = een systematische verzameling en evaluatie van gegevens om te beschrijven, uit te leggen en daardoor het begrijpen van acties of gebeurtenissen uit het verleden.
Historisch onderzoek wordt gedaan om de volgende redenen:
Problemen in historische onderzoeken worden ongeveer op dezelfde manier onderkend als in andere typen onderzoek. Zoals andere onderzoeksproblemen moet het duidelijk en beknopt worden verklaard, het moet haalbaar zijn, moet herhaalbaar zijn en moet een relaties zijn tussen de onderzochte variabelen. Een probleem bij historisch onderzoek kan zijn dat er onvoldoende gegevens beschikbaar zijn. Hoe verder in de tijd hoe moeilijker dit wordt.
Bronnen:
Primaire bronnen = een bron die direct aanwezig/ getuige is van een gebeurtenis. Primaire bronnen zijn moeilijk te verwerven maar hebben wel de voorkeur.
Secundaire bronnen = een bron die niet direct aanwezig/ getuige is van een gebeurtenis/ bron uit de tweede hand.
Verkrijgen van informatie voor historisch onderzoek:
Het proces van inwinnen en beoordelen van gegevens voor historisch onderzoek, zoals voor een groot gedeelte beschreven in hoofdstuk 5, bepalen de relevantie van het materiaal gebruikt voor het onderzoeken van de vraag of het probleem.
Lezen en samenvatten van historische gegevens is zelden in ordelijke opeenvolgende stappen. Vaak is het lezen en schrijven afgewisseld.
Externe kritiek (External Criticism):
Externe kritiek verwijst naar de echtheid van alle documenten gebruikt door de onderzoeker.
Vragen met betrekking tot de echtheid van de historische bron:
Interne kritiek (Internal Criticism):
Wanneer de onderzoekers tevreden zijn over de echtheid van de bron, moeten ze bepalen of de inhoud van de documenten nauwkeurig is. De nauwkeurigheid en de betrouwbaarheid moeten worden geëvalueerd. Er moet onderzocht worden of wat de schrijver van het document beweerd waar is. De onderzoeker moet bepalen of een bepaalde gebeurtenis echt heeft plaatsgevonden, ook als het onwaarschijnlijk is.
Verschillende vragen voor het evalueren van de nauwkeurigheid van het document en betrouwbaarheid van de auteur:
Gegevensanalyse in historisch onderzoek:
Historische onderzoekers moeten een weg vinden in een heel grote hoeveelheid aan gegevens en samenvatten in een logisch verhaal. Sommigen gebruiken voor het organiseren van informatie een theoretisch model. Anderen verdiepen zich in de informatie tot ze een patroon of thema’s ontdekken.
Generaliseren in historisch onderzoek:
Historische onderzoekers zijn zelden in staat om een gehele populaties of gebeurtenissen te bestuderen. Het onderzoek wordt bepaald door de overgebleven historische bronnen uit het verleden. Dit is een probleem voor historici omdat bijna altijd bepaalde documenten en andere bronnen missen, zijn kwijtgeraakt of niet kunnen worden gevonden. De bronnen die wel beschikbaar zijn, zijn niet altijd representatief.
Het voornaamste voordeel van historisch onderzoek is dat onderzoek over onderwerpen en vragen op geen andere manier kan worden onderzocht. Het is de enige methode om bewijs uit het verleden in relatie tot vragen van nu te bestuderen. Daarnaast kan historisch onderzoek gebruik maken van een groter grensgebied (range) dan andere methoden. Het levert een alternatieve en misschien rijkere bron van informatie over bepaalde onderwerpen dan studies met andere methoden.
Een nadeel van historisch onderzoek is dat er geen gebruik kan worden gemaakt van methodes om interne betrouwbaarheid te bewaken. Onderzoekers kunnen geen representatieve proef garanderen, noch over de betrouwbaarheid en geldigheid van de uitkomst.
“Mixed-methods research” (gemengde-methoden onderzoek/kwan-kwal onderzoek) is een onderzoek waarin zowel van kwantitatieve als van kwalitatieve methoden gebruik wordt gemaakt, met als doel een zo compleet/aanvullend mogelijk beeld te geven van een verschijnsel.
Kwan-kwal onderzoek dateert uit de jaren vijftig, maar heeft pas sinds 2005 een veelbetekenende plaats ingenomen in educatief onderzoek.
Visies
Er wordt op verschillende manieren naar kwan-kwal onderzoek gekeken.
Er bestaat nog geen algemene definitie voor ‘mixed-methods research’.
Kwan-kwal onderzoek heeft verschillende krachten.
Types kwan-kwal design (ontwerp)
Experimentele design
In dit ontwerp maken onderzoekers eerst gebruik van een kwalitatieve methode om de belangrijke variabelen, die ten grondslag liggen aan een verschijnsel, te ontdekken en om als informatie te dienen voor een tweede, kwantitatieve, methode.
Dit type van ontwerp wordt vaak gebruikt bij de constructie van vragenlijsten of schalen, ontworpen om verschillende onderwerpen die van belang zijn te meten.
Resultaten van de kwalitatieve fase geven richting aan de kwantitatieve fase, en kwantitatieve resultaten worden gebruikt om kwalitatieve bevindingen te valideren of uit te breiden.
De verschillende data in het experimentele ontwerp worden gescheiden van elkaar geanalyseerd.
Het experimentele design wordt gebruikt om een fenomeen te verkennen of om belangrijke thema's te identificeren. Bovendien is het bijzonder nuttig wanneer men een bepaald type instrument moet ontwikkelen en testen.
Verklarende design
Het verklarende ontwerp wordt gebruikt wanneer een onderzoeker een kwantitatief onderzoek doet, de onderzoeker meer informatie nodig heeft om de resultaten aan te vullen. In dit ontwerp gebruikt de onderzoeker eerst een kwantitatieve methode, waarna hij een kwalitatieve methode gebruikt om de kwantitatieve methode aan te vullen (op te volgen) en te verfijnen.
Ook hier wordt de data gescheiden van elkaar geanalyseerd. De resultaten van de kwalitatieve analyse worden gebruikt om de resultaten van de kwantitatieve analyse uit te breiden.
Triangulatie design (driehoeksmeting)
In dit ontwerp worden zowel kwantitatieve als kwalitatieve methoden gebruikt om eenzelfde fenomeen te onderzoeken, met als doel om te bepalen of de resultaten van deze twee methoden overeenkomen bij de benadering van een overtuiging aangaande het onderzoeksprobleem. Wanneer de resultaten niet overeenkomen, moet er worden onderzocht waarom de twee methoden verschillende beelden geven.
Bij triangulatie ontwerp zijn kwantitatieve en kwalitatieve methoden even belangrijk en alle data wordt tegelijkertijd verzameld. De data kan samen of apart worden geanalyseerd. Wanneer ze samen geanalyseerd worden, kunnen gegevens uit de kwalitatieve methode worden omgezet in kwantitatieve gegevens (quantizing) en kwantitatieve gegevens kunnen worden omgezet in kwalitatieve gegevens (qualitizing).
Als de gegevens afzonderlijk worden geanalyseerd, zouden de overeenkomsten (convergentie) of verschillen (divergentie) tussen de resultaten moeten worden besproken. De uitgangspunten voor het gebruik van de triangulatie ontwerp is dat de sterke punten van de twee methoden elkaar aanvullen en compenseren, net als de zwakke punten van elke methode.
Praktijkgericht onderzoek is een onderzoek dat wordt uitgevoerd bij een of meerdere individuen of groepen met het doel een probleem op te lossen of het verkrijgen/verzamelen van informatie om de lokale praktijk te informeren.
Er zijn veel verschillende vragen die zich lenen voor praktijkgericht onderzoek, bijvoorbeeld:
Generaliseerbaarheid
Omdat het onderzoek veelal individueel wordt uitgevoerd, of in kleine groepen, wordt het kunnen generaliseren van de uitkomsten beperkt. De uitkomsten kunnen niet zomaar voor waarheid worden gezien voor een hele grote groep.
Praktijkgericht onderzoek vereist vaak niet de volledige kennis/ vaardigheden van de grotere typen onderzoek eerder beschreven in het boek.
De stappen behorende bij praktijkgericht onderzoek zijn duidelijk en eenvoudig.
Deze studies zijn gebaseerd op de interesses en behoeftes van beroepsbeoefenaars.
Bedreigingen voor de interne validiteit
Wat met name bedreigingen vormen voor de interne validiteit van praktijkgerichte onderzoeken zijn de ‘data collector bias’ (diegene die de data verzamelt), de implementatie en de attitude. Al het andere kan beperkt worden.
Externe validiteit
Praktijkgericht onderzoek is slecht wat betreft externe validiteit. Repliceren is essentieel in dit soort onderzoek.
Doelgericht onderzoek
In praktijkgericht onderzoek wordt vaak een onderwerp gekozen dat daadwerkelijk opgelost kan worden en een groter doel dient. Er wordt dus niet zomaar iets gedaan en/of zomaar iemand uitgekozen.
Aannames/veronderstellingen die ten grondslag liggen aan praktijkgericht onderzoek:
Praktisch praktijkgericht onderzoek is bedoeld om specifieke problemen in een klas, school of een ander soort gemeenschap te behandelen. Het onderzoek kan uitgevoerd worden op verscheidene terreinen en in verschillende settings: educatief, opvoedend, sociale dienst, bedrijfsterrein.
Het eerste doel is de praktijk te verbeteren op zowel korte termijn, maar ook het informeren van grotere zaken. Het onderzoek kan door zowel individuen als groepen uitgevoerd worden, mits de focus helder en specifiek blijft.
Een geslaagd onderzoek resulteert in een actie- of handelingsplan, dat wordt doorgevoerd in de praktijk en zal worden geëvalueerd.
Participerend praktijkgericht onderzoek, ook wel Collaborative research genoemd, wijst op het belang van samenwerking tussen onderzoekers en onderzochten binnen het onderzoek. Er wordt gekozen voor participatie in onderzoek om daadwerkelijk iets te veranderen via het onderzoek.
Verschil Praktisch- en Participerend praktijkgericht onderzoek
Het doel:
De (opgeleide of getrainde) onderzoeker
Een opgeleide onderzoeker herkent/onderkent een probleem en brengt het onder de aandacht van betrokkenen. Het is essentieel dat de onderzoeker zich realiseert dat het te onderzoeken probleem belangrijk is voor de betrokkenen, en niet alleen de onderzoeker aanspreekt.
De rol van de opgeleide onderzoeker wordt door Berg als volgt omschreven:
De onderzoeker is deelnemer van/aan het onderzoek (hij staat dichtbij de onderzoeksgroep en niet erbuiten als een observator). Hij werkt samen met zowel de plaatselijke praktijkbeoefenaars als de betrokkenen in de groep.
Niveaus van participatie
De laatste jaren is er meer nadruk gelegd op de rol van individuen die deelnemen in onderzoeksprojecten. In het verleden was er geen waardering voor deelnemers. Ze werden enkel gebruikt voor het leveren van data door tests, observaties of interviews te ondergaan. Nu worden deelnemers veelal geïnformeerd over de studie en het doel ervan.
Dit zou een bedreiging kunnen vormen voor de interne validiteit van de studie en de data. Deelnemers kunnen in sommige gevallen inzage krijgen in de onderzoeksresultaten en misschien zelfs gevraagd worden deze te beoordelen.
Er is sprake van een continuüm van participatie. Hogere varianten van betrokkenheid kunnen zijn helpen in het ontwikkelen van instrumentarium, verzamelen van data, het analyseren van data, participeren in data-interpretaties, aanbevelingen doen voor volgend onderzoek, actief deelnemen in het vormgeven van de studie, probleemstellingen formuleren en zelfs het onderzoek opzetten.
Afhankelijk van niveau van deelnemen/participatie, hangt de participatie af van de interesses van de deelnemer en zijn/haar achtergrond. Niet iedereen/elke belanghebbende is op elk niveau betrokken.
Niveaus
9. initiatief nemen tot/ opzetten van een onderzoek
8. deelnemen in het specificeren van het probleem
7. deelnemen in het vormgeven van het onderzoek
6. deelnemen in het interpreteren van de gegevens
5. onderzoeken/checken van de bevindingen
4. assisteren bij het verzamelen van de data en het analyseren hiervan
3. ontvangen en inzien van de bevindingen
2. geïnformeerd worden over het doel van het onderzoek
1. geven van informatie
Hoe meer betrokken de deelnemer is, hoe hoger hij/zij in het onderzoeksniveau staat.
Verkrijgen van de benodigde informatie om de onderzoeksvraag te beantwoorden
Wanneer bij de eerste stap het probleem is verhelderd, wordt bij de tweede stap besloten welke data (gegevens) nodig zijn en hoe deze verzameld moeten worden. Dit kan via de methoden, zoals eerder beschreven in het boek (experiment, survey, observaties, interviews, analyse van documenten, enz.).
Analyseren en interpreteren van de verzamelde informatie
Na het verzamelen van de gegevens, is het noodzakelijk de informatie te analyseren zodat de deelnemers kunnen beslissen wàt de informatie openbaart/ kenbaar maakt (het analyseren van informatie is in praktijkgericht onderzoek veel minder moeilijk en gedetailleerd dan in andere vormen van onderzoek).
Wat in deze fase belangrijk is, is dat de informatie wordt onderzocht in relatie tot de onderzoeksvraag en het oplossen daarvan, datgene waarvoor het onderzoek is bedoeld. Stringer suggereert een aantal vragen die richting kan geven aan het analyseren van de informatie: Wie, Waarom, Wat, Hoe, Waar en Wanneer -vragen.
Alle visies en waarnemingen van alle betrokkenen worden nagegaan en beschouwd. Uiteindelijk wordt een beschrijving gemaakt van wat de gegevens kenbaar maken/onthullen. Gedurende dit hele proces worden de betrokkenen geïnformeerd over wat gaande is en krijgen zij de kans te lezen wat tot dan toe is geschreven. Op deze manier kunnen zij een bijdrage blijven leveren aan het verloop van het onderzoek.
Ontwikkelen van een actie- of handelingsplan
Tot slot wordt een plan gemaakt om veranderingen, gebaseerd op de bevindingen, te kunnen doorvoeren in de praktijk. Noodzakelijk is dat het onderzoek duidelijke aanwijzingen geeft voor het verdere werk wat betreft het probleem.
Praktijkgericht onderzoek vs. formeel kwantitatief en kwalitatief onderzoek
Er zijn veel verschillen, maar ook veel overeenkomsten tussen praktijkgericht en formeel onderzoek.
Verschillen en overeenkomsten:
Praktijkgericht onderzoek | Formeel onderzoek |
Systematisch onderzoek | Systematisch onderzoek |
Doel is het oplossen van problemen of plaatselijke belangen/ zorgen | Doel is het ontwikkelen en testen van theorieën en het creëren/voortbrengen van generaliseerbare kennis aan een breed publiek |
Kleine, formele trainingen zijn nodig om dergelijke onderzoeken te leiden | Goede training is nodig om zulke studies uit te kunnen voeren |
Intentie om problemen van plaatselijk belang te identificeren en corrigeren | Intentie om grotere issues (zaken) te onderzoeken |
Uitgevoerd door een leraar of ander lokale professional die werkzaam is in de educatie | Uitgevoerd door een onderzoeker die meestal niet betrokken is bij de lokale situatie |
Gebruikt voornamelijk door leraren zelf ontwikkelde instrumenten | Gebruikt voornamelijk professioneel uitgedachte instrumenten |
Weinig rigoureus/drastisch | Veel rigoureus/drastisch |
Waardegebaseerd | Vaak waardeneutraal |
Samples met een reden geselecteerd | Gerandomiseerde samples geselecteerd (indien mogelijk) |
Selectieve mening van de onderzoeker wordt vaak als data beschouwd | Mening van onderzoeker wordt nooit als data beschouwd |
Vermogen tot generaliseren is erg beperkt | Vermogen tot generaliseren is vaak toepasselijk |
Voorbeeld praktijkgericht onderzoek
In het hoofdstuk worden zeven voorbeelden gegeven van een praktijkgericht onderzoek. Twee daarvan zijn de volgende:
Mw. Gonzales
Mw. Gonzales is geïnteresseerd in de volgende vraag:
Wordt met het gebruik van drama/ toneelspel, het begrip van wetenschappelijke concepten verbeterd bij vijfdejaars studenten?
Hoe gaat mw. Gonzales te werk?
De onderzoeksvraag leent zich uitstekend voor een vergelijkend groepsexperiment (zie hoofdstuk 13).
Mw. Gonzales kan studenten ‘at random’ toewijzen aan klassen waarbij wel en waarbij niet gebruik wordt gemaakt van drama/ toneelspel. Vervolgens kan ze de effecten hiervan met elkaar vergelijken. Dit kan door middel van het testen met gespecificeerde intervallen, met een ontwikkeld instrument waarmee het ‘niveau van begrip’ kan worden gemeten.
De gemiddelde scores geven mw. Gonzales een beeld van de vergeleken methodes.
Mr. Abramson
Mr. Abramson is niet geïnteresseerd in het vergelijken van instructiemethodes, maar in hoe studenten zich voelen wat betreft school in het algemeen.
Hij wil de volgende vragen beantwoorden:
Hoe gaat mr. Abramson te werk om deze vragen te beantwoorden?
Dit soort vragen kunnen het best worden beantwoord middels een survey dat de houding van studenten ten opzichte van hun klas kan meten (zie hoofdstuk 17).
Mr. Abramson zal een vragenlijst moeten opstellen met vragen die direct informatie verschaffen die hij nodig heeft.
Wanneer mr. Abramson de ingevulde vragenlijsten heeft verzameld, kan hij de antwoorden berekenen en bekijken wat hij heeft.
JoHo can really use your help! Check out the various student jobs here that match your studies, improve your competencies, strengthen your CV and contribute to a more tolerant world
Je vertrek voorbereiden of je verzekering afsluiten bij studie, stage of onderzoek in het buitenland
Study or work abroad? check your insurance options with The JoHo Foundation
There are several ways to navigate the large amount of summaries, study notes en practice exams on JoHo WorldSupporter.
Do you want to share your summaries with JoHo WorldSupporter and its visitors?
Field of study
Add new contribution