Begrippenlijst en oefenvragen voor de tentamens van KOM en TOE (UU Utrecht): Integriteit

Eerlijkheid

Wat betekent het begrip:

• Het principe eerlijkheid gaat over dat je op een eerlijke manier aan je resultaten komt.

Hoe wordt het begrip toegepast:

• Er mag bij onderzoek geen sprake zijn van fabricage en plagiaat. Opzettelijke schending valt onder het principe eerlijkheid.

Oefenvraag bij het begrip:

• Mark voert een onderzoek uit en vindt hierbij een opvallende uitschieter. Hij denkt dat de meting bij dit specifieke geval verkeerd is gegaan en besluit de uitschieter te verwijderen. Hij benoemt dit echter niet in zijn onderzoek. Welk principe komt hierbij in het geding?

1. Eerlijkheid
2. Zorgvuldigheid
3. Transparantie
4. Onafhankelijkheid

Zorgvuldigheid

Wat betekent het begrip:

• Het principe zorgvuldigheid gaat over dat je zorgvuldig aan je gegevens moet komen tijdens een onderzoek. Het gaat hier om precisie.

Hoe wordt het begrip toegepast:

• Onopzettelijke schending valt onder het principe zorgvuldigheid.

Oefenvraag bij het begrip:

• In het theoretische deel van Kirsten gebruikt ze verschillende bronnen van Wikipedia. Omdat het Wikipedia is, komt ze niet achter de precieze auteur. Ze besluit daarom een verwijzing te maken naar de algemene site van Wikipedia en schrijft dat op in haar bronnenlijst. Welk principe komt hierbij in het geding?

1. Eerlijkheid
2. Zorgvuldigheid
3. Transparantie
4. Onafhankelijkheid

Transparantie

Wat betekent het begrip:

• Het principe transparantie gaat over dat je transparant moet zijn tijdens je onderzoek.

Hoe wordt het begrip toegepast:

• Je moet altijd duidelijk aangeven wat en waarom je iets doet of gedaan hebt.

Oefenvraag bij het begrip:

• Mohammed doet onderzoek naar waterkwaliteit in de buurt van fabrieken. Zijn vader die in dienst is bij een van die fabrieken is erg geïnteresseerd in het onderzoek van zijn zoon. Hij besluit zijn zoon een bijdrage te geven voor het onderzoek op voorwaarde dat de fabriek waar hij werkt het onderzoek mag inzien voor publicatie. Welk principe komt hierbij in het geding?

1. Eerlijkheid
2. Zorgvuldigheid
3. Transparantie
4. Onafhankelijkheid

Onafhankelijkheid

Wat betekent het begrip:

• Het principe onafhankelijkheid gaat over dat je onafhankelijk moet zijn tijdens je onderzoek. Je opereert als onderzoeker niet in het belang van bijvoorbeeld een bedrijf.
• In toepassing: Als je iets in opdracht van een bedrijf doet, moet je dit aangeven in je onderzoek, anders komt het principe transparantie in het geding.

Oefenvraag bij het begrip:

• Kees doet onderzoek naar mentale klachten. Hij neemt interviews af met mensen met mentale klachten en laat hen een verhaal vertellen dat slechte herinneringen naar boven brengt. Hij heeft de deelnemers van tevoren gewaarschuwd dat het een heftig onderzoek kan zijn. Welk principe komt hierbij in het geding?

1. Zorgvuldigheid
2. Transparantie
3. Onafhankelijkheid
4. Verantwoordelijkheid

Verantwoordelijkheid

Wat betekent het begrip:

• Het principe verantwoordelijkheid gaat over dat je verantwoordelijk je onderzoek moet uit voeren.

Hoe wordt het begrip toegepast:

• Voer onderzoek uit dat relevant is, zonder daarbij schade aan mensen of dieren te doen.

Oefenvraag bij het begrip:

• Suus voert een onderzoek uit en vindt een uitschieter. Omdat deze uitschieter totaal niet bij haar verwachtingen past, focust ze zich eerst op de andere resultaten. Uiteindelijk is ze de uitschieter vergeten mee te nemen in haar onderzoek. Welk principe komt hier in het geding?

1. Zorgvuldigheid
2. Transparantie
3. Onafhankelijkheid
4. Verantwoordelijkheid

Publication bias

Wat betekent het begrip:

• Onderzoekers schrijven hun niet-significante bevindingen bewust niet op om zo de kans te vergroten dat hun artikel gepubliceerd wordt. Dit is publication bias.

Hoe wordt het begrip toegepast:

• Wetenschappelijke tijdschriften publiceren graag nieuwe significante verbanden en niet-significante bevindingen kunnen dan snel als 'niet interessant' bevonden worden. 

Oefenvraag bij het begrip:

• Daan voert een onderzoek uit. Hij komt uit op een p-waarde van 0,051. Hij heeft echter een uitschieter die hij niet kan verklaren en hij besluit dat deze meting waarschijnlijk fout is gegaan. Zonder dit aan te geven in zijn onderzoek verwijdert hij de uitschieter, waardoor hij nu op een p-waarde onder de 0,05 komt. Welk begrip is hierop van toepassing?

1. Publication bias
2. File-drawer problem
3. p-hacking
4. HARKing

Confirmation bias

Wat betekent het begrip:

• Onderzoekers negeren hier de resultaten die niet overeenkomen met hun verwachtingen. Dit leidt tot confirmation bias.

Hoe wordt het begrip toegepast:

• Dit kan bewust of onbewust gebeuren en leidt tot onbetrouwbare resultaten.

Oefenvraag bij het begrip:

• Kasper voert een onderzoek uit. De resultaten zijn echter niet zoals hij het had verwacht. Toch is het wel een significantie p-waarde die uit het onderzoek komt. Hij besluit de hypothesen aan te passen om het zo tot een mooier geheel te maken. Welk begrip is hierop van toepassing?

1. Confirmation bias
2. File-drawer problem
3. p-hacking
4. HARKing

File-drawer problem

Wat betekent het begrip:

• Niet-significante bevindingen blijven vaak 'in de la' liggen en worden niet gepubliceerd.

Hoe wordt het begrip toegepast:

• Het file-drawer probleem kan het gevolg zijn van meerdere dingen, bijvoorbeeld van de publication bias of de confirmation bias.

Oefenvraag bij het begrip:

• Sanne moet een onderzoekje uitvoeren voor school. Ze weet de uitkomst eigenlijk al, omdat volgens haar het erg voor de hand ligt. Ze wil het onderzoek snel afronden en focust zich vooral op hoe ze op haar verwachte conclusie uitkomt. Welk begrip is hierop van toepassing?

1. Confirmation bias
2. File-drawer problem
3. p-hacking
4. HARKing

p-hacking

Wat betekent het begrip:

• De onderzoeker verandert iets aan de resultaten of aan de onderzoeksmethode om de p-waarde significant te krijgen.

Hoe wordt het begrip toegepast:

• p-hacking is een vorm van falsifying, omdat de p-waarde op zo'n manier wordt aangepast dat deze significant is.

Oefenvraag bij het begrip:

• Peter is begonnen met een onderzoek, maar merkt eigenlijk al gelijk aan de resultaten dat dit niet zal leiden tot een significante uitkomst. Hij besluit het onderzoek te stoppen. Welk begrip is hierop van toepassing?

1. Publication bias
2. File-drawer problem
3. p-hacking
4. HARKing

HARKing

Wat betekent het begrip:

• HARKing staat voor Hypothesizing After Results are Known. Dit is het achteraf opstellen van hypothesen en doen alsof deze vooraf waren opgesteld.

Hoe wordt het begrip toegepast:

• HARKing is een vorm van falsifying.

Oefenvraag bij het begrip:

• Saskia heeft al meerdere onderzoeken afgerond. Een paar hebben significante uitkomsten, maar het merendeel is niet significant en heeft ze besloten om niet te publiceren. Welk begrip is hierop van toepassing?

1. Publication bias
2. File-drawer problem
3. p-hacking
4. HARKing

PPPR

Wat betekent het begrip:

• PPPR staat voor Post Publication Peer Review. Dit is een online discussieplatform over publicatie tussen auteurs, redacteuren en peers.

Hoe wordt het begrip toegepast:

• De verantwoordelijkheid ligt nu niet alleen bij de auteur, maar bij het hele veld binnen de wetenschap. Dit leidt tot transparantie en verantwoordelijkheid.

Oefenvraag bij het begrip:

• Na publicatie besluit Daniël op een online forum om feedback te vragen. Veel onderzoekers op dat forum adviseren hem om het onderzoek per direct terug te trekken, omdat het veel onwaarheden bevat. Wat had Daniël beter kunnen doen?

1. Hij had beter tijdens het onderzoek al feedback kunnen vragen en zijn onderzoek dan aan kunnen passen.
2. Niets, zolang hij het onderzoek direct terugtrekt is er niks aan de hand.
3. Hij had beter geen feedback kunnen vragen en had zelf zijn onderzoek voor publicatie vaker moeten controleren.

Pre-registratie

Wat betekent het begrip:

• Je moet vooraf verplicht een onderzoeksprotocol indienen. Je hebt een half artikel: Hypothesen, Methodologie, Verwachting. Je krijgt publicatie onafhankelijk van de uitkomst van het onderzoek. 

Hoe wordt het begrip toegepast:

• Dit wordt ingeleverd bij het tijdschrift. Onafhankelijk van de resultaten wordt er besloten of het uiteindelijk gepubliceerd wordt.

Oefenvraag bij het begrip:

• Wat zijn de voordelen van pre-registratie?

1. De auteur heeft zekerheid van publicatie.
2. Het geeft een realistischer beeld van de wetenschap, omdat er ook niet-significante uitkomsten vertoond worden.
3. Voorkomt het file-drawer probleem
4. Alle hierboven genoemde antwoorden zijn juist

Retractie

Wat betekent het begrip:

• Vorm van zelfcorrectie achteraf. Hierbij trekt een onderzoeker een onderzoek terug.

Hoe wordt het begrip toegepast:

• Dit heeft nadelen. Het leidt tot reputatieschade onderzoeker, reputatieschade wetenschap. Er zit vaak een lange tijd tussen publicatie en retractie. Veel mensen hebben in de tussentijd gerefereerd naar dit onderzoek in hun eigen onderzoek.

Oefenvraag bij het begrip:

• Wat is het gevolg van retractie na een lange tijd?

1. Wanneer de onderzoeker duidelijk naar buiten brengt dat dit onderzoek niet kloppend is, dan is er in principe niet heel veel aan de hand.
2. Het is al verspreid over het internet, waardoor het lastiger te verwijderen is 
3. Veel onderzoekers hebben dit onderzoek gebruikt voor eigen onderzoek.
4. C en D zijn beiden juist

Questionable Research Practices (QRP)

Wat betekent het begrip:

• QRP's zijn dingen die onderzoekers doen, om toch significant te zijn. Dit kan integer zijn of niet.

Hoe wordt het begrip toegepast:

• Een onderzoeker mag een uitschieter verwijderen als hij hier transparant over is. Hij moet kunnen onderbouwen waarom hij de uitschieter verwijdert. Anders is het een QRP.

Oefenvraag bij het begrip:

• Wat kan een QRP zijn?

1. Tijdens het onderzoek een grotere steekproef nemen
2. Een uitschieter verwijderen
3. Bepaalde waarden afronden op een gunstige manier
4. Alle hierboven genoemde antwoorden.

Antwoordindicaties bij de oefenvragen

Eerlijkheid

• C

Zorgvuldigheid

• A

Transparantie

• D

Onafhankelijkheid

• D

Verantwoordelijkheid

• A

Publication bias

• C

Confirmation bias

• D

File-drawer problem

• A

p-hacking

• A

HARKing

• B

PPPR

• C

Pre-registratie

• D

Retractie

• D

Questionable Research Practices (QRP's)

• D