• Skip to primary navigation
  • Skip to main content
  • Skip to primary sidebar

Kloptdatwel?

  • Home
  • Onderwerpen
    • (Bij)Geloof
    • Columns
    • Complottheorieën
    • Factchecking
    • Gezondheid
    • Hoax
    • Humor
    • K-d-Weetjes
    • New Age
    • Paranormaal
    • Pseudowetenschap
    • Reclame Code Commissie
    • Skepticisme
    • Skeptics in the Pub
    • Skeptische TV
    • UFO
    • Wetenschap
    • Overig
  • Skeptisch Chatten
  • Werkstuk?
  • Contact
  • Over Kloptdatwel.nl
    • Activiteiten agenda
    • Colofon – (copyright info)
    • Gedragsregels van Kloptdatwel
    • Kloptdatwel in de media
    • Interessante Links
    • Over het Bol.com Partnerprogramma en andere affiliate programma’s.
    • Social media & Twitter
    • Nieuwsbrief
    • Privacybeleid
    • Skeptisch Chatten
      • Skeptisch Chatten (archief 1)
      • Skeptisch Chatten (archief 2)
      • Skeptisch Chatten (archief 3)
      • Skeptisch Chatten (archief 4)
You are here: Home / Humor / Significantie

Significantie

11 April 2011 by Maarten Koller 1 Comment

De onderstaande XKCD comic geeft mooi wetenschappelijk onderzoek weer. Als je onzin* toetst op een significantieniveau van 0.05 (kans van 5% dat de uitkomst toeval is)* dan heb je gemiddeld eens in de 20 onderzoeken een valse positieve. De mouseover tekst is dan ook:

So, uh, we did the green study again and got no link. It was probably a–‘ ‘RESEARCH CONFLICTED ON GREEN JELLY BEAN/ACNE LINK; MORE STUDY RECOMMENDED!’

Significantie 1

Het is een van de redenen waarom skeptici vaak geen genoegen nemen met ‘wetenschappelijke’ onderzoeken uit alternatieve bronnen. In discussies worden vaak enkele onderzoeken met een positieve uitkomst afgestoft en van stal gehaald om als onderbouwing te dienen voor hun claims. Maar die onderzoeken bieden vaak geen antwoord op de resultaten van vervolgonderzoek, dat geen positieve uitkomst vond, en zijn daarom zeer waarschijnlijk een vals-positieve.

Laten we homeopaten als voorbeeld te nemen, want zij ‘medicaliseren’ alles wat los en vast zit en hebben een bijna oneindig repertoire aan middeltjes. Stel je hebt homeopathisch middel 1, een C200 verdunning van het ingrediënt zonlicht, je test het op effect tegen maagklachten en er komt niets uit. Dan verder met middel nummer 2, een C200 verdunning van bijvoorbeeld hyenaslijm, weer niets. Maar wacht, na nog meer testen geeft nummer 17, een C200 verdunning van licht van Venus, wél een positief resultaat. Je stuurt een persbericht de wereld in en wetenschappers over de hele wereld breken zich er het hoofd over: hoe kan in hemelsnaam een extreme verdunning (ver voorbij de waarschijnlijkheid dat er nog 1 molecuul van het originele ingredient in je verdunning zit… als je ingredient uit moleculen bestaan tenminste) van een ingrediënt wat je niet kan verzamelen werkzaam zijn voor wat dan ook?

Maar wetenschappers hoeven de werking niet te snappen om de werkzaamheid te ontdekken, de ‘hoe’ komt dan later wel. Dus wetenschappers over de hele wereld testen het nogmaals en vinden geen enkel effect. De juiste conclusie is dan: het blijkt toch niet te werken en je eerste resultaat was waarschijnlijk een vals-positieve, je persbericht de wereld insturen was dus voorbarig, je onderzoek moet zonder logische verklaring van de negatieve resultaten niet gebruikt worden als reden voor meer onderzoek en het toch blijven gebruiken als onderbouwing is intellectueel oneerlijk.

* Op aanwijzingen van Jan Willem Nienhuys aangepast, zie comment

Steun Kloptdatwel

Significantie 2Waardeer je dit artikel? Je kunt onze site steunen met een financiële bijdrage. Dat waarderen wij dan weer! Een donatie kun je doen via dit betaalverzoek (of klik op de afbeelding hiernaast).

NB de rekening staat op naam van Maarten Koller, formeel eigenaar van deze site.

« Previous Entry
De ideeën van: Johan Oldenkamp
Next Entry »
Leven we in de matrix?

Filed Under: Humor, Wetenschap Tagged With: onderzoek, significantie, vals positieve, XKCD

Reader Interactions

Comments

  1. Jan Willem Nienhuys says

    11 April 2011 at 09:55

    Als je toetst op een significantie niveau van 0.05 (…) dan heb je gemiddeld eens in de 20 onderzoeken een valse positieve.

    Dit is onjuist. Bovenstaande is alleen juist als de onderzoeker zich beperkt tot onderzoeken waarvan het zeker is dat er gewoon onzin onderzocht wordt, zoals in het voorbeeld uit de cartoon.

    (kans van 5% dat de uitkomst toeval is)

    Dit is onjuist. Het gaat om de berekende kans op juist deze uitkomst of een meer extreme, aangenomen dat er gewoon onzin is onderzocht. ‘De kans dat iets toeval is’ is een onzinnig begrip. Je kunt nu eenmaal geen experiment bedenken dat je meerdere malen kunt uitvoeren (zoals het gooien van een munt of dobbelsteen) en dat elke keer als uitkomst heeft ‘ja het is toeval’ of ‘nee het is geen toeval’.

    Log in to Reply

Leave a Reply Cancel reply

You must be logged in to post a comment.

Primary Sidebar

Steun ons via:
Een aankoopbol.com Partner (meer info)
Of een donatie

Schrijf je in voor de nieuwsbrief!

Skeptic RSS feed

  • Skepsis
  • SKEPP
  • SBM
Skepter 35.4 – Winternummer 2022
1 December 2022 - Pepijn van Erp
Skepter 35.4 – Winternummer 2022

Brengen genetici de mammoet, de dodo en de buidelwolf weer terug? Komt kernfusie er sneller dan velen denken? Het nut van sciencefiction als lesmateriaal. Een interview met pendelwinnaar Marieke Kuypers, en nog veel meer in dit nummer. Het bericht Skepter 35.4 – Winternummer 2022 verscheen eerst op Skepsis Blog. [...]

Piramidependelprijs voor Marieke Kuypers en Diederik Jekel feliciteert Skepsis met 35-jarig bestaan
20 November 2022 - Pepijn van Erp

Marieke Kuypers onderscheiden door Skepsis voor haar video's op TikTok en Diederik Jekel feliciteert Skepsis met een feestrede met het 35-jarig bestaan Het bericht Piramidependelprijs voor Marieke Kuypers en Diederik Jekel feliciteert Skepsis met 35-jarig bestaan verscheen eerst op Skepsis Blog. [...]

Skepter 35.3 – Herfstnummer 2022
24 August 2022 - Pepijn van Erp
Skepter 35.3 – Herfstnummer 2022

Artikelen over de beroemde uitspraak van Galileo, hervonden herinneringen, Bess Houdini, een dubieus apparaat om vocht in muren tegen te gaan en veel meer. Het bericht Skepter 35.3 – Herfstnummer 2022 verscheen eerst op Skepsis Blog. [...]

Desmet dwaalt, draait en duikt
9 January 2023 - Paul De Belder

Hoewel de uitspraken van Desmet over de coronamaatregelen al langer op veel kritiek van factcheckers stuiten, kwam hij pas recentelijk echt flink in opspraak. Op een tournee langs verschillende Amerikaanse talkshows en podcasts om de Engelse vertaling van zijn boek te promoten, was hij ook te gast bij Infowars, de show van Alex Jones. Het optreden bij deze veroordeelde complotdenker en het doen van nogal stellige uitspraken over openhartoperaties onder hypnose waren de aanleiding voor een hausse aan kritische artikelen in de Vlaamse media. [...]

QAnon
26 October 2022 - Ledenadmin Skepp

In de herfst van 2016 verspreidde zich het gerucht dat de Amerikaanse Democratische Partij vanuit de kelder van een pizzeria in Washington D.C. een pedofielennetwerk organiseert. De pizzeria met de grappige naam Comet Ping Pong was allesbehalve willekeurig gekozen. Met zijn eigenzinnige atmosfeer is het een hotspot voor excentriekelingen: punkers, holebi’s, kunstenaars, outsiders en linksen1. Het was een voor de hand liggend doelwit voor mensen uit de alt-rightbeweging2,die vatbaar zijn voor complotdenken. [...]

Van bijtende nonnen tot needlespiking
16 October 2022 - tayson

Ziekte en gezondheid, lichaam en geest Voor we aan een wetenschappelijk artikel kunnen beginnen, moeten we duidelijk maken waarover we het hebben. Ik vraag dus even het geduld van de lezer: die wordt achteraf beloond met een uitgebreide bespreking van boeiende voorbeelden van ‘massahysterie’. Om de clichés te overstijgen en een echte poging tot wetenschappelijke bespreking van dit fenomeen te doen, moeten we eerst wat medische context schetsen. [...]

COVID-19 is a leading cause of death among children, but that doesn’t stop some of my colleagues from arguing against vaccinating them
6 February 2023 - David Gorski

Contrary to what the "COVID-19 isn't a threat to children" contingent says, COVID-19 is a leading cause of death among children. Yet "not antivax" doctors continue, either unknowingly or knowingly, recycle old antivax tropes to argue against vaccinating children against this disease. The post COVID-19 is a leading cause of death among children, but that doesn’t stop some of my colleagues from arguing against vaccinating them first appeared on Science-Based Medicine. [...]

There is really nothing super about Antibiotic Resistant Gonorrhea
3 February 2023 - Clay Jones

Reports out of Massachusetts are raising concerns of a highly resistant strain of gonorrhea being seen for the first time in the United States. Are we close to living in a reality where there are no more effective treatments for this nasty, and potentially deadly, infection? The post There is really nothing super about Antibiotic Resistant Gonorrhea first appeared on Science-Based Medicine. [...]

CAM for the Management of Heart Failure
2 February 2023 - Scott Gavura

A new report provides a comprehensive summary of the evidence for and against CAM in patients with heart failure The post CAM for the Management of Heart Failure first appeared on Science-Based Medicine. [...]

Recente reacties

  • Renate1 on De voorspellende gaven van aardbevingsgoeroe Frank HoogerbeetsDe voorspelling van de heer Hoogerbeets is vergelijkbaar met de voorspelling dat ik vroeger of later dood zal zijn. Dat
  • Renate1 on De nog net in het weeekend vallende linke weekendbijlage (5-2023)Misschien zien de leden het lidmaatschap van de commissie als een manier om zich in de kijker bij de kiezer
  • Klaas van Dijk on Hoe Galileo’s metingen tot de gaskamers leidden, ofwel de stuitende slordigheden van Mattias DesmetOp https://skepp.be/nl/psychologie-hrm-coaching/psychoanalyse/desmet-dwaalt-draait-en-duikt staat een mooie aanvulling, gepubliceerd op 9 ja
  • Hans1263 on De nog net in het weeekend vallende linke weekendbijlage (5-2023)Als ander beoogd commissielid zou ik dan hebben bedankt voor de twijfelachtige eer. Je gaat toch niet vergaderen met de
  • Renate1 on De nog net in het weeekend vallende linke weekendbijlage (5-2023)Ik weet het niet, maar zou het kunnen dat de mensen zich zelf voor de commissie aan hebben gemeld? Sander

Archief Kloptdatwel.nl

Copyright © 2023 · Metro Pro on Genesis Framework · WordPress · Log in