• Skip to primary navigation
  • Skip to main content
  • Skip to primary sidebar

Kloptdatwel?

  • Home
  • Onderwerpen
    • (Bij)Geloof
    • Columns
    • Complottheorieën
    • Factchecking
    • Gezondheid
    • Hoax
    • Humor
    • K-d-Weetjes
    • New Age
    • Paranormaal
    • Pseudowetenschap
    • Reclame Code Commissie
    • Skepticisme
    • Skeptics in the Pub
    • Skeptische TV
    • UFO
    • Wetenschap
    • Overig
  • Skeptisch Chatten
  • Werkstuk?
  • Contact
  • Over Kloptdatwel.nl
    • Activiteiten agenda
    • Colofon – (copyright info)
    • Gedragsregels van Kloptdatwel
    • Kloptdatwel in de media
    • Interessante Links
    • Over het Bol.com Partnerprogramma en andere affiliate programma’s.
    • Social media & Twitter
    • Nieuwsbrief
    • Privacybeleid
    • Skeptisch Chatten
      • Skeptisch Chatten (archief 1)
      • Skeptisch Chatten (archief 2)
      • Skeptisch Chatten (archief 3)
      • Skeptisch Chatten (archief 4)
You are here: Home / Humor / Significantie

Significantie

11 April 2011 by Maarten Koller 1 Comment

De onderstaande XKCD comic geeft mooi wetenschappelijk onderzoek weer. Als je onzin* toetst op een significantieniveau van 0.05 (kans van 5% dat de uitkomst toeval is)* dan heb je gemiddeld eens in de 20 onderzoeken een valse positieve. De mouseover tekst is dan ook:

So, uh, we did the green study again and got no link. It was probably a–‘ ‘RESEARCH CONFLICTED ON GREEN JELLY BEAN/ACNE LINK; MORE STUDY RECOMMENDED!’

Significantie 1

Het is een van de redenen waarom skeptici vaak geen genoegen nemen met ‘wetenschappelijke’ onderzoeken uit alternatieve bronnen. In discussies worden vaak enkele onderzoeken met een positieve uitkomst afgestoft en van stal gehaald om als onderbouwing te dienen voor hun claims. Maar die onderzoeken bieden vaak geen antwoord op de resultaten van vervolgonderzoek, dat geen positieve uitkomst vond, en zijn daarom zeer waarschijnlijk een vals-positieve.

Laten we homeopaten als voorbeeld te nemen, want zij ‘medicaliseren’ alles wat los en vast zit en hebben een bijna oneindig repertoire aan middeltjes. Stel je hebt homeopathisch middel 1, een C200 verdunning van het ingrediënt zonlicht, je test het op effect tegen maagklachten en er komt niets uit. Dan verder met middel nummer 2, een C200 verdunning van bijvoorbeeld hyenaslijm, weer niets. Maar wacht, na nog meer testen geeft nummer 17, een C200 verdunning van licht van Venus, wél een positief resultaat. Je stuurt een persbericht de wereld in en wetenschappers over de hele wereld breken zich er het hoofd over: hoe kan in hemelsnaam een extreme verdunning (ver voorbij de waarschijnlijkheid dat er nog 1 molecuul van het originele ingredient in je verdunning zit… als je ingredient uit moleculen bestaan tenminste) van een ingrediënt wat je niet kan verzamelen werkzaam zijn voor wat dan ook?

Maar wetenschappers hoeven de werking niet te snappen om de werkzaamheid te ontdekken, de ‘hoe’ komt dan later wel. Dus wetenschappers over de hele wereld testen het nogmaals en vinden geen enkel effect. De juiste conclusie is dan: het blijkt toch niet te werken en je eerste resultaat was waarschijnlijk een vals-positieve, je persbericht de wereld insturen was dus voorbarig, je onderzoek moet zonder logische verklaring van de negatieve resultaten niet gebruikt worden als reden voor meer onderzoek en het toch blijven gebruiken als onderbouwing is intellectueel oneerlijk.

* Op aanwijzingen van Jan Willem Nienhuys aangepast, zie comment

Steun Kloptdatwel

Significantie 2Waardeer je dit artikel? Je kunt onze site steunen met een financiële bijdrage. Dat waarderen wij dan weer! Een donatie kun je doen via dit betaalverzoek (of klik op de afbeelding hiernaast).

NB de rekening staat op naam van Maarten Koller, formeel eigenaar van deze site.

« Previous Entry
De ideeën van: Johan Oldenkamp
Next Entry »
Leven we in de matrix?

Filed Under: Humor, Wetenschap Tagged With: onderzoek, significantie, vals positieve, XKCD

Reader Interactions

Comments

  1. Jan Willem Nienhuys says

    11 April 2011 at 09:55

    Als je toetst op een significantie niveau van 0.05 (…) dan heb je gemiddeld eens in de 20 onderzoeken een valse positieve.

    Dit is onjuist. Bovenstaande is alleen juist als de onderzoeker zich beperkt tot onderzoeken waarvan het zeker is dat er gewoon onzin onderzocht wordt, zoals in het voorbeeld uit de cartoon.

    (kans van 5% dat de uitkomst toeval is)

    Dit is onjuist. Het gaat om de berekende kans op juist deze uitkomst of een meer extreme, aangenomen dat er gewoon onzin is onderzocht. ‘De kans dat iets toeval is’ is een onzinnig begrip. Je kunt nu eenmaal geen experiment bedenken dat je meerdere malen kunt uitvoeren (zoals het gooien van een munt of dobbelsteen) en dat elke keer als uitkomst heeft ‘ja het is toeval’ of ‘nee het is geen toeval’.

    Log in to Reply

Leave a Reply Cancel reply

You must be logged in to post a comment.

Primary Sidebar

Steun ons via:
Een aankoopbol.com Partner (meer info)
Of een donatie

Schrijf je in voor de nieuwsbrief!

Skeptic RSS feed

  • Skepsis
  • Error
  • SBM
Fluoride-angst?
30 June 2025 - Ward van Beek
Fluoride-angst?

Raad eens’, vraagt Cor van Loveren: ‘Het is begin jaren zeventig. Hoeveel gaatjes denk je dat een kind van vijf gemiddeld had?’ Het antwoord: achttien. ‘In haast elke tand zat wel een gat.’ Gemiddeld genomen dan. Er waren ook tanden…Lees meer Fluoride-angst? › [...]

James Randi test wichelroedelopers in Australië
11 June 2025 - SkepsisSiteBeheerder
James Randi test wichelroedelopers in Australië

In 1980 bezocht James Randi Australië op uitnodiging van Dick Smith om daar een test uit te voeren met wichelroedelopers.Lees meer James Randi test wichelroedelopers in Australië › [...]

Polarisatie juist goed voor democratie?
5 June 2025 - Ward van Beek
Polarisatie juist goed voor democratie?

.Soms lijkt het wel alsof we elkaar de hele dag de tent uit vechten. Op social media, bij verjaardagsfeestjes en in talkshows zijn we het oneens over vaccins, over Gaza, over vrouwenrechten. Dat blijkt ook uit onderzoek van het Sociaal…Lees meer Polarisatie juist goed voor democratie? › [...]

RSS Error: A feed could not be found at `https://skepp.be/feed`; the status code is `404` and content-type is `text/html; charset=UTF-8`

Go Ahead, Make the Case That Science, Free Speech, and the FDA Are Thriving Under Drs. Marty Makary and Vinay Prasad
10 July 2025 - Jonathan Howard

Unlike Drs. Adam Cifu and John Mandrola, I do not constantly boast of my "nuance" or claim to be a master of "clinical appraisal." They have so much to teach me. The post Go Ahead, Make the Case That Science, Free Speech, and the FDA Are Thriving Under Drs. Marty Makary and Vinay Prasad first appeared on Science-Based Medicine. [...]

AI Therapists – Not Ready for Prime Time
9 July 2025 - Steven Novella

Artificial Intelligence (AI) applications are being rolled out at a furious pace. There is no doubt they are potentially powerful tools, although with flaws and limitations. But one thing that large language models do well is mimic conversational speech. They are great chatbots. For this reason one of the early uses of these chatbots is as AI therapists. There are no hard […] The post AI Therapists – Not Ready for Prime Time first appeared on Science-Based Medicine. [...]

After ACIP: Where Robert F. Kennedy Jr. will likely go from here in his quest to eliminate vaccines
7 July 2025 - David Gorski

HHS Secretary Robert F. Kennedy Jr. was on The Tucker Carlson Show last week. It got me to thinking: What's next in RFK Jr.'s crusade against vaccines after he turned ACIP into an antivax committee? The post After ACIP: Where Robert F. Kennedy Jr. will likely go from here in his quest to eliminate vaccines first appeared on Science-Based Medicine. [...]

Recente reacties

  • Hans1263 on Bedenkingen bij het rapport over oversterfte van Ronald Meester en Marc JacobsHet is me duidelijk, @ Klaas van Dijk Het lijkt me heel simpel: wie zwijgt, stemt toe. Incompetentie en collaboratie
  • Klaas van Dijk on Bedenkingen bij het rapport over oversterfte van Ronald Meester en Marc Jacobs@Hans1263, per abuis heb ik mijn reactie op jouw bericht van 5 juli 2025 (om 21:25) op de verkeerde plek
  • Klaas van Dijk on Bedenkingen bij het rapport over oversterfte van Ronald Meester en Marc Jacobs@Hans1263, het is inderdaad erg opvallend dat de werkgevers van het trio, te weten de VU (Ronald Meester), het Radboud
  • Hans1263 on De linke net-na-het-weekendbijlage (27-2025)De bekende en verderfelijke combinatie van complotgeloof, geloof en kwakzalverij.
  • Renate1 on De linke net-na-het-weekendbijlage (27-2025)https://www.kwakzalverij.nl/nieuws/bestuur-stuurt-brief-aan-minister-en-vaste-kamercommissie-vws/ Waarom verbaast het me niet dat mevrouw Ag

Archief Kloptdatwel.nl

Copyright © 2025 · Metro Pro on Genesis Framework · WordPress · Log in