Priporočena 2019

Izbira Urednika

Podnebne spremembe lahko pospešijo satelitov
Skoraj popoln krog v vesolju
Army Biodefense Lab se zaustavi, da preveri, če kaj manjka

Raw Data: Kako razširjen je problem neizvedljivih rezultatov?

Anonim

Prejšnji teden v prvem obroku "Raw Data", mojega novega mesečnega stolpca za New York Times, sem razmišljal o tem, kaj je v znanosti znan kot problem neizvedljivih rezultatov. Strah, da se korpus znanstvenega znanja onesposobi z vprašljivimi ugotovitvami - eksperimenti, ki jih drugi laboratoriji ne morejo replicirati, je postal tako dober, da je revija Nature obljubila, da bo izvajala nove ukrepe "izboljšanje skladnosti in kakovosti poročanja v življenju člankov "in je zbral arhiv, ki se imenuje" Izzivi v obnovljivih raziskavah ".

Pomisleki se pojavljajo ne le pri epidemioloških študijah - kjer je določen učinek (zdravilo, hrana, obnašanje ali onesnaževalo okolja) pozitivno ali negativno povezan z zdravjem ljudi - pa tudi s preskusno metodo. To je znanost o petrijevih jedeh in kemijskih reagentih, pri čemer so predmeti zapleteni od človeških celic do gensko spremenjenih miši. Za mene je najbolj razkrinkanje razkrivalo neuspeh ekipa znanstvenikov, da ponovi rezultate 47 od 53 eksperimentov o "orientaciji" v biologiji raka. Nisem se mogel spraševati, ali je katera od teh študij tista, ki jo navajam v svoji knjigi, The Cancer Chronicles . Zaradi sporazumov o zaupnosti se informacije hranijo pod zavihki.

O čem sem se osredotočil v kolumni v mojem Timesu ni bila znanstvena goljufija, za katero menim, da je zelo redka, toda lahkotnost, s katero se ljudje - mojster detektorjev vzorcev - lahko zavedejo v videnje pravilnosti, ki jih sploh ni. Slike v oblakih. Z vsemi dobrimi nameni lahko te ugotovitve včasih vstopijo v znanstveno literaturo, ki jo je treba navesti in navajati, ne da bi jo kdaj preverili. Kot sem že napisal tukaj, je težko razlikovati med tem, kar vidimo in kaj mislimo, da vidimo. To je fenomen, ki me je navdušil, ko sem napisal svojo knjigo Fire in the Mind, in sem se ga spet dotaknil v otvoritveni objavi za ta blog, "Lighting the Match."

Največji delež objavljenih raziskav - približno 50 odstotkov - vključuje znanosti o življenju, to področje pa je postalo osredotočeno na nedavno sporno vprašanje o obnovljivosti. Kaj pa enako pomembno delo, ki se dogaja v fiziki, kemiji, geologiji in drugih tako imenovanih fizičnih znanostih? Moj kolega Faye Flam postavlja to vprašanje v težko kritiko mojega stolpca na Knight Science Trackingu.

Kolikor sem mogel odkriti, raziskave na teh področjih niso bile podvržene istemu nadzoru, ki so ga imeli John Ioannidis in Glen Begley (viri stolpca moj čas ) na biomedicinskem svetu. Ni bilo nobenih trditev, da več deset ključnih ugotovitev v, na primer, fizike visoke energije ali jedrske kemije ni uspelo replikacijo. Eden od razlogov je verjetno, da se za analizo podatkov pogosto uporabljajo višji statistični standardi, zlasti pri raziskavah pospeševalnika delcev. Visoko objavljena odkritja, kot je potrditev prvega kvarka in nedavno odkritje Higgsovega bozona, vključujejo vgrajeno replikacijo - dva detektorja, ki jih vodijo različne skupine znanstvenikov, ki se približujejo podobnim rezultatom.

Flam predlaga še en razlog, da je fizikalna literatura lahko razmeroma zdravo:

[Fiziki] pravijo, da ne morejo sestaviti nobene stare hipoteze, ker jih kvantna mehanika in splošna relativnost tesno omejujeta. In jih omejujejo številne meritve poti atomov in delcev in svetlobe se obnašajo v resničnem svetu. Tako ne morejo pobegniti s samo sanjanjem hipotez z dolgimi strelami, ne da bi kršili nekaj vidika realnosti, saj so ga merili.

Druga pozornost je dejstvo, da so človeška telesa drugačna, medtem ko so vsi elektroni, protoni in Higgs Bosons enaki, tako da seveda ne boste dobili iste vrste "resnice", ki bi spraševal o masi elektronov, kot ste spraševali o tveganjih in koristih dnevnega aspirina.

To so dobre točke, ko se uporabljajo za razlike med fiziko delcev in epidemiologijo. Ampak to je le majhen del biomedicinske znanosti. Kaj pa občutljive in izvrstno nadzorovane eksperimente, ki se pojavljajo v laboratorijih? Ali so hipoteze, ki vključujejo intracelularne encimske poti in učinke mikroRNA na regulacijo beljakovin, toliko manj omejene kot na primer trdna fizika in znanost o materialih?

V aktualni številki znanosti Robert Service opisuje spor glede tega, ali ima raziskovalec v Švici ali ni ustvaril eksotičnih entitet, ki so sestavljene iz organskih črtastih zlatih nanodelcev. V kakršni koli laboratorijski znanosti obstaja nevarnost, kot sem zapisal v Timesu o "nezavednih tihotapljenju svojih pričakovanj v rezultate, kot je sporočilo, ki je bilo izvlečeno iz sveta Ouije."

To so vrste stvari, ki jih bom raziskoval v "Raw Data" in na zadnji post ali dva za ta blog.

Komentarji in popravki so dobrodošli po elektronski pošti. Za javno razpravo uporabite Twitter.

Za ogled moje nove knjige, The Cancer Chronicles, si oglejte to spletno mesto.

@byGeorgeJohnson

Priljubljene Kategorije

Top