10. Q&A call – vědecké studie s Adamem Obrem

Created by Tomáš Baránek

#lifehacky

Nelíbí se mu

• byrokracie

Zeptej se vědce

facebooková skupina

Motivace

• postupně se to vyvíjí
• líbí se mu relativní volnost
• flexibilita – práce kdykoli a kdekoli
• řešení hádanek

10. Q&A call

• 27. 11. 2022 v 17h
• URL pro editaci: https://www.orgpad.com/s/L5ZvNx_Ju7R

Granty

• úspěšnost aplikace je 10%

Dotaz: Proč je používaná hranice významnosti zrovna 5%?

[[Ronald Fisher]], který stanovil tuto hladinu 0,05, víceméně řekl, že pro účely jednoho pokusu je možné akceptovat určitou úroveň falešné pozitivity výsledků a přesto tvrdit, že jsme hypotézu zamítli.

Protože pokud stanovíte p-hodnotu příliš nízkou ve stylu „Budu přísný, můj práh je 0,000001“, pak skutečně riskujete, že zavrhnete spoustu informací, které se ukáží jako relevantní (tj. falešně negativní).

1. Co to je věda a vědecká metoda?

2. Co je to hypotéza?

nulová hypotéza

alternativní hypotéza

Nedokonalost, pomíjivost výsledků

• přesto nejlepší, co máme
• úroveň znalostí je vždy poplatná době
• publikací o covidu bylo za krátkou dobu obrovské množství 
• po odfiltrování bulshitu ty studie dávají k nějakému datu smysl
• situace se ale pořád mění – tím se stává, že vědcům nemusí být věřeno

p-hodnota

Adam: na formulaci záleží

• už podle abstraktu lze rozpoznat jakousi kvalitu
• často to souvisí s jasnou hypotézou v pozadí
• lze-li sledovat tok myšlenek, jde většinou o lepší studii

Věda: sebeopravování

• 50 % toho, co považujeme za fakt, může být za čas špatně, jen nevíme, která fakta to jsou
• je to nejobjektivnější, co máme

power-value (síla vzorku)

Síla (power) vzorku (1-β) udává, jak moc naše data zastupují celou populaci. Síla je dána velikostí vzorku. Pokud budeme testovat jen několik málo jedinců, může být přesnost výběru vzorků i zpracování dat vynikající, ale mnoho se toho o skutečné populaci nedovíme (síla bude mizivá). Sílu zvětšíme jen zvětšením velikosti odebraného vzorku. [zdroj](https://cs.wikipedia.org/wiki/Epidemiologick%C3%A1_studie)

Relativní vs. absolutní riziko

• relativní riziko se musí počítat ve vztahu k absolutnímu riziku (základu)

Adam: je to míra spolehnutí na výsledek

Kdo to platí?

• neznamená to vždy, že je studie špatná (někde se musí brát peníze na ten výzkum)
• může to být riziko: studie vycházejí lépe

Adam by přidal na vrchol biologický mechanismus na molekulární úrovni

• je to pak vrstva navíc

3. Jaké máme typy studií a jaké jsou jejich nástrahy?

4. Jaké se ve studiích (při návrhu i interpretaci vyskytují problémy?)

Adam: důležité 2 věci

• přečíst metodickou sekci, která by to měla popisovat
• přemýšlet nad tím, co tam napsáno není
• je možné si taky provést něco jako myšlenkový experiment 

observační

klinické experimentální studie

metaanalýzy

podle randomizace

Adam: kvalitní studie dávají vhled

• množství biasů nejde obvykle zjistit, zvláště pak ne námi, kteří to jen čteme

individuální case study

průřezová studie

co se děje teď, prevalence

kohortová prospektivní studie

do budoucnosti

mendelovská randomizace

randomizované

nerandomizované

5. Ukázka interpretace studie

Heslo je na buď v členské sekci webu lifehacky.cz v článku u záznamu videa nebo v e-mailu.

Problém pozorovatele, který ovlivňuje chování subjektů

retrospektivní

do minulosti

Adam: nejlepší metoda

• největší spolehlivost

Adam: důvody

• nerandomizujeme např. kvůli etice

Adam: problém s retrospektivou

• nikdy nemohu posoudit všechna data, která vstupují do vzorku

Dotaz: Téměř vždy (nebo vždy) ukazují studie pouze kauzalitu. Jak moc můžu předpokládat, že tam je i příčinná souvislost?

Adam: co si vždycky čte první

První ho zajímají výsledky (data, grafy).

Pak jsou tam také diskuse, které už mohou být zkreslené.

Pozor na sekundární cíle

• Je potřeba, aby to primární cíl studie byl naplněn.
• Sekundární cíle nejsou tak ošetřené a pokud selhal primární cíl, mohou být zajímavé, ale jejich relevance je nižší.

confounding factor (zavádějící faktor)

6. Otázky a další

Jak hledat studie?

Adamův tip:

• Google Scholar

TB tipy pro asistované hledání, sumarizaci a dokonce interpretaci:

• https://elicit.org
• https://consensus.app
• https://typeset.io

Zdroje pro přípravu tohoto callu (TB):

• https://peterattiamd.com/ama30/
• typy studií - učební materiál.pdf
• Wikipedia a další

Kde je stáhnout?

• [  ] doptat se dodatečně a doplnit

Adam: je nutno hledat antiteze