„Kontrolowane placebo” nie znaczy automatycznie „dobra nauka”

Nikos DrosakisZałożyciel i redaktor odpowiedzialny2 min czytania

Osobisty esej, nie ocena dowodów. Nasze stopniowane oceny poszczególnych składników — przygotowane według opublikowanego standardu i na podstawie pełnych tekstów — znajdują się w sekcji Evidence. Żaden fragment tego tekstu nie jest twierdzeniem o działaniu jakiegokolwiek produktu.

Jest coś uspokajającego w określeniu:

podwójnie zaślepione badanie kontrolowane placebo

Brzmi jak naukowa zbroja.

Gdy te słowa się pojawiają, wiele osób przestaje zadawać pytania.

Ja nie.

Kontrola placebo jest cenna.

Zaślepienie jest cenne.

Randomizacja jest cenna.

Ale żaden z tych elementów sam w sobie nie gwarantuje, że badanie dostarczyło wiarygodnej odpowiedzi.

Czy placebo było wiarygodne?

To szczególnie ważne w badaniach suplementów.

Załóżmy, że aktywny produkt:

ma gorzki smak, powoduje mrowienie, zwiększa czujność, zmienia tętno albo daje charakterystyczne odczucie.

A placebo smakuje jak aromatyzowana woda.

Uczestnicy mogą szybko zorientować się, do której grupy należą.

Badacze także mogą to zauważyć.

Wtedy próba nadal może być technicznie opisana jako „zaślepiona”, podczas gdy praktyczne zaślepienie osłabło.

Współczesne standardy raportowania wyraźnie podkreślają, jak osiągnięto zaślepienie, ponieważ zauważalne różnice, takie jak kolor czy smak, mogą tworzyć bias.

Czy ukryto sekwencję przydziału?

To dzieje się jeszcze zanim zaślepienie stanie się istotne.

Osoby rekrutujące uczestników nie powinny móc przewidzieć, jaka interwencja będzie następna.

Ukrycie sekwencji alokacji różni się od zaślepienia, ponieważ chroni przed stronniczym przydziałem przed lub w chwili włączenia do badania.

Badanie może nazywać się randomizowanym i nadal źle obsługiwać sam proces randomizacji.

Na jakie pytanie miał odpowiadać komparator?

Placebo nie zawsze jest naukowo najważniejszym komparatorem.

Dla porównania:

A + kofeina kontra placebo — badanie może sprawdzić, czy kombinacja różni się od braku aktywnej interwencji.

Ale jeśli chcę wiedzieć:

Czy A wnosi coś ponad kofeinę?

potrzebuję:

A + kofeina kontra kofeina.

„Kontrolowane placebo” brzmi rygorystycznie.

Zły komparator nadal może pozostawić główne pytanie bez odpowiedzi.

Co stało się z uczestnikami?

Ilu odpadło?

Dlaczego?

Czy drop-out był podobny w obu grupach?

Czy osoby, które odpadły, pozostały w analizie?

Brakujące dane potrafią zniekształcić nawet elegancki eksperyment.

Współczesne narzędzia ryzyka biasu oceniają konkretne wyniki, ponieważ różne outcome’y i różne punkty czasowe tego samego RCT mogą mieć inne ryzyko — na przykład wtedy, gdy attrition rośnie przy późniejszym follow-up.

To użyteczne przypomnienie:

nie istnieje magiczna właściwość „dobre RCT”.

Trzeba przyjrzeć się konkretnemu wynikowi, którego chcemy użyć.

Co wybrano dopiero po zobaczeniu danych?

Protokół mógł definiować jeden outcome pierwotny.

Końcowa publikacja może eksponować inny.

Podgrupa może nagle stać się niezwykle interesująca.

Nieoczekiwany endpoint wtórny może przenieść się do abstraktu.

Żaden z tych przypadków nie oznacza automatycznie misconduct.

Ale zmienia interpretację.

„Kontrolowane placebo” to cecha projektu

Nie certyfikat.

Kiedy ją widzę, jestem zachęcony.

A potem czytam dalej.

Bo właściwe pytanie nigdy nie brzmi:

Czy było placebo?

Tylko:

Czy cały projekt utrudniał biasowi, przypadkowi i oczekiwaniu „wyprodukowanie” obserwowanego wyniku?

To znacznie wyższy standard.

I taki właśnie powinien być.

Źródła metodologiczne

Standardy raportowania i oceny, do których odwołuje się ten esej. Nie są materiałem dowodowym stojącym za jakimkolwiek claimem produktowym.

Następny w seriiDlaczego metaanalizy suplementów dochodzą do różnych wniosków