Zawęź twierdzenie do zakresu dowodów

Wniosek nie jest jedynie krótszym abstraktem. Stoi za nim twierdzenie o populacji docelowej, wyniku, jednostce obserwacji, procedurze testowej i metryce. Do nadmiernego rozszerzenia twierdzenia dochodzi wtedy, gdy wniosek pomija te warunki i używa określenia szerszego niż dowody. Praktyczna odpowiedź nie polega na przypisywaniu autorom motywów. Należy przepisać zdanie tak, aby jego zakres pozostał widoczny.

Zapisz krotkę zakresu przed przymiotnikiem

Przed zaakceptowaniem mocnego rzeczownika lub przymiotnika wypełnij zwięzłą krotkę zakresu: kogo badano, co etykietowano, co reprezentowała jedna obserwacja, które dane wydzielono, czy model lub próg podlegał adaptacji, którą metrykę zaraportowano i jakich dowodów brakuje. Krotka zawiera więcej informacji niż ogólne określenie takie jak „zwalidowany”. Wyjaśnia również, dlaczego dwa badania używające tego samego słowa mogą formułować różne twierdzenia.

Nawyk przeformułowywania

Poniższe zamienniki są schematami zawężania twierdzeń, a nie uniwersalnymi definicjami. Ich dokładne brzmienie powinno wynikać z estymandu badania i rzeczywiście sprawdzonych dowodów.

Szerokie sformułowanie	Węższe sformułowanie przy ograniczonych dowodach
„nowy biomarker obrazowy”	„kandydująca cecha pochodząca z obrazu, powiązana z wynikiem w badanej próbie; nie wykazano walidacji biologicznej ani klinicznej”
„możliwy do uogólnienia między ośrodkami”	„skuteczność przetestowano w określonych warunkach wewnętrznych, czasowych lub zewnętrznych; szerszego przenoszenia nie testowano”
„użyteczny klinicznie”	„zaraportowano zdolność dyskryminacyjną; nie wykazano kalibracji, wpływu na decyzje ani użyteczności klinicznej”
„zwalidowany”	„przetestowany w określonej populacji, z określoną etykietą, podziałem, metryką i procedurą wyznaczania niepewności”
„zwalidowany zewnętrznie”	„przetestowany w kohorcie zewnętrznej z modelem i progiem [zamrożonymi lub poddanymi adaptacji] zgodnie z opisem”

Nie należy nadawać określenia biomarker wyłącznie dlatego, że oprogramowanie wytworzyło cechę albo że cecha była powiązana z punktem końcowym. Interpretacja biologiczna, dotycząca procesu lub odpowiedzi albo kliniczna wymaga projektu walidacji dopasowanego do tej interpretacji. Do tego czasu „cecha kandydująca” nie jest słabszą wersją tego samego wniosku; stanowi inne i trafniejsze twierdzenie.

Podobnie określenie możliwy do uogólnienia wymaga wskazania testowanej osi. Wewnętrzny test w jednym ośrodku nie staje się dowodem międzyośrodkowym dzięki zaawansowaniu modelu. Zewnętrzny test modelu zamrożonego dotyczy przenoszenia do testowanych warunków. Test zewnętrzny po dostrojeniu dotyczy transferu po adaptacji. Sformułowanie walidacja zewnętrzna pozostaje niepełne, dopóki czytelnik nie wie, która z tych procedur miała miejsce i gdzie wybrano próg.

Skonstruowany przykład zawężenia twierdzenia

Wyobraźmy sobie jednoośrodkowe retrospektywne badanie radiomiczne, które raportuje AUROC, ale nie przedstawia kalibracji, użyteczności decyzyjnej ani testu zewnętrznego. W abstrakcie nazwano cechę odpornym biomarkerem, który można uogólniać i który jest użyteczny klinicznie. Rzetelna rekonstrukcja mogłaby brzmieć: „Kandydująca cecha pochodząca z obrazu była powiązana z wynikiem w jednoośrodkowym teście wewnętrznym; raportowanej zdolności dyskryminacyjnej nie towarzyszyły dowody transportowalności zewnętrznej, kalibracji ani użyteczności decyzyjnej”. Zdanie to nie twierdzi, że cecha jest bezużyteczna. Mówi, co wspiera opisany projekt, i pozostawia nierozstrzygnięte pytania widoczne.

Ta sama dyscyplina obowiązuje przy imponującym wyniku. Skonstruowana wartość AUROC 0,94 może pozostać w zdaniu, jeśli nazwano jej populację, etykietę, jednostkę i test. Nie wolno przypisywać jej dodatkowych znaczeń: zwalidowanego markera biologicznego, skalibrowanego narzędzia oceny ryzyka ani użytecznej interwencji klinicznej, jeśli tych pytań nie zbadano oddzielnie.

Brakujące metody są ograniczeniami, a nie werdyktami

Istnieje zasadnicza różnica między „nie zaraportowano”, „nie wykonano” oraz „wykonano i uzyskano wynik negatywny”. Artykuł, który pomija procedurę wyboru progu, nie dowodzi, że próg wybrano na danych testowych. Nie pozwala jednak czytelnikowi przyjąć twierdzenia zależnego od punktu pracy określonego z góry. Artykuł pomijający kalibrację nie dowodzi błędnej kalibracji; nie wykazuje natomiast, że jego wartości punktowe można interpretować jako prawdopodobieństwa.

Listy kontrolne raportowania pomagają odnaleźć te luki, lecz zaznaczone pole nie dowodzi prawidłowego wykonania, a niezaznaczone nie dowodzi niepowodzenia naukowego. Czytelnik musi zachować proporcjonalność języka: „badanie nie wykazało” jest często trafniejsze zarówno od „badanie zakończyło się niepowodzeniem”, jak i od „model działa”.

Nadmierne rozszerzenie twierdzenia często wynika z optymizmu, nieprecyzyjnego słownictwa albo wniosku, który wyrósł poza pierwotny estymand. Jego zawężenie jest działaniem chroniącym dowody, a nie oskarżeniem. Następna część dostarcza narzędzi do odnajdywania pominięć, zachowując odrębność pytań o kompletność raportowania, ryzyko błędu systematycznego i odtwarzalność obliczeniową.