Ograniczenia geometrii, modalności i augmentacji

Obraz medyczny jest pomiarem uzyskanym w procesie akwizycji i umiejscowionym w przestrzeni

Nazywanie obrazu tensorem jest użyteczne na poziomie implementacji, ale nie wystarcza do rozumowania. Na przykład wartości tablicy w woluminie CT są wynikiem rekonstrukcji i interpretuje się je wraz z siatką przestrzenną oraz kontraktem akwizycji. W skalibrowanej reprezentacji CT mogą odpowiadać osłabieniu promieniowania w skali Hounsfielda, lecz interpretacja ta obowiązuje pod warunkiem prawidłowej obsługi zapisanych wartości i przekształceń. Naturalny obraz RGB nie ma tej samej semantyki intensywności, próbkowania przestrzennego ani historii akwizycji.

Odstępy zmieniają fizyczne znaczenie operacji sieci. Pole recepcyjne splotu obejmujące tę samą liczbę wokseli odpowiada innej odległości, gdy w jednym badaniu warstwy są grube, a w drugim cienkie. Odstęp w kierunku międzywarstwowym równy pięć milimetrów i odstęp równy 0,7 milimetra nie są zamienne tylko dlatego, że oba woluminy można przedstawić jako tablice o trzech indeksach. Zmiana próbkowania do zadeklarowanej siatki albo zaprojektowanie modelu uwzględniającego odstępy może uczynić zamierzoną skalę fizyczną jawną. Żaden z tych wyborów nie usuwa pierwotnej różnicy próbkowania; siatka i operacja użyta do jej zmiany pozostają częścią kontraktu modelu.

Równie ważne jest położenie. Początek, odstępy i kierunek wiążą indeks tablicy z przestrzenią fizyczną. Przekształcenie zastosowane do tablicy nie jest automatycznie tym samym co przekształcenie pacjenta. Obraz, maska i inne obiekty przestrzenne muszą być przekształcane w ramach spójnej konwencji współrzędnych; w przeciwnym razie wiarygodny wizualnie wynik może przypisać predykcję do niewłaściwej anatomii. Szersze omówienie zawierają materiały o przejściu od woksela do przestrzeni pacjenta oraz o zmianie próbkowania. Tutaj istotną konsekwencją jest to, że geometria stanowi ograniczenie danych wejściowych, a nie opcjonalną dekorację. Pozornie wiarygodny zasięg tablicy lub zakres intensywności może nadal ukrywać błędne osie, przekształcenia albo semantykę etykiet. Kontrola poprawności powinna więc wykorzystywać zadeklarowane współrzędne fizyczne: należy porównać znane punkty orientacyjne lub zasięgi fizyczne przed przekształceniem i po nim, a także przeprowadzić reprezentatywne indeksy lub punkty orientacyjne przez odwzorowanie indeksu na przestrzeń fizyczną i z powrotem na indeks, sprawdzając powrót do oczekiwanych położeń w granicach zadeklarowanej tolerancji. W przypadku maski lub obrazu etykiet należy ponadto sprawdzić zbiór etykiet i znaczenie każdej z nich oraz potwierdzić, że obraz i etykiety nadal odnoszą się do tej samej anatomii. Kontrole te badają reprezentację i spójność zapisu; nie dowodzą wierności biologicznej ani poprawności dalszego zadania.

Modalność i akwizycja określają zmienność widoczną dla modelu

Znaczenie i ograniczenia wartości intensywności są swoiste dla modalności i protokołu. Jednokanałowa reprezentacja CT nie jest obrazem RGB pozbawionym jednego kanału barwnego, a dopuszczalne przetwarzanie wstępne zależy od modalności i protokołu, które wytworzyły reprezentację. W przypadku CT związek z osłabieniem promieniowania w skali Hounsfielda pozostaje warunkowy wobec prawidłowej obsługi zapisanych wartości i przekształceń. Ta sama operacja numeryczna może więc w jednym zadaniu przedstawiać wiarygodną zmianę akwizycji, a w innym zmienić lub usunąć zamierzony sygnał. Pytanie nie dotyczy tego, czy biblioteka udostępnia dane przekształcenie, lecz tego, jaką zmienność fizyczną lub kliniczną ma ono modelować.

Wybory dotyczące akwizycji i rekonstrukcji tworzą kolejne osie zmienności. Dawka, czas podania środka kontrastowego, pole widzenia, odstępy wokseli, jądro rekonstrukcyjne i ośrodek mogą zmienić rozkład przedstawiany modelowi, ale nie są jedną nierozróżnialną zmienną zakłócającą. Część wyborów dotyczy sposobu wykonania pomiaru, a część sposobu rekonstrukcji lub reprezentacji uzyskanej informacji. Model wytrenowany na jednej kombinacji może napotkać inny rozkład danych wejściowych, gdy zmieni się którykolwiek z tych elementów. Wynik wewnętrzny na zbiorze testowym mającym te same warunki stanowi dowód dotyczący tego reprezentowanego środowiska, a sam w sobie nie uzasadnia twierdzenia o wdrożeniu. Omówienie testowania twierdzeń z rozdziału o walidacji dostarcza właściwych ram do ustalenia, co sprawdza nowe środowisko.

Ograniczona dostępność etykiet także zmienia charakter problemu inżynierskiego. W wielu badaniach obrazowania medycznego liczba niezależnych pacjentów jest znacznie mniejsza, niż sugerowałaby liczba elementów tablicy, warstw lub pochodnych fragmentów obrazu. Augmentacja może pomóc reprezentować wybraną zmienność, ale nie może wytworzyć niezależnych dowodów klinicznych. Musi również zachować cel zadania. Przekształcenie przestrzenne trzeba spójnie zastosować do obrazu i jego etykiet, a metadane współrzędnych obsłużyć zgodnie z implementacją. Przekształcenie intensywności wymaga zadeklarowanej interpretacji: może modelować określoną zmianę akwizycji, ale może też zmienić wielkość fizyczną lub usunąć różnicę, od której zależy etykieta.

Dlatego uniwersalne reguły augmentacji są niebezpieczne. Losowe modyfikacje koloru nie mają bezpośredniego znaczenia barwnego w jednokanałowej reprezentacji CT. Arbitralne skalowanie intensywności nie jest automatycznie fizycznie wiarygodną zmianą skalibrowanej wartości. Obrót tablicy o 90 stopni nie jest automatycznie bezpieczny ani niebezpieczny: może być właściwy w zadaniu, w którym uzasadniają go symetrie przestrzenne i semantyka etykiet, a zarazem niewiarygodny w zadaniu dotyczącym orientacji anatomicznej. W obu przypadkach implementacja musi zachować spójność obrazu, etykiet i geometrii. Niewielkie deformacje, odbicia, obroty lub zaburzenia intensywności są wyborami projektowymi, których poprawność zależy od modalności, anatomii, zadania, konwencji współrzędnych i populacji, którą model ma reprezentować. Żaden kąt, rodzaj odbicia, poziom deformacji ani próg intensywności nie jest uniwersalnie bezpieczny.

Audyt augmentacji ujawnia te warunki. Dla każdego proponowanego przekształcenia należy zapisać jego zamierzoną interpretację akwizycji lub anatomii, granice poprawności, wymagane operacje na obrazie, etykietach i geometrii oraz wynik kontrprzykładu lub kontroli negatywnej:

Przekształcenie	Zamierzona interpretacja	Granica poprawności	Kontrakt obrazu, etykiet i geometrii	Wynik kontrprzykładu lub kontroli negatywnej
Losowa modyfikacja koloru	Brak bezpośredniej interpretacji akwizycji dla jednokanałowej reprezentacji CT; zwykle przekształcenie wykluczone albo jawna kontrola negatywna.	Nie należy traktować operacji bibliotecznej jako zmienności fizycznej ani argumentu za przenoszalnością.	Żadne przekształcenie metadanych przestrzennych ani etykiet nie nadaje modyfikacji koloru poprawności anatomicznej; należy zapisać, dlaczego wykracza ona poza kontrakt danych wejściowych.	Reakcja na zmianę wyłącznie koloru jest ostrzeżeniem dotyczącym reprezentacji lub potoku, a nie dowodem wykorzystania wskazówki anatomicznej.
Skalowanie lub zaburzenie intensywności	Zadeklarowana zmiana dawki, szumu lub kontrastu tylko wtedy, gdy takie odwzorowanie jest uzasadnione dla modalności i protokołu.	Arbitralne zmiany mogą zmieniać skalibrowane wartości albo usuwać znaczenie intensywności istotne dla zadania.	Należy zapisać odwzorowanie przechowywanej wartości; etykiety i geometria mogą pozostać niezmienione tylko wtedy, gdy zamierzona zmiana nie jest przestrzenna, a interpretację wynikowej intensywności trzeba zweryfikować.	Zadanie wrażliwe na kalibrację lub zaburzenie spoza kontraktu stanowi kontrprzykład; zachowanie w takich warunkach nie dowodzi odporności po wdrożeniu.
Obrót o 90 stopni	Zadeklarowana orientacja akwizycji albo uzasadniona symetria przestrzenna zadania i populacji.	Jest niepoprawny w zadaniu wrażliwym na orientację lub stronę ciała, chyba że jawnie uzasadniają go współrzędne i semantyka etykiet.	To samo przekształcenie przestrzenne należy zastosować do obrazu i etykiet, a następnie zaktualizować oraz sprawdzić metadane współrzędnych.	Punkt orientacyjny lub etykieta wrażliwa na orientację stanowi kontrprzykład; należy użyć go jako kontroli negatywnej, zamiast uznawać zmianę wyniku za korzyść z augmentacji.
Odbicie	Uzasadniona symetria anatomiczna albo zmienność orientacji akwizycji.	Strona ciała, anatomia kierunkowa i etykiety zadania mogą czynić odbicie niepoprawnym.	Obraz, etykiety i geometrię należy przekształcić zgodnie z tą samą zadeklarowaną konwencją współrzędnych.	Etykieta lewej lub prawej strony albo etykieta kierunkowa dostarcza kontrprzykładu; sama zmiana wyniku nie identyfikuje wskazówki związanej z ośrodkiem lub biologią.
Deformacja	Ograniczony model zmierzonego ruchu lub zmienności kształtu anatomicznego.	Deformacja musi pozostać wiarygodna dla anatomii i populacji docelowej oraz nie może zmieniać definicji zadania.	Obraz, maski, etykiety i istotną geometrię należy przekształcać łącznie; trzeba sprawdzić punkty orientacyjne i zgodność etykiet.	Deformacja, która przesuwa punkty orientacyjne poza zamierzoną anatomię albo zmienia znaczenie etykiety, jest niepoprawną augmentacją lub kontrolą negatywną.

Takie odwzorowanie jest częścią kontraktu danych wejściowych, a nie wyjaśnieniem sformułowanym po fakcie. Potok może reagować na wskazówkę związaną z ośrodkiem, rekonstrukcją lub augmentacją, ale przypisanie obserwowanego zachowania tej konkretnej wskazówce wymaga ukierunkowanego testu wrażliwości lub przenoszalności.

Potok tensorowy może ukrywać założenie dotyczące wdrożenia

Ryzyka się kumulują. Jeżeli potok pomija odstępy, jego stałe pole recepcyjne może odpowiadać różnym zasięgom fizycznym w poszczególnych badaniach. Jeżeli dodatkowo uczy się na jednej rekonstrukcji lub w jednym ośrodku, może wykorzystywać wskazówki teksturalne albo protokolarne, które mogą się zmienić w środowisku wdrożeniowym. Jeżeli kontrakt augmentacji zmienia znaczenie intensywności lub geometrię etykiet, rozkład treningowy przestaje opisywać zamierzone zadanie, zanim jeszcze rozważy się ośrodek zewnętrzny. Są to możliwe ścieżki awarii, a nie rozpoznania dotyczące konkretnego modelu; przypisanie obserwowanego zachowania określonemu ośrodkowi, rekonstrukcji lub wskazówce augmentacyjnej wymaga ukierunkowanych testów wrażliwości lub przenoszalności.

Praktyczną odpowiedzią jest zapisanie kontraktu danych wejściowych przed dopasowaniem modelu: określenie modalności i interpretacji intensywności, zapisanie geometrii i rekonstrukcji, wskazanie osi akwizycji objętych zakresem oraz zdefiniowanie w tych kategoriach każdego przekształcenia przestrzennego lub intensywności. Następnie należy przetestować całą procedurę w warunkach zmian, które rzeczywiście obejmuje twierdzenie dotyczące wdrożenia. Dobry wynik wewnętrzny może stanowić użyteczny dowód dla tego środowiska wewnętrznego, lecz nie rozstrzyga skutków niesprawdzonej zmiany geometrii, modalności, akwizycji ani ośrodka.

Kolejna konsekwencja dotyczy dalszego pomiaru, a nie wyglądu. Gdy obraz służy do pomiaru obszaru, maska segmentacji staje się częścią definicji pomiaru, a jej jakość trzeba oceniać przez pryzmat zadania, które umożliwia.