Kısa Cevap
SaMD klinik değerlendirmesinin sabit bir liste-kalemi ücreti veya standart süresi yoktur; her ikisini de altı-yedi sürücü belirler. Bunlar: çalışma tipi (retrospektif standalone, prospektif veya çok-okuyuculu MRMC), örneklem büyüklüğü ve buna bağlı güç hesabı, referans standardın (ground truth) inşa emeği, tek-merkez mi çok-merkez mi olduğu, dış validasyon (external validation) gerekip gerekmediği ve verinin hazır olma durumudur. Her sürücü takvime kendi hafta-bandını ekler: temiz veriyle bir retrospektif standalone çalışma tipik olarak birkaç haftadan birkaç aya, çok-merkezli prospektif veya MRMC tasarımlar çeyrek yıllara uzanır. Bu yüzden doğru soru "ne kadar tutar" değil, "kullanım amacımız ve regülatör hedefimiz için hangi sürücüler gerçekten devrede" sorusudur. En pahalı çalışma, kapsamı yanlış kurulduğu için baştan yapılmak zorunda kalandır.
Serteser Danışmanlık, bir medical-AI tıbbi cihazı geliştirip çalışmasını hakemli uluslararası bir dergide yayınlamış bir biyomedikal mühendis (BME MSc) tarafından yürütülür; SaMD/medical-AI cihazlarınızın TİTCK-CDSS, EU-MDR ve FDA dosyalarının çekirdeğindeki standalone klinik-validasyon çalışmasını tasarlar, istatistiğini yürütür ve isimli metodolog olarak imzalar. Ürün ruhsatlandırma evrakı, ISO 13485 kalite sistemi ve klinik çalışmanın hekim sorumlu araştırmacılığı şeridimiz dışındadır. Bu yazıda amaç bir fiyat vermek değil, hangi kapsam kararlarının süreyi ve ücreti sürüklediğini önceden görünür kılmaktır.
Medtech ekipleri klinik değerlendirmeyi çoğu zaman tek bir sabit kalem olarak bütçeler: "validasyon çalışması". Oysa bu kalem, cihazın kullanım amacına ve regülatör hedefine göre kat farkı gösteren bir sürücü demetidir. İki cihaz aynı doğruluğa sahip olabilir ama biri birkaç haftalık bir retrospektif çalışmayla, diğeri aylar süren çok-merkezli prospektif bir çalışmayla savunulur.
Bu yazı geniş klinik değerlendirme (CER) katmanının süre ve maliyet resmini verir. Tek bir bileşen olan validasyon çalışmasının maliyet sürücülerine yakından bakmak için klinik validasyon çalışmasının süre ve maliyetini belirleyenler yazısına bakın.
Aşağıda maliyeti ve süreyi gerçekten belirleyen sürücüleri, her biri için gösterge niteliğinde hafta-bantlarıyla açıklıyoruz. Bantlar takvimi kalibre etmek içindir; hiçbiri mutlak bir ücret değildir ve gerçek kapsam ancak kapsam görüşmesiyle netleşir.
Klinik Değerlendirme Sabit Bir Kalem Değildir
IMDRF SaMD N41 ve MDCG 2020-1, klinik değerlendirmeyi üç bileşenli bir zincir olarak tanımlar: geçerli klinik ilişki (valid clinical association), analitik validasyon (algoritma girdiyi doğru işliyor mu) ve klinik validasyon (çıktı hedeflenen klinik amaca ulaşıyor mu). EU-MDR Rule 11 kapsamındaki karar-destek yazılımları çoğunlukla Class IIa/IIb'ye düşer ve TİTCK, EU-MDR'ı büyük ölçüde transpoze ettiği için TİTCK-CDSS dosyası da aynı üç bileşeni bekler.
Bu zincirin her halkası farklı bir emek ve takvim taşır. Dolayısıyla "klinik değerlendirme ne kadar sürer" sorusu, altında yatan sürücüler ayrıştırılmadan cevaplanamaz. Sınıflandırmanın kendisi (MDCG 2019-11) hangi kanıt eşiğinin gerekli olduğunu, dolayısıyla sürücülerin şiddetini belirler.
Süreyi ve Maliyeti Belirleyen Sürücüler
1. Çalışma tipi
En belirleyici tek sürücü budur. Retrospektif standalone performans çalışması, mevcut ve etiketlenmiş veriyle en ekonomik ve en hızlı olandır. Prospektif veri toplama hasta akışına bağımlıdır ve takvimi hastanın kendisi belirler. MRMC (çok-okuyuculu, çok-vakalı) reader study, cihazın klinisyen kararına etkisini (AI ile ve AI olmadan okuma) ölçmek gerektiğinde devreye girer ve hem okuyucu koordinasyonu hem istatistik açısından en ağır tasarımdır.
- Retrospektif standalone (veri hazır): ~3 ila 8 hafta
- Retrospektif standalone (veri kürasyonu gerekli): ~8 ila 16 hafta
- MRMC reader study: ~12 ila 24 hafta
- Prospektif veri toplama: hasta akışına bağlı, tipik olarak çeyrek yıllar
MRMC tasarımının neden ayrı bir maliyet sınıfı olduğunu MRMC çok-okuyuculu çalışma yazımızda ayrıntılandırdık.
2. Örneklem büyüklüğü ve güç hesabı
Örneklem "elimizdeki tüm vakalar" değildir; birincil son noktayı (örneğin AUC, sabit eşikte sensitivite/spesifisite) hedeflenen kesinlikte tahmin edecek formel bir güç/hassasiyet hesabıyla gerekçelendirilir. Çoğu zaman bağlayıcı olan toplam N değil, pozitif vaka (event) sayısıdır; nadir bulgularda gereken veri hacmi hızla büyür. Alt-grup analizleri (yaş, cihaz üreticisi, patoloji tipi) her biri kendi güç bütçesini ister.
- Güç hesabı, önceden kilitlenmiş SAP ve son-nokta tanımı: ~1 ila 3 hafta
- Yetersiz event nedeniyle ek veri temini gerektiğinde: bant, çalışma tipi bandına eklenir
3. Referans standart (ground truth) inşası
Referans standart ne kadar "sert" olursa çalışma o kadar güçlü ama o kadar emek-yoğun olur. Histopatoloji veya takip sonucu gibi sert ölçütler kayıt eşleştirme gerektirir; çoklu-uzman konsensüsü ise okuyucu sayısı, önceden tanımlı uzlaşı kuralı, adjudikasyon (uyuşmazlık çözümü) ve gözlemciler-arası uyum (kappa, ICC) ölçümü demektir. Referans standart, modelin kendi etiketinden bağımsız kurulmalıdır; aksi halde döngüsellik dosyayı çürütür.
- Tek-uzman veya mevcut sert ölçüt: ~1 ila 3 hafta
- Çoklu-uzman konsensüs + adjudikasyon: ~4 ila 10 hafta
4. Tek merkez mi, çok merkez mi
Tek-merkez çalışma hızlı ve ucuzdur ama genellenebilirliği sınırlıdır ve regülatör/hakem gözünde tek başına çoğu zaman yetmez. Çok-merkez tasarım popülasyon, tarayıcı ve protokol çeşitliliğini yakalar; buna karşılık her ek merkez sözleşme, veri aktarım anlaşması, KVKK/GDPR uyumu ve harmonizasyon emeği getirir.
- Tek merkez: taban bant (yukarıdaki tiplerin içinde)
- Her ek merkez koordinasyonu: merkez başına ~2 ila 6 hafta ek
5. Dış validasyon (external validation)
Ayrı bir merkez, cihaz veya zaman diliminden gelen ve modeli yeniden eğitmeden test eden bağımsız veri seti, regülatör dosyalarının asıl beklediği kanıttır ve çoğu durumda pazarlık edilebilir değildir. Hasta düzeyinde ayrım (patient-level split) ve veri sızıntısının (data leakage) önlenmesi burada kritiktir. Dış validasyonun neden savunulabilir kanıtın kalbi olduğunu dış validasyon yazımızda ayrıca ele aldık.
- Mevcut bağımsız kohort üzerinde dış validasyon: ~3 ila 8 hafta
- Yeni merkezden dış kohort temini gerektiğinde: merkez-ekleme bandıyla birleşir
6. Verinin hazır olma durumu
Takvimi en sık ve en sessiz uzatan sürücü budur. Veri zaten toplanmış, anonimleştirilmiş, de-identifiye ve etiketlenmişse çalışma hızla ilerler. Ham, dağınık, PACS-içi veya KVKK açısından henüz anonimleştirilmemiş veri, analizden önce haftalar-aylar süren bir kürasyon işidir. Etik kurul onayı ve kurumsal izinler de takvimin sabit bir parçasıdır.
- Veri hazır ve etiketli: ek yok
- Kürasyon + de-identifikasyon: ~4 ila 12 hafta
- Etik kurul / kurumsal izin: ~4 ila 8 hafta (paralel yürütülebilir)
Sürücü Tablosu
| Sürücü | Ekonomik uç | Ağır uç | Gösterge hafta-bandı |
|---|---|---|---|
| Çalışma tipi | Retrospektif standalone | Prospektif / MRMC | 3-8 hafta ila çeyrek yıllar |
| Örneklem / güç | Yeterli event mevcut | Nadir bulgu, alt-gruplar | 1-3 hafta + veri temini |
| Referans standart | Tek uzman / sert ölçüt | Çoklu-uzman konsensüs + adjudikasyon | 1-3 ila 4-10 hafta |
| Merkez sayısı | Tek merkez | Çok merkez | merkez başına +2-6 hafta |
| Dış validasyon | Mevcut kohort | Yeni merkez temini | 3-8 hafta + |
| Veri hazırlığı | Etiketli, de-identifiye | Ham, KVKK-öncesi | 4-12 hafta |
Bantlar bağımsız değildir; gerçek takvim, devrede olan sürücülerin üst üste binmesiyle oluşur. Örneğin çok-merkezli bir MRMC çalışması, çalışma tipi bandına merkez-ekleme ve konsensüs bantlarını da yükler. Bu yüzden toplam süre, tek tek bantların basit toplamı değil, kapsamın bütünsel bir fonksiyonudur.
En Pahalı Çalışma, Yeniden Yapılandır
Maliyeti gerçekten patlatan şey çoğu zaman çalışmanın kendisi değil, yanlış kurulduğu için tekrarlanmasıdır. Analiz planı veriden sonra yazılmışsa, model validasyon sırasında ayarlanmışsa (yani aslında geliştirme yapılmışsa), referans standart modelin etiketinden bağımsız değilse, hasta düzeyinde ayrım ihlal edilmişse veya dış validasyon hiç tasarlanmamışsa, TRIPOD-AI / PROBAST-AI / STARD-AI çerçevesinde bir hakem ya da regülatör çalışmayı reddeder ve baştan ister. Bu noktada hem ücret hem aylar iki kez harcanır.
Bunu önlemenin yolu, kapsamı ve analizi baştan doğru kurmaktır: önceden kilitlenmiş SAP, bağımsız referans standart, hasta düzeyinde ayrım, kalibrasyon ve gerektiğinde karar-eğrisi analizi (decision-curve analysis), ISO 14971 risk çerçevesiyle hizalı. Çalışma tasarımının nasıl kurulacağını SaMD klinik-validasyon çalışması nasıl tasarlanır ve retrospektif validasyon çalışması tasarımı yazılarında ayrıntılandırdık. Devrede olan sürücüleri ve gereken minimum savunulabilir kapsamı netleştirmek için klinik kanıt ve validasyon hizmetimiz kapsamında bir kapsam görüşmesi talep edebilirsiniz.
Kapsam Görüşmesi Neyi Netleştirir?
Doğru bir kapsam görüşmesi, herhangi bir ücret konuşulmadan önce şu soruları yanıtlar: kullanım amacınız ve MDCG 2019-11'e göre hedef sınıfınız ne; birincil son nokta hangi metrik olmalı; güç hesabı kaç pozitif vaka gerektiriyor; referans standart nasıl bağımsız kurulacak; dış validasyon zorunlu mu; tek merkez yeter mi; ve dosya hangi regülatöre (TİTCK-CDSS, EU-MDR, FDA) göre raporlanacak. Bu sorular netleştiğinde hangi sürücülerin devrede olduğu, dolayısıyla süre ve ücret tahmin edilebilir hale gelir. Kapsamı iç ekiple mi yoksa dış metodologla mı yürütmenin daha savunulabilir olduğunu klinik validasyonu kim yapar yazısında karşılaştırdık.
Sonuç: Önce Sürücüler, Sonra Rakam
SaMD klinik değerlendirmesinin süresi ve ücreti, cihazınızın ne kadar iyi olduğuna değil, kullanım amacınızın ve regülatör hedefinizin hangi sürücüleri devreye soktuğuna bağlıdır. Doğru sıra önce sürücüleri kullanım amacı ve regülatör hedefine göre belirlemek, sonra hafta-bantlarını ve ücreti bunun üzerine koymaktır. Bu sırayı tersine çevirmek, yani önce bütçeyi sabitleyip kapsamı ona sığdırmaya çalışmak, çoğu reddedilen validasyon dosyasının başlangıç noktasıdır. Klinik değerlendirmeyi tek bir sabit kalem değil, yönetilebilir bir sürücü demeti olarak görmek, hem takvimi hem ücreti öngörülebilir kılar.