Doğruluk ile tekrarlanabilirlik aynı şey midir?

Hedef tahtası benzetmesi

Bir okçunun bütün okları hedefin solunda aynı noktaya topladığını düşünün. Atışlar birbirine yakındır, yani tekrarlanabilirdir. Fakat merkeze yakın değildir; sabit bir yanlılık vardır.

Vücut analizinde de aynı ayrım geçerlidir. Bir sistem kişinin yağ oranını her seferinde yüzde 24 civarında gösterebilir, referans yöntem ise aynı dönemde yüzde 28 bulabilir (örnek değerler). Cihaz değişimin yönünü düzenli gösterebilir, ama “gerçek değer yüzde 24’tür” demek güçlü bir ifade olmaz.

Oklar dağınıksa ne olur?

Oklar hedefin çevresine dağınık düşüyorsa tekrarlanabilirlik düşüktür ve tek bir atışa güvenmek zordur. Atışların ortalaması merkeze yakın çıksa bile, elinizdeki tek ölçümün o ortalamaya ne kadar yakın olduğunu bilemezsiniz.

Gerçek bir çalışmada aynı tablo

14 sağlıklı yetişkinle yapılan kontrollü bir çalışmada çok frekanslı BIA’nın tüm vücut ölçümlerinde tekrar uyumu neredeyse kusursuzdu (sınıf içi korelasyon 0,999 ve üzeri). Aynı cihaz, DXA’ya (çift enerjili X-ışını ölçümü) göre yağ yüzdesini ortalama 4 puan düşük, yağsız kütleyi ortalama 2,8 kg yüksek buldu.¹ Örneklem küçüktür, ama ders açıktır: çok tutarlı bir cihaz da referanstan sabit bir farkla ayrılabilir.

Bu, cihazın işe yaramadığı anlamına gelmez; hangi amaç için güçlü olduğunu gösterir. Standart koşullarda değişim takibi ile tek ölçümde laboratuvar referansına eşdeğer sonuç iddiası ayrı şeylerdir.

Ölçüm biliminde hangi kavramlara bakılır?

Cihaz incelemesinde şu altı kavram birbirinden ayrılmalıdır.

Tekrar ölçüm güvenilirliği

Aynı kişi kısa aralıkla yeniden ölçüldüğünde sonuçlar ne kadar yakın?

Sistematik yanlılık

Cihaz referans yönteme göre sürekli yüksek ya da düşük mü tahmin ediyor?

Rastgele hata

Sonuçlar birey düzeyinde ne kadar dağılıyor?

Uyum sınırları

İki yöntem arasındaki farkların çoğu hangi aralıkta kalıyor?

Standart tahmin hatası

Denklem sonuçları referans değer çevresinde ne kadar sapıyor?

En küçük gerçek değişim

Gözlenen farkın teknik ve biyolojik değişkenliği aşması için ne kadar büyük olması gerekir?

Yukarıdaki çalışmada aynı gün yapılan iki ölçüm arasında kütle farkı 0,2 kg’ı geçmezken günler arası fark 0,7 kg’a kadar çıktı.¹ En küçük gerçek değişim kavramı bu yüzden vardır: bu sınırın altındaki farkı gerçek değişim sanmamak gerekir.

Yalnızca yüksek korelasyon katsayısı da yöntemlerin aynı sonucu verdiğini kanıtlamaz. İki yöntem kişileri benzer sıralayıp değerleri sistematik biçimde farklı verebilir.

Tek bir doğruluk yüzdesi neden yetmez?

Doğruluğu tek bir yüzdeyle anlatmak kolaydır. Fakat hangi değişkenin, hangi referansa karşı, kaç kişide ve hangi istatistikle değerlendirildiği yazmıyorsa bu oran karar vermek için yetmez. Çevre ölçümü, vücut yağ yüzdesi, postür açısı ve segmental kas tahmini aynı doğruluk yüzdesine sahip olamaz; bunlar farklı ölçüm görevleridir.

Çalışmanın örneklemi de önemlidir. Genç ve sağlıklı yetişkinlerde geliştirilen bir denklem; ileri yaşta, çok düşük ya da yüksek BMI’da, sporcularda veya sıvı dengesi bozuk kişilerde aynı performansı göstermeyebilir.

3D taramada aynı ayrım nasıl görülür?

Bir 3D tarayıcı bel çevresini her seferinde çok benzer noktadan ölçebilir. Ticari bir 3D optik tarayıcıda bel ve kalça çevrelerinin tekrar ölçüm farkı 0,60 santimetrenin altında kaldı.² Dört ticari sistemin karşılaştırıldığı bir çalışmada da çevre ölçümleri tutarlıydı, ancak beden hacmi tahminleri referans yöntemlerle eşdeğer bulunmadı.³

Yazılımın bel referans düzlemi mezuranın kullanıldığı anatomik düzlemden farklıysa iki yöntem arasında sabit fark oluşabilir.⁴ Tarama ile klasik ölçüm arasındaki uyumun sabit fark düzeltildikten sonra iyi çıkması da bunu gösteriyor.⁵ Takipte aynı sistem kullanılırsa küçülmenin yönü izlenebilir; fakat tarayıcıdaki 82 santimetreyi mezuradaki 82 santimetreyle koşulsuz eşitlemek doğru olmaz. Bu nedenle farklı yöntemlerin sonuçları birbirine karıştırılmamalıdır.

Cihaz seçerken sorulacak sekiz soru

Görüşmede işaretleyerek ilerleyebilirsiniz.

• Hangi model ve yazılım sürümü test edildi?
• Her rapor değişkeni hangi referans yöntemle karşılaştırıldı?
• Çalışma bağımsız mı, üretici destekli mi yürütüldü?
• Örneklem büyüklüğü ve özellikleri neler?
• Ortalama yanlılık ve bireysel uyum sınırları nedir?
• Test-tekrar test hatası kaç?
• Farklı yaş, cinsiyet, BMI ve etnik gruplarda performans nasıl?
• Yazılım güncellendiğinde algoritma ve referans aralıkları değişti mi?

Bu soruların cevabı yoksa “kanıt yok” ile “cihaz yanlış” birbirine karıştırılmamalıdır. Doğru ifade, performansın ilgili kullanım için henüz doğrulanamadığıdır.

Visbody raporunu okurken

Bir Visbody raporunda da her alan aynı ölçüm görevinden gelmez. Çevre ölçümü 3D modelden, yağ ve yağsız kütle tahmini BIA ya da modelleme katmanından, postür göstergesi referans noktalarından üretilir. Bu yüzden her alanı kendi sınırıyla okuyun. Değişimi izlerken aynı cihazı, aynı yazılım sürümünü ve aynı hazırlığı koruyun. Ürün tanıtımlarındaki hassasiyet ifadeleri üretici beyanıdır; bağımsız çalışma sonuçlarıyla aynı şey değildir.

Sonuç: doğru soruyu ölçüm amacına göre sorun

İlerlemeyi izlemek için “Aynı koşullarda tutarlı mı?” sorusu öne çıkar. Bir kişide mutlak doku miktarını referans yönteme yakın bilmek için “Hangi yöntemle, hangi hata sınırında doğrulandı?” sorusu gerekir. En güvenilir dil, cihazı ne küçümser ne de mutlaklaştırır; ölçümün güçlü olduğu alanı ve belirsizliğini aynı cümlede açıklar.