PDF icon PDF herunterladen
Methods Inf Med 1978; 17(04): 217-226
DOI: 10.1055/s-0038-1636441
Original Article
Schattauer GmbH

The Measurement of Performance in Probabilistic Diagnosis

I. The Problem, Descriptive Tools, and Measures Based on Classification MatricesDIE LEISTUNGSMESSUNG BEI DER WAHRSCHEINLICHKEITSDIAGNOSEI. DAS PROBLEM, DESKRIPTIVE VERFAHREN UND AUF KLASSIFIKATIONSMATRIZEN GEGRÜNDETE MESSGRÖSSEN
J. D. F. Habbbma
1   From the Department of Publio Health and Social Medicine, Erasmus University, Rotterdam, The Netherlands, and the Institute of Human Genetics, University of Copenhagen, Denmark
,
J. Hilden
1   From the Department of Publio Health and Social Medicine, Erasmus University, Rotterdam, The Netherlands, and the Institute of Human Genetics, University of Copenhagen, Denmark
,
B. Bjerregaard
1   From the Department of Publio Health and Social Medicine, Erasmus University, Rotterdam, The Netherlands, and the Institute of Human Genetics, University of Copenhagen, Denmark
› Institutsangaben
Weitere Informationen

Publikationsverlauf

Publikationsdatum:
19. Februar 2018 (online)

   Lizenzen und Reprints
Preview

Owing to the inherent uncertainty of diagnostic tasks, diagnostic advice should be offered in a probabilistic, rather than deterministic form. Since the late fifties a lot of effort has been invested in constructing probabilistic diagnosis rules. Much less has been done to devise rational tools for evaluating them; conventional error rates reflect but one aspect of performance in a rather crude way. The aim of this paper and its successors is to offer a body of evaluation tools. After defining a general framework and stating its limitations we apply some graphical techniques to the acute abdominal pain data that will serve as illustration in the next papers as well: dot diagrams, the triangular diagram for the three-disease case, and three tabular representations based 011 categorization of the probabilities, viz. the usual (forced) classification matrix, from which various classification rates are read off; the classification matrix with doubt, in which uncertain and confident diagnoses are distinguished; and the exclusion matrix, which spots diseases that are judged improbable. Together these matrices give a good first impression of the behaviour of a probabilistic diagnosis system. The outlined techniques of later papers are needed for a more complete analysis.

Aufgrund der inhärenten Unsicherheiten diagnostischer Aufgaben sollte diagnostische Beratung besser in probabilistischer als in deterministischer Form geliefert werden. Seit den späten fünfziger Jahren hat man sich sehr um die Erstellung probabilistischer Diagnostikregeln bemüht. Viel weniger ist getan worden, um rationelle Hilfsmittel zu ihrer Bewertimg ausfindig zu machen; die üblichen Felllerquoten reflektieren nur einen Aspekt der Leistimg, zudem in recht grober Weise. Das Ziel dieser Artikelreihe ist es, einen Satz von Bewertungsmethoden anzubieten. Nach Festlegung eines Begriffsrahmens und kurzer Diskussion seiner Grenzen wenden Mir einige graphische und tabellarische Techniken auf Daten an, die aus der Kopenhagener Studie über akute Bauchschmerzen stammen und der Artikelreihe als durchgehendes Beispiel dienen: Punktdiagramme, das Dreieck-Diagramm für den Fall von drei Krankheiten und drei tabellarische Darstellungen, che auf Kategorisierung cler Wahrscheinlichkeiten gegründet sind: che übliche (erzwungene) Klassifikationsmatrix, che Klassifikationsmatrix mit Verzichtsmöglichkeit, in cler unsichere und sichere Diagnosen getrennt gezählt werden, und die Ausschlußmatrix, in cler für unwahrscheinlich gehaltene Krankheiten aufgezählt werden. Zusammen geben diese Matrizen einen guten ersten Eindruck vom Verhalten eines probabilistischen Diagnosesystems. Für eine vollständigere Analyse werden allerdings die Techniken cler beiden folgenden Aufsätze benötigt.

Keywords

Computer-aided Diagnosis - Uncertainty in Diagnosis - Probabilistic Diagnosis - Forced Classification Matrix - Classification Matrix with Doubt - Exclusion Matrix - Triangular Representation

Schlüssel-Wörter

Computerunterstützte Diagnose - Unsicherheit bei cler Diagnose - probabilistische Diagnose - erzwungene Klassifikationsmatrix - Klassifikationsmatrix mit Verzichtsmöglichkeit - Ausschlußmatrix - Dreiecksdarstellung