Safety and accuracy of the computer interpretation of normal ECGs at triage

CJEM. 2024 Dec;26(12):857-864. doi: 10.1007/s43678-024-00790-5. Epub 2024 Nov 15.

Abstract

Background: ECGs performed at ED triage are mandatorily assessed by an emergency physician contributing to task interruptions, decreased quality of care and increased error risk. Recent literature suggests that a triage ECG interpreted as normal by the ECG machine software correlates with benign interpretation from attending cardiologists. Ambiguity persists regarding the safety of the normal computerized ECG interpretation and whether real-time physician review is needed.

Methods: In this prospective cohort study, we evaluated the GE Marquette 12SL ECG software's clinical accuracy for normal triage ECGs. We compared machine interpretation, ED physicians' real-time interpretation and management as well as cardiologists systematic but delayed review of the ECGs to establish diagnostic accuracy and safety of a normal software interpretation. Additional data were collected from the emergency department patient tracking system and charts to determine patient outcomes when machine normal interpretation differed from ED physicians and cardiologists' analysis.

Results: Between November 16th 2020 and November 19th 2021, we collected 1220 machine-normal ECGs performed at Charles-Le Moyne Hospital ED triage. 1051 ECGs were eligible for inclusion. ED physicians agreed with the machine for 1028 normal diagnoses (97.8% IC (0.95): 96.7-98.5) and cardiologists agreed with the machine for 1037 ECGs (98.7% IC (0.95) 97.8-99.2). Relevant changes in ED management were recorded in three patients (0.29% IC (0.95): 0.1-0.8) whose ECGs were read as normal by the software: two emergent referrals to the catheterization lab and one emergent transfer to the resuscitation bay with next day coronarography.

Conclusion: A normal ECG interpretation from the GE Marquette 12SL ECG software at ED triage has a very high accuracy and a very low probability of clinically relevant change in patient outcome and ED trajectory.

RéSUMé: CONTEXTE: Les ECG effectués au triage de l’urgence sont obligatoirement évalués par un urgentologue, ce qui contribue à des interruptions de tâches, à une baisse de la qualité des soins et à un risque d’erreur accru. La littérature récente suggère qu’un ECG du triage interprété comme normal par le logiciel de l’appareil d’ECG correspond à une interprétation bénigne des cardiologues. Il subsiste une ambiguïté quant à la sécurité de l’interprétation normale automatisée des ECG et quant à la nécessité de la validation de tous les ECG en temps réels. MéTHODES: Dans cette étude de cohorte prospective, nous avons évalué la précision clinique du logiciel ECG GE Marquette 12SL pour les ECG du triage qualifiés de normal. Nous avons comparé l’interprétation du logiciel àl’interprétation en temps réel des médecins urgentistes et à l'impact de cette révision sur leurs décisions cliniques ainsi qu'àla révision systématique mais différée des ECG par les cardiologues. Nous avons établi ces comparaisons afin d’établir l’exactitude diagnostique et la sécurité d’une interprétation logicielle normale. Des données supplémentaires ont été recueillies à partir du système de suivi des patients du service d’urgence afin de déterminer l'évolution des patients lorsque l’interprétation normale par la machine différait de eelle des médecins d’urgence et des cardiologues. RéSULTATS: Entre le 16 novembre 2020 et le 19 novembre 2021, nous avons recueilli 1220 ECG interprétés comme normaux par le logiciel d'ECG du triage de l’hôpital Charles-Le Moyne. 1051 ECG étaient admissibles à l’inclusion. Les urgentologues révisant les ECG en temps réel ont été d'accord avec l’appareil pour 1028 diagnostics normaux (97.8 % d’IC (0.95) : 96.7–98.5) et les cardiologues ont été d'accord avec l’appareil pour 1037 ECG (98.7 % d’IC (0.95) : 97.8–99.2). Des changements cliniquement importants dans le traitement ou trajectoire clinique ont été enregistrés chez trois patients (0.29 % d’IC (0.95) : 0.1-0.8) dont les ECG étaient lus normaux par le logiciel : deux références urgentes au laboratoire d'hémodynamie et un transfert urgent à la salle de réanimation accompagné d'une coronarographie le jour suivant. CONCLUSION: Une interprétation normale de l’ECG à partir du logiciel d’ECG GE Marquette 12SL au triage de l'urgence a une très grande précision et est associée à une très faible probabilité de changement cliniquement pertinent dans l'évolution du patient ou de sa trajectoire clinique à l'urgence.

Keywords: Adult; Chest pain; Chest pain/diagnosis; Computers; Electrocardiography; Emergency service; Hospital; Humans; Triage.

MeSH terms

  • Adult
  • Aged
  • Diagnosis, Computer-Assisted / methods
  • Electrocardiography* / methods
  • Emergency Service, Hospital*
  • Female
  • Humans
  • Male
  • Middle Aged
  • Prospective Studies
  • Reproducibility of Results
  • Software
  • Triage* / methods