Validation of the PESI Scale to Predict in-Hospital Mortality in Patients with Pulmonary Thromboembolism Secondary to SARS CoV − 2 Infection

Abstract

Objective: To evaluate the discriminative ability and the calibration of the Pulmonary Embolism Severity Index (PESI) to predict in-hospital mortality in patients with Pulmonary Embolism (PE) secondary to COVID 19 in two hospitals in Bogotá. Methods: External validation study of a prediction model based on a retrospective cohort of patients with PE secondary to COVID-19 treated at Hospital Universitario San Ignacio and Hospital universitario La Samaritana, between March 2020 and August 2021. Calibration of the scale was evaluated using the Hosmer-Lemeshow test and a calibration belt diagram. Discrimination ability was evaluated using a ROC curve. Results: 272 patients were included (median age 61.5 years, male 58.8%). PE was diagnosed in 45.6% of the patients at the time of admission. Of the remaining 54.4%, 95.9% received thromboprophylaxis until the time of diagnosis.17.6% of the patients died. Regarding calibration, the scale systematically underestimates risk in all classes of PESI. For class I, the ratio of observed/expected events was 4.4 vs 0.8%, class II 4.8 vs 1.8%, class III 15.2 vs 4.2%, class IV 14.3 vs 5.9% and class V 46.7 vs 5.8%. The calibration test rejected the adequate calibration hypothesis (p < 0.001). The discriminatory ability was adequate (AUC=0.7128, 95% CI 0.63- 0.79). Conclusions: The PESI scale in patients with PE secondary to COVID 19 underestimates the risk of in-hospital mortality, while maintaining adequate discrimination. It is suggested not to use the PESI scale until it is recalibrated in this context

Objetivo: Evaluar la capacidad discriminativa y la calibración del Índice de Severidad de Embolismo Pulmonar (PESI) para predecir Mortalidad intrahospitalaria en pacientes con Embolismo Pulmonar (EP) secundario a COVID 19 en dos hospitales de Bogotá. Métodos: Estudio de validación externa de un modelo de predicción basado en una cohorte retrospectiva de pacientes con EP secundario a COVID-19 atendido en el Hospital Universitario San Ignacio y el Hospital universitario La Samaritana, entre marzo de 2020 y Agosto de 2021. La calibración de la báscula se evaluó mediante la prueba de Hosmer-Lemeshow y un diagrama de cinturón de calibración. La capacidad de discriminación se evaluó mediante una curva ROC. Resultados: Se incluyeron 272 pacientes (mediana de edad 61,5 años, varones 58,8%). La EP fue diagnosticada en el 45,6% de los pacientes en ese momento de admisión. Del 54,4% restante, el 95,9% recibió tromboprofilaxis hasta el momento del diagnóstico. El 17,6% de los pacientes falleció. En cuanto a la calibración, la escala subestima sistemáticamente el riesgo en todas las clases de PESI. Para la clase I, la relación entre lo observado y lo esperado eventos fue 4,4 vs 0,8%, clase II 4,8 vs 1,8%, clase III 15,2 vs 4,2%, clase IV 14,3 vs 5,9% y clase V 46,7 vs 5,8%. La prueba de calibración rechazó la hipótesis de calibración adecuada (p < 0,001). La capacidad discriminatoria fue adecuada (AUC=0,7128, IC 95% 0,63- 0,79). Conclusiones: La escala PESI en pacientes con EP secundaria a COVID 19 subestima el riesgo de mortalidad hospitalaria, mientras que mantener una discriminación adecuada. Se sugiere no utilizar la escala PESI hasta que sea recalibrada en este contexto.