A Validation Study of Administrative Health Care Data to Detect Acute Kidney Injury in the Pediatric Intensive Care Unit

Can J Kidney Health Dis. 2019 Feb 10:6:2054358119827525. doi: 10.1177/2054358119827525. eCollection 2019.

Abstract

Background: Large studies evaluating pediatric acute kidney injury (AKI) epidemiology and outcomes are lacking, partially due to underuse of large administrative health care data.

Objective: To assess the diagnostic accuracy of administrative health care data-defined AKI in children admitted to the pediatric intensive care unit (PICU).

Design: Retrospective cohort study utilizing chart and administrative data.

Setting: Children admitted to the PICU at 2 centers in Montreal, QC.

Patients: Patients between 0 and 18 years old with a provincial health insurance number, without end-stage renal disease and admitted to the PICU between January 1, 2003, and March 31, 2005, were included.

Measurements: The AKI was defined from chart data using the Kidney Disease: Improving Global Outcomes (KDIGO) definition (Chart-AKI). The AKI defined using administrative health data (Admin-AKI) was based on International Classification of Disease, Ninth Revision (ICD-9) AKI codes.

Methods: Data available from retrospective chart review, including baseline and PICU patient characteristics, and serum creatinine (SCr) and urine output (UO) values during PICU admission, were merged with provincial administrative health care data containing diagnostic and procedure codes used for ascertaining Admin-AKI. Sensitivity, specificity, positive, and negative predictive value of Admin-AKI compared with Chart-AKI (reference standard) were calculated. Univariable associations between Admin-AKI and hospital mortality were evaluated.

Results: A total of 2051 patients (55% male, mean age at admission 6.1 ± 5.8 years, 355 cardiac surgery, 1696 noncardiac surgery) were included. The AKI defined by SCr or UO criteria occurred in 52% of cardiac surgery patients and 24% of noncardiac surgery patients. Overall, Admin-AKI detected Chart-AKI with low sensitivity, but high specificity in cardiac and noncardiac surgery patients. Sensitivity increased by 1.5 to 2 fold with each increase in AKI severity stage. Admin-AKI was associated with hospital mortality (13% in Admin-AKI vs 2% in non-AKI, P < .001).

Limitations: These data were generated in a PICU population; future research should study non-PICU populations.

Conclusions: Use of administrative health care data to define AKI in children leads to AKI incidence underestimation. However, for detecting more severe AKI, sensitivity is higher, while maintaining high specificity.

Contexte: On dispose de peu d’études à grande échelle évaluant l’épidémiologie et l’évolution de l’insuffisance rénale aigüe (IRA) chez les enfants, notamment en raison d’une sous-utilisation des données administratives du système de santé.

Objectif: Évaluer la précision diagnostique de l’IRA définie à partir des données administratives en santé chez des enfants admis aux unités de soins intensifs pédiatriques (USIP).

Type d’étude: Une étude de cohorte rétrospective utilisant des données administratives et les données provenant des dossiers médicaux.

Cadre: Les USIP de deux centres hospitaliers de Montréal, au Canada.

Sujets: Ont été inclus les patients âgés de 0 à 18 ans possédant un numéro d’assurance-maladie provincial qui ont été admis aux USIP entre le 1er janvier 2003 et le 31 mars 2005 avec une insuffisance rénale non terminale.

Mesures: L’IRA-Dos a été définie à partir des dossiers médicaux en utilisant les critères du KDIGO (Kidney Disease: Improving Global Outcomes). L’IRA-Admin a été définie à partir des données administratives en santé avec les codes d’IRA de la neuvième révision de la Classification internationale des maladies (CIM-9).

Méthodologie: Les données tirées de l’examen rétrospectif des dossiers médicaux, soit les valeurs de créatinine sérique (SCr) et de diurèse pendant le séjour aux USIP et les caractéristiques des patients, initiales et à l’admission, ont été fusionnées aux données administratives provinciales en santé contenant les codes de diagnostic et de procédure utilisés pour établir l’IRA-Admin. La sensibilité, la spécificité et les valeurs prédictives négative et positive de l’IRA-Admin, en comparaison à l’IRA-Dos (standard de référence), ont été calculées. L’association univariée entre l’IRA-Admin et la mortalité à l’hôpital a également été évaluée.

Résultats: Un total de 2 051 patients ont été inclus (355 ayant subi une cardiochirurgie et 1 696 non opérés). L’âge moyen des sujets à l’admission était de 6,1 ± 5,8 ans et 55 % étaient des garçons. L’IRA définie par les critères de SCr et de diurèse a été diagnostiquée chez 52 % des patients opérés et chez 24 % des patients non opérés. Pour l’ensemble de la cohorte (patients opérés ou non), l’IRA-Admin a détecté l’IRA-Dos avec une faible sensibilité, mais avec une spécificité élevée. La sensibilité s’est accrue de 1,5 à 2 fois pour chaque passage à un stade supérieur de gravité de l’IRA. Enfin, l’IRA-Admin a été associée à un taux plus élevé de mortalité à l’hôpital (13 % des patients IRA-Admin contre 2 % des patients sans IRA, p<0,001).

Limitations: Ces résultats concernent une population de patients hospitalisés aux USIP. Des études futures devraient inclure des populations non admises aux USIP.

Conclusions: L’utilisation des données administratives en santé pour définir l’IRA chez les enfants a mené à une sous-estimation de son incidence. Cependant, la méthode montre une plus grande sensibilité dans la détection des cas plus graves d’IRA, tout en conservant une spécificité élevée.

Keywords: administrative codes; administrative database; critically ill children; diagnostic accuracy; diagnostic codes; negative predictive value; positive predictive value; sensitivity; specificity; validation.