Concurrent validity of the Qmentum pressure ulcer quick scan in measuring nurse’s knowlegde: a clinimetric study

Abstract

ABSTRACT (ENGLISH)

Title: Concurrent validity of the Qmentum pressure ulcer quick scan in measuring nurse’s knowlegde: a clinimetric study Background: Prevalence of pressure ulcers (PU) is used as a quality indicator in healthcare. The Netherlands Institute for Accreditation in Healthcare (NIAZ) is cooperating with the Canadian international accreditation program Qmentum, since 2014. Qmentum is the most renowned accreditation program in all-healthcare settings around the world and is characterized with extensive employee engagement of the healthcare organization. The first step of the accreditation cycle is the Qmentum self-assessment, to assess PU knowledge and provides an overview of the current institutional educational level. Qmentum self-assessment consists four questions. The gold standard to assess nurses PU knowledge is the Pressure Ulcer Knowledge Assessment Tool (PUKAT) and exist of 26 questions. Currently, the Qmentum tool lacks rigours clinimetric testing. Aim: The objective is to determine the concurrent validity of the Qmentum self-assessment compared with the PUKAT as gold standard. Method: 90 ICU nurses filled out the Qmentum self-assessment questionnaire and PUKAT in a single session using the LimeSurvey tool. Chi square test was used to compare the PUKAT and Qmentum. A receiver operating characteristics (ROC) curve analysis and sensitivity and specificity analysis was conducted to assess concurrent validity. Results: Chi Square test showed no statistical significance between the Qmentum self-assessment and PUKAT for the measurement of concurrent validity (p= 0.28). Qmentum has shown poor concurrent validity (AUC= 0.54). The sensitivity was 35.1%, the specificity was 94.3%. Conclusion: Qmentum self-assessment showed poor concurrent validity against the gold standard PUKAT. The exact measurement domain of the Qmentum self-assessment stays unclear. Recommendations: Qmentum self-assessment should not be considered as a quick brief knowledge PU instrument.

NEDERLANDE SAMENVATTING

Titel: Concurrent validiteit van de Qmentum decubitus quickscan in het meten van kennis bij verpleegkundigen: een klinimetrische studie. Achtergrond: Prevalentie van decubitus wordt gebruikt als kwaliteitsindicator in de gezondheidszorg. Het Nederlands Instituut voor Accreditatie in de Gezondheidszorg (NIAZ) werkt sinds 2014 samen met het Canadese internationale accreditatieprogramma Qmentum. Qmentum is het meest gerenommeerde accreditatieprogramma in alle zorginstituten over de wereld en wordt gekenmerkt door uitgebreide medewerkersbetrokkenheid van de zorgorganisatie. De eerste stap van de accreditatiecyclus is de Qmentum-zelfbeoordeling, om kennis over decubitus te beoordelen en geeft een overzicht van het huidige institutionele kennisniveau. Qmentum-zelfbeoordeling bestaat uit vier vragen. De gouden standaard om kennis over decubitus van verpleegkundigen te beoordelen is de Pressure Ulcer Knowledge Assessment Tool (PUKAT) en bestaat uit 26 vragen. Momenteel ontbreekt het de Qmentum-tool aan rigoureuze klinimetrische tests. Doel: Het doel is om concurrent validiteit van de Qmentum-zelfbeoordeling te bepalen in vergelijking met de PUKAT als gouden standaard. Methode: 90 IC-verpleegkundigen vulden de Qmentum-zelfbeoordeling en PUKAT in één sessie in met behulp van de LimeSurvey, een online vragenlijsten tool. Chi-kwadraattest werd gebruikt om de PUKAT en Qmentum te vergelijken. Daarnaast werd een curve analyse van de receiver operating characteristics (ROC) en sensitiviteit- en specificiteitsanalyse uitgevoerd om gelijktijdige validiteit te beoordelen. Resultaten: Chi-kwadraattest toonde geen statistische significantie tussen de Qmentum-zelfbeoordeling en PUKAT voor het meten van de concurrent validiteit (p = 0,28). Qmentum heeft een slechte validiteit (AUC = 0,54). De sensitiviteit was 35,1%, de specificiteit was 94,3%. Conclusie: De Qmentum-zelfbeoordeling toonde een slechte concurrente validiteit tegen de gouden standaard PUKAT. Het exacte meetdomein van de Qmentum-zelfbeoordeling blijft onduidelijk. Aanbevelingen: Qmentum-zelfbeoordeling kan niet worden beschouwd als een snel beknopt decubitus kennisinstrument.