The development, validity and reliability of a screening instrument to determine the perceived self-management support in routine primary care for patients with COPD, asthma and Diabetes Mellitus type 2.

Abstract

English abstract

Title The development, validity and reliability of a screening instrument (SI) to determine the perceived self-management support in routine primary care for patients with chronic obstructive pulmonary diseases (COPD), asthma and Diabetes Mellitus type 2 (DM2). Background Practice nurses (PN) integrate self-management support differently into their consultations of COPD, asthma and DM2 patients. Therefore, the actual perceived self-management support in consultations by PN’s is still unknown. To date, there is no SI to gain insight in the perceived self-management support for these patients. Aim To develop a valid and reliable SI which can be used by PN’s to determine the perceived self-management support in their consultations in primary care for patients with COPD, asthma en DM2. Research questions Which themes and items accurately reflect the construct self-management for an SI to determine the perceived self-management support? And what is the validity and reliability of the SI? Method After the development , the following psychometric properties of this SI were established: face and content validity and inter-rater reliability. The validity is assessed by a research group, focus groups and an expert panel. The reliability is assessed by testing the SI in practice. Results The final SI consists of 10 themes and 15 items. The resulting Content Validity Index was highly acceptable (S-CVI 0.92). The inter-rater reliability was assessed with a Kappa of (K=0.63) for the themes and (K=0.59) for the items. Conclusion The SI can be considered as valid. The reliability assessment showed a moderate inter-rater reliability which suggests that the instrument is insufficient to use as a self-assessment instrument for PN’s, but can properly be used as observation-instrument. Recommendations Further research is needed to test the instrument in a larger population and to increase the generalizability. Future studies also need to be performed on assessing the SI in secondary care.

Dutch Summary/ Nederlandse Samenvatting

Titel De ontwikkeling van een valide en betrouwbaar screeningsinstrument om inzicht te krijgen in de zelfmanagementondersteuning bij patiënten met COPD, astma en Diabetes Mellitus Type 2 (DM2) in de eerstelijnszorg. Inleiding Praktijkverpleegkundigen integreren zelfmanagementondersteuning op verschillende wijze in hun consulten met COPD-, astma- en DM2-patiënten. De exacte zelfmanagementondersteuning die patiënten ontvangen tijdens een consult met de praktijkverpleegkundige is daarom onbekend. Op dit moment is er geen screeningsinstrument die gebruikt kan worden om inzicht te krijgen in de zelfmanagement- ondersteuning door praktijkverpleegkundigen bij deze groep patiënten. Doel Het ontwikkelen van een valide en betrouwbaar screeningsinstrument dat door praktijkverpleegkundigen kan worden gebruikt om inzicht te krijgen in de zelfmanagement- ondersteuning bij patiënten met COPD, astma en DM2 in de eerstelijnszorg. Onderzoeksvragen Welke thema’s en items geven het construct zelfmanagement accuraat weer in een screeningsinstrument om zelfmanagementondersteuning in kaart te brengen? Wat is de validiteit en betrouwbaarheid van het screeningsinstrument? Methode Na de ontwikkeling van het screeningsinstrument zijn de volgende psychometrische eigenschappen van het screeningsinstrument beoordeeld; indruksvaliditeit, inhoudsvaliditeit en interbeoordelaarsbetrouwbaarheid. De validiteit is beoordeeld door een onderzoeksgroep, focusgroepen en een expertpanel. De interbeoordelaarsbetrouwbaarheid is beoordeeld door het screeninginstrument te testen in de praktijk. Resultaten Het definitieve screeningsinstrument bestaat uit 10 thema’s en 15 items. De inhoudsvaliditeit scoorde zeer hoog (S-CVI 0.92). De interbeoordelaarsbetrouwbaarheid werd beoordeeld met een Kappa (K) van (K=0.63) voor de thema’s en (K=0.59) voor de items. Conclusie Het screeningsinstrument is zeer valide. De interbeoordelaarsbetrouwbaarheid suggereert dat het instrument niet geschikt is voor zelfscreening door de praktijkverpleegkundigen, maar zou wel geschikt zijn als observatie-instrument. Aanbevelingen Toekomstig onderzoek is nodig om het screeningsinstrument te testen in een grotere populatie. Daarnaast zal voor het verhogen van de generaliseerbaarheid vervolgonderzoek uitgevoerd moeten worden voor het gebruik van het screeningsinstrument in de tweedelijnszorg.