Facteurs - clés d une amélioration de la qualité à partir de ’ la mesure Rapport d analyse’ Juillet 2009
www.compaqh.fr
SOMMAIREI. Contexte : Facteurs-clés d amélioration de la qualité ... ’ II. Méthodologie ... a) Revue de littérature.b) Adaptation au contexte français..c) Test empirique par études de cas ... d) Méthode de consensus ...
III. Résultats ......... IV. Discussion.....V. Conclusion / Perspectives .. Annexes .......... Annexe N°1 .. Annexe N°2 .. nexe N°3 .. An Bibliographie ................
Le présent rapport traite des résultats relatifs à l’opération de recherche menée sur les facteurs clés d’amélioration de la qualité. Cette opération s’inscrit dans le cadre du projet de recherche COMPAQH (Coordination pour la Mesure de la performance et l’Amélioration de la Qualité) soutenu par le Ministère de la Santé (Direction de l’hospitalisation et de l’organisation des soins, Direction de la recherche, des études, de l’évaluation et des statistiques), la Haute Autorité de Santé et l’INSERM (plus particulièrement, le CERMES (Centre de recherche, Médecine, Sciences et Santé) : unité mixte INSERM / CNRS). Elle a débuté en Octobre 2007.
Les membres de l’équipe COMPAQH ayant travaillé sur ce sujet sont : Marie Gloanec, Frédéric Capuano, Philippe Loirat, et Etienne Minvielle, ainsi que Dima Chaukat dans le cadre d’un stage validant son Master 2 recherche « Santé Publique - Option économie de la santé à Paris XI ». Par ailleurs, 22 experts dont la liste complète est présentée en annexe ont accepté de participer à ce travail de recherche en tant que volontaires, et à titre gratuit. I. Contexte : Facteurs - clés d amélioration de la qualité ’
Depuis 2003, le projet COMPAQH développe des indicateurs, ce qui introduit un nouveau mode d’évaluation de la qualité hospitalière. Sans juger du bien-fondé de cette forme d’évaluation, une question est de comprendre comment la gestion qui s’appuie sur ces indicateurs peut améliorer la qualité ? Comment concevoir cette gestion ? Jusqu’où est-elle spécifique et différente de démarches plus traditionnelles ?C’est dans ce contexte que s’inscrit l’étude sur le « Management de la qualité », menée par le projet COMPAQH depuis octobre 2007, dont l’objectif principal est donc de définir« Comment développer un management de la qualité fondé sur la mesure par indicateur ? ». Cette étude est divisée en trois opérations de recherche qui doivent permettre de développer des règles de management et des outils dont le point commun est d’aider les professionnels à utiliser des indicateurs à des fins d’amélioration de la qualité :
N°1 : Quelles sont les sources d’amélioration de la qualité identifiables à partir des résultats d’un indicateur (Cette étude renvoie au développement d’un outil d’aide au diagnostic : la grille des situations. Le rapport est disponible sur le site internet du projet COMPAQH)?
’ N°2 : Quels sont les facteurs-clés d amélioration de la qualité à partir des mesures ? N°3 : Quelle est l’appropriation des indicateurs par les professionnels ? L’opération de recherche N°2 s’appuie sur la participation d’un panel de 22 établissements volontaires (Cf. Annexe 1) et sur l’utilisation d’une série d’indicateurs en phase de généralisation dans le cadre de la procédure de certification coordonnée par la Haute Autorité deSanté.
22établissements participants (panel COMPAQH et établissements associés) 4 indicateurs relatifs au dossier du patient : -Tenue du Dossier Patient, -Délai d’Envoi du Courrier de fin d’hospitalisation, -Traçabilité de la Douleur, -Dépistage des Troubles Nutritionnels
Indicateur relatif à la conformité du dossier anesthésique
Ce rapport décrit le développement de cette recherche qui vise à identifier les facteurs influençant positivement tout programme d’amélioration de la qualité engagé à partir du résultat d’un indicateur. Il se compose d’une partie méthodologique, puis de la présentation des résultats des facteurs-clés ainsi identifiés. La conclusion évoque les perspectives de la poursuite de cette recherche.
Quels sont les facteurs-clés d une amélioration de la qualité à partir de la mesure ? ’
L’objectif de cette identification de facteurs est d’aider les personnes impliquées dans le management de la qualité d’un établissement en augmentant leur chance de réussir ce qu’il est commun d’appeler un « programme d’amélioration de la qualité ».
Objectifs principaux Îen œuvre des actions et le développement d’uneDéfinir les facteurs-clés qui influencent la mise démarche d’amélioration de la qualité. ÎConcevoir un outil opérationnel d’évaluation à partir de l’identification de ces facteurs-clés
L’étude se fonde dans un premier temps sur une revue de la littérature portant sur le management de la qualité fondé sur les indicateurs. La littérature sur ce sujet est profuse, elle a donc été centrée sur des aspects opérationnels qui interviennent tout au long du cheminement « Evaluation/ Actions d’amélioration ». Le but est l’identification de facteurs agissant sur l'efficacité de l’action. Cette première étape a permis d’obtenir une 1èreliste théorique de facteurs (CF Annexe 3). 1èreliste théorique de facteurs-clés
b) Adaptation au contexte français
Cette littérature étant essentiellement anglo-saxonne, et donc présentant certaines particularités qui ne se retrouvent pas en France, un second temps est consacré à l’adaptation de ce cadre théorique au contexte organisationnel français. On obtient ainsi une seconde liste de facteurs. 2èmeliste théorique de facteurs-clés
c) Test empirique par études de cas Cette 2ndeterrain, par la réalisation d’études de cas auliste de facteurs-clés est ensuite testée sur le sein de 4 établissements participants au projet COMPAQH. Ces 4 établissements ont recueilli 5 indicateurs en cours de généralisation au sein de la HAS : Conformité du Dossier du patient, Délai d’envoi des courriers de fin d’hospitalisation, Traçabilité de l’évaluation de la douleur, Dépistage des troubles nutritionnels, Conformité du dossier anesthésique.
Le choix de ces établissements a été discuté afin d’obtenir l’éventail de cas le plus contrasté possible : 4 établissements très différents en termes de statut, d’activité, de taille, mais aussi de résultats suite à la mesure de ces 5 indicateurs. Cette sélection ciblée ne vise pas à comparer ces établissements entre eux, mais à considérer le plus de situations différenciées, afin de consolider la validité du test du cadrage théorique.
Ainsi, des entretiens semi-directifs ont été réalisés avec différents professionnels tous impliqués dans la mise en œuvre de la démarche qualité de l'établissement, ce qui permet d’obtenir une première « validation » de notre liste, mais aussi de donner un contenu opérationnel à nos facteurs. Les résultats du passage entre le cadre théorique et le terrain se trouvent en annexe (Cf. annexe N°2).
Enfin, l’étape suivante consiste en la confirmation de cette 3èmeliste par la recherche d’un consensus entre experts autour des facteurs, en utilisant une méthode de consensus type «Méthode Delphi» :
Revue de littérature et entretiens qualitatifs ÐDéfinition d’ungroupe d experts(ici 22 correspondants-projet (Cf. Annexe 1)) ’
ÐEnvoi d un 1erquestionnaire : ’ Les experts situent leur opinion sur une échelle numérique ÐAnalyse statistique des réponses du 1ereriannoitseuqÐEnvoi d’un 2èmequestionnaire : Les experts sont informés des résultats du premier tour. Ils fournissent une nouvelle réponse et/ou la justifient si elle est fortement déviante par rapport au groupe. ÐAnalyse statistique des réponses du 2èmequestionnaire (jugements révisés des experts). ÐEnvoi d’un 3èmeerueqainniost Ð’ ’ ’ =Obtention d un consensus (taux d accord du groupe d expert).La 3èmeliste actualisée est donc soumise au panel de 22 experts participant à l’étude, ce qui a permis d’obtenir sa « validation ». En adaptant la méthode afin d’obtenir le consensus, trois envois successifs de questionnairesont donc été effectués. La question principale posée dans ces questionnaires était :
Êtes-vous d’accord sur le rôle de chacune des propositions suivantes dans la réussite d’un management de la qualité fondé sur les indicateurs ? Donnez votre avis en notantde 1 (Pas du tout d accord) à 9 (Tout à fait d accord).’ ’
On considère que le consensus est obtenu autour d’un facteur (le facteur est la proposition) lorsque : ¾ des experts a noté le facteur entre 7 et 9. On considère que c’est un consensus L’ensemble strict. ¾ seulement maximum 3 experts ont donné une note inférieure à 7. A partir de là, on Ou considère que le facteur est tout de même obtenu même si il est moins affirmé. On nomme cela le consensus adapté.
Ce qui signifie « Jesuis d’accord avec le fait que ce facteur joue un rôle dans la réussite d’un management de la qualité » On considère que le consensus n’est pas obtenu autour d’un facteur lorsqu’au minimum 4 experts ont donné une note inférieure à 7. Ce qui signifie « Je ne suis pas d’accord avec le fait que ce facteur joue un rôle dans la réussite d’un management de la qualité » 4èmeliste « validée »
Récapitulatif des étapes de la méthodologie :
Période Jan. 2008 -Juin. 2008 Jan. 2008 -Juin. 2008
Mai. 2008 -Juin. 2008
Septembre 2008 Mars 2009
Etapes But / Démarche RevConstructiond’unmodèlethéoriquedesfacteurs-ue de littérature clés = Liste N°1 Adaptation au contexte français Obtention d’une 2èmeliste théorique de facteurs-clés Test empirique de ce modèle sur le terrain = réalisation d’entretiens qualitatifs dans 4 Obtention d’une 3èmeliste de facteurs-clés établissements (types et statuts divers) Application d’une méthode de recherche de consensus (typeObtentiond’une4èmeliste « validée » de facteurs -DELPHI) auprès d’un panel clés d’expert (professionnels des établissements participants)
Par souci de clarté, la liste des facteurs-clés présentée ci-dessous est celle validée par la méthode de consensus explicitée précédemment, au terme du 3ème envoi de questionnaires. Pour chacun des facteurs, un histogramme représente le nombre d’experts qui a voté et les notes obtenues. Il est également précisé si le consensus obtenu est « strict » (tous les experts) ou « adapté » (maximum 3 experts en désaccord) Chaque facteur est accompagné de sa description. Le contenu opérationnel décrit pour chacun des facteurs est issu de la revue de littérature, mais aussi des entretiens qualitatifs réalisés en début d’étude.
ÖLes résultats comparatifs (bons ou mauvais) sont diffusés en interne (afin de garantir une sensibilisation).ÖDes tableaux de bords, reporting dédiés aux indicateurs existent. ÖLa présentation graphique est rendue accessible au plus grand nombre (simplicité d’expression, vulgarisation). Öcommunication repose sur des démarches complémentaires et adaptées.La ÖLa communication est établie à différents niveaux. Institutionnel : CME ou assimilé (au début de l’ordre du jour si possible), autres commissions. Professionnel : staffs de service ou réunions avec les professionnels impliqués et instances comportant des usagers (Ex : CRUQ). Général, informationnel : lettres, intranet, organisation de journée.
Cote 7 Cote 8 Cote 9 100% (22)
0% (0) 0% (0) 100% (22) Ödes représentants institutionnels aux réunions est effective (introduction auxLa présence réunions sur la qualité : directeur ; président de CME).
ÖIl est possible de mobiliser un financement pour la démarche (ressources dédiées, accès à des appels d’offres). ÖIl existe une garantie de soutien décisionnel (participation d’un représentant institutionnel à l’activité de la structure qualité).
FACTEUR 3 /acteurs institutionnels de l établissement (direction, responsablesLes différents ’ médicaux et paramédicaux) soutiennent ou s impliquent concrètement dans le management de ’ la qualité
’ ’ FACTEUR 6 /L établissement développe un système d information adaptable aux besoins du management de la qualité Nbre d'experts 2109Min= 7 18 17 16Max= 9 15 149Consensus 13Médiane = 12 11strict 10 9 8 7 6 5 4 3 2 1 0 Cote 1 Cote 2 Cote 3 Cote 4 Cote 5 Cote 6 Cote 7 Cote 8 Cote 9 0% (0) 0% (0) 100% (22) ÖIl existe un système d’information prenant en compte des données relatives aux indicateurs. ÖSi il y a une informatisation du système, il est intéressant de mettre en cohérence les parties informatisées et non informatisées.
FACTEUR 7 /Une évaluation des besoins des professionnels et un programme de formation
centré sur l'amélioration continue de la qualité existent
0% (0) 0% (0) 100% (20) ÖDes actions faisables et pertinentes sont réalisées en priorité. ÖLe projet se déroule en respectant le calendrier de départ. ÖUne démarche d’évaluation est mise en œuvre.
Consensus strict
FACTEUR 9 /L'existence d'un marché concurrentiel sur la qualité favorise le développement
des démarches d'amélioration continue de la qualité
Nbre d'experts 1290Min= 7 18 17 16Max= 9 15 14 1123Médiane = 8Consensus 11 9strict 10 8 7 6 5 4 3 2 1 0 Cote 1 Cote 2 Cote 3 Cote 4 Cote 5 Cote 6 Cote 7 Cote 8 Cote 9 0% (0) 0% (0) 100% (20) ÖLa qualité des soins est perçue comme un avantage concurrentiel. FACTEUR 10 /Les incitations externes de type classement favorisent les démarches