Introduction
Les programmes de la discipline Sérologie sont structurés de manière à analyser les résultats des enquêtes et à évaluer les performances. Le format du rapport a été mis à jour pour suivre une structure standard utilisée par tous les programmes offerts par le RCPAQAP.
Les informations suivantes fournissent aux participants un guide pour comprendre le système d’analyse de données utilisé pour évaluer les performances des participants.
Performance des participants
Les programmes de tests de compétence sérologique du RCPAQAP offerts aux participants sont conçus pour faciliter les méthodes de surveillance qui détectent et/ou mesurent les niveaux d'anticorps et/ou d'antigènes dans un échantillon à la suite d'une exposition à une bactérie ou à un virus.
Bien que les résultats attendus des échantillons d'enquête (basés sur les tests préalables) soient connus du RCPAQAP Serology, la performance globale des participants est basée sur le consensus de tous les résultats renvoyés pour la composante interprétative (qualitative) du programme. La composante quantitative de l'enquête est également examinée pour évaluer la variation observée selon les méthodes individuelles actuellement utilisées pour détecter les anticorps et/ou les antigènes dans le cadre du programme.
Analyse des résultats
Analyse des résultats qualitatifs
Les résultats attendus pour tous les résultats d'enquête qualitative (par exemple, positifs/négatifs) sont déterminés à partir du consensus de tous les résultats. Les résultats ne sont évalués que lorsque ≥ 80% des participants renvoient la même valeur et à condition qu'il y ait 6 résultats ou plus.
- Si un test réussit ≥80% Consensus/accord à partir de 6 résultats ou plus, celui-ci est alors répertorié comme la valeur attendue. Les participants qui renvoient la valeur attendue sont évalués comme «CONCORDANTS»
- Si un test réussit ≥Consensus 80% à partir de 6 résultats ou plus, les participants du groupe minoritaire sont évalués comme incohérents par rapport au consensus et leurs résultats sont répertoriés comme « DISCORDANTS ».
- Lorsque < 80% ou < 6 laboratoires concordent, l'incertitude des résultats augmente donc aucune évaluation n'est effectuée et tous les résultats sont signalés comme « NON ÉVALUÉS ».
Analyse des résultats quantitatifs
Une analyse quantitative est effectuée sur tous les tests pour lesquels un résultat numérique est fourni (par exemple S/CO). Les résultats sont illustrés dans un nuage de points pour toutes les méthodes. Le nuage de points illustre la valeur médiane et un indicateur de la plage supérieure et inférieure (+/- 3SD). Les participants doivent résoudre les problèmes liés aux résultats qui se situent en dehors de la plage supérieure et inférieure.
Critères d'évaluation des résultats qualitatifs des participants
Les participants doivent examiner tous les résultats non évalués ou discordants en utilisant leur système de qualité interne. Les participants doivent formuler leurs conclusions sur les performances de chaque méthode en se basant sur l'accumulation de données et d'informations fournies dans l'enquête, le commentaire du rapport, les données brutes et d'autres informations dont ils disposent.
Pour aider à résoudre les problèmes liés aux résultats non évalués ou discordants, les éléments suivants doivent être pris en compte :
- Les résultats discordants sont-ils liés au groupe de méthodes (kit) ?
- Vos résultats sont-ils discordants par rapport aux autres dans votre groupe de méthodes ?
- Les résultats discordants sont-ils liés à votre principe analytique ?
- Les résultats discordants sont-ils liés au numéro de lot ?
- Le type d’échantillon a-t-il été validé pour la méthode ?
- Les résultats semblent-ils être liés à la sensibilité/spécificité ?
- S'il s'agissait d'un échantillon en double d'une enquête précédente (comme indiqué dans le commentaire) avec des résultats discordants, vos résultats étaient-ils auparavant concordants ?
Rapports d'enquête
Le format du rapport de sérologie du RCPAQAP suit la structure standard adoptée par d'autres programmes offerts par le RCPAQAP. Ce rapport unique remplace les rapports génériques et d'enquête précédents.
La structure des nouveaux rapports fournit aux participants un résumé des performances, un examen des performances des résultats des participants, un examen détaillé de la méthode avec commentaire et les performances cumulatives.
Un exemple du rapport peut être vu ci-dessous :
1. Résumé des performances
Système de mesure utilisé par votre laboratoire : Répertorie le système de mesure renvoyé lors de la saisie des résultats dans le portail myQAP.
Évaluation des performances : Fournit l'évaluation de vos résultats par rapport au consensus de 80% de tous les participants renvoyant la même valeur qualitative pour le mesurande. Seuls les résultats qualitatifs sont évalués. Les résultats quantitatifs ne sont actuellement pas évalués, bien qu'une analyse statistique soit fournie pour les groupes d'utilisateurs de 6 données quantitatives ou plus.
Résultat du consensus : Le résultat consensus représente le résultat qualitatif renvoyé par la majorité des laboratoires pour un échantillon. Le consensus 80% doit être atteint par plus de 6 laboratoires pour évaluer les performances.
Performance globale : Fournit un commentaire sur la performance globale de cette enquête.
2. Examen des résultats
- Histogrammes de résultats : Inclut tous les résultats qualitatifs renvoyés pour chaque échantillon. Le rapport répertorie les résultats individuels, le résultat du consensus et le pourcentage de consensus obtenu. Il met en évidence le nombre de résultats pour chaque groupe de méthodes.
- Graphique à barres empilées : inclut tous les résultats qualitatifs renvoyés pour chaque échantillon. Ce graphique est inclus dans les programmes à mesurande dense (par exemple, virus d'Epstein-Barr, syphilis et flavivirus). Le graphique met en évidence le nombre de résultats, la valeur de consensus et le résultat obtenu pour chaque mesurande.
- Performances du kit : Fournit une répartition des résultats renvoyés par les participants en fonction des « kits » utilisés pour effectuer les tests assignés. Répertorie le nombre de participants renvoyant un résultat qualitatif ainsi que le consensus de la méthode.
Les résultats quantitatifs sont illustrés dans un nuage de points pour votre groupe de méthodes spécifique (participants utilisant le même kit). L'exclusion des résultats aberrants de votre groupe de méthodes peut entraîner des différences dans le nombre qualitatif et quantitatif de résultats.
Les résultats surlignés en bleu dans le tableau des résultats indiquent la méthode utilisée dans votre laboratoire.
Une ligne rouge au-dessus ou en dessous du nuage de points représente 4 écarts types (4 écarts types) par rapport à la moyenne. Les résultats qui se situent sur ou en dehors de la ligne rouge représentent des résultats égaux ou supérieurs à 4 écarts types.
3. Interprétation
Fournit une répartition de toutes les réponses reçues pour l'interprétation des résultats. Cela fournit le nombre total de participants qui ont renvoyé chaque réponse, ainsi que le pourcentage du total, pour cette réponse. Le pourcentage est basé sur le nombre total de participants et non sur le nombre total de commentaires.
Les points bleus au-dessus de l'histogramme représentent les réponses que vous avez renvoyées. Notez que l'interprétation ne constitue pas une évaluation des performances.
4. Commentaire
Fournit des commentaires basés sur les performances globales de l'enquête. Ceux-ci sont préparés par l'équipe de sérologie après examen de toutes les données des participants. Nous recommandons aux participants d'examiner les données via les fonctionnalités d'analyse et d'exportation de données.
5. Performances cumulées
Fournit l'évaluation des performances de chaque test qualitatif effectué par le laboratoire pour l'année en cours. Le nombre d'enquêtes affichées est déterminé par le calendrier des enquêtes.
6. Scores Z
Le score z est un nombre entier qui représente le nombre d'écarts types entre votre résultat et la moyenne. Il a été inclus à titre indicatif afin que les participants puissent surveiller leurs performances par rapport à leur groupe de pairs pour les résultats quantitatifs renvoyés.
Critères d'évaluation
- Les résultats sont évalués comme concordants, discordants et non évalués
- Quand ≥ 6 résultats atteignent le consensus 80%, l'échantillon sera évalué
- Lorsque < 6 résultats sont reçus ou qu'un consensus < 80% est atteint, l'échantillon sera signalé comme « Non évalué »
- À condition que le résultat du consensus soit ≥ 80% – Un laboratoire obtenant le même résultat que le consensus sera signalé comme – Concordant
- À condition que le résultat du consensus soit ≥ 80% – Un laboratoire qui n’est pas cohérent avec les résultats consensuels – Discordant
- Données quantitatives – ne sont pas évaluées mais une analyse statistique (médiane, écart-type, CV) est fournie lorsque ≥ 6 points de données par groupe d'utilisateurs sont reçus. Les valeurs moyennes et médianes sont fournies lorsqu'il y a plus de trois valeurs quantitatives renvoyées dans le groupe de méthodes.