REGULAMIN OCENY WYNIKÓW SPRAWDZIANÓW POLMICRO

OŚR.ZM.442.1.2015.1.00.ES
Warszawa, 5 luty 2015r.
REGULAMIN OCENY WYNIKÓW SPRAWDZIANÓW POLMICRO
Informujemy, że od roku 2015 ulega zmianie system oceny sprawdzianów POLMICRO.
Forma sprawdzianu pozostanie bez zmian. Zgodnie z planem edycji POLMICRO 2015,
umieszczonym na stronie internetowej www.polmikro.edu.pl, kolejne tury sprawdzianów będą
realizowane w jeden ze wskazanych poniżej sposobów:

sprawdzian laboratoryjny - Laboratoria będą otrzymywały zestawy zawierające szczepy
kontrolne wyizolowane z materiałów klinicznych; wyniki oznaczeń, tak jak dotychczas,
zapisywane będą w ankiecie dostępnej na stronie internetowej Sprawdzianu;

sprawdzian elektroniczny - zadaniem laboratoriów będzie udzielenie odpowiedzi na pytania
testowe zamieszczone na stronie internetowej, dotyczące m.in. interpretacji testów
obrazowych (preparaty mikroskopowe, zdjęcia płytek antybiogramowych, itp.).
Metody badań nie ulegną zmianie i podobnie, jak do tej pory, wyniki badań przedstawiane będą w
następujący sposób:

wyniki pomiarów ilościowych - wyniki liczbowe, przedstawiane w skali przedziałowej lub
ilorazowej (obliczenie wartości średniej i odchylenia standardowego). Badania obejmujące
pomiary ilościowe mogą różnić się pod względem precyzji, poprawności, czułości
analitycznej i specyficzności. Wyniki liczbowe będą analizowane statystycznie.

wyniki badań jakościowych - przedstawiane w skali nominalnej lub porządkowej np.
obecność lub brak danego drobnoustroju, czy też identyfikacja drobnoustroju „ poprawna”
lub „niepoprawna”

w badaniach interpretacyjnych „ocenianym parametrem badania biegłości” jest wynik
badania (np. ocena preparatu mikroskopowego), zbiór danych lub zbiór informacji (np. opis
przypadku, wykrycie obecności mechanizmu oporności) dotyczących umiejętności
uczestnika w dokonywaniu właściwej interpretacji.
Ostateczna ocena tury sprawdzianu uzależniona będzie od:
 liczby szczepów kontrolnych przesłanych w ramach danej tury programu POLMICRO;
 poprawnej identyfikacji szczepów;
 liczby antybiotyków, dla których nie oznaczono bądź nie podano interpretacji lekowrażliwości
(im większa liczba antybiotyków, dla których zostanie podana prawidłowa interpretacja
kategorii wrażliwości, tym większe prawdopodobieństwo oceny pozytywnej);
 prawidłowej interpretacji mechanizmu oporności;
 prawidłowej odpowiedzi na pytania w wersji elektronicznej sprawdzianu;
 wyników uzyskanych przez inne laboratoria (im większa różnica między wynikami
poszczególnych uczestników, tym większe odchylenie standardowe dla oceny biegłości - σ,
co związane jest z niższą precyzją oznaczenia; ma to wpływ na obniżenie wartości
bezwzględnej czynnika „z”, czyli ocena końcowa jest mniej rygorystyczna) [patrz:
poniżej]
ZASADY PRZYZNAWANIA PUNKTÓW
I. Diagnostyka mikrobiologiczna szczepu kontrolnego obejmuje 3 etapy:
 identyfikację (etap A)
 oznaczenie lekowrażliwości (etap B)
 oznaczenie mechanizmu oporności (etap C)
A. Identyfikacja szczepu do poziomu gatunku *
*w wyjątkowych sytuacjach, identyfikacja do poziomu wskazanego przez organizatora
Identyfikacja szczepu do gatunku jest oceniana punktowo:


Identyfikacja poprawna
Identyfikacja niepoprawna
– 5 punktów
– 0 punktów
W przypadku błędnej identyfikacji (etap A) lekowrażliwość i oznaczenie mechanizmu oporności (etap
B+C) nie podlegają ocenie.
1. Punkty cząstkowe przydzielane będą za identyfikację (A), każdy antybiotyk, dla którego oznaczono i
podano interpretację lekowrażliwości (B) oraz za prawidłowe oznaczenie mechanizmu oporności (C).
2. Następnie, wszystkie punkty cząstkowe: identyfikacja (A) i lekowrażliwość (B+C) zostaną
zsumowane.
B. Oznaczenie lekowrażliwości
Ocenie podlegać będzie poprawność interpretacji lekowrażliwości – kategorii wrażliwości. Liczba
przyznawanych punktów zależeć będzie od obecności/nieobecności małych błędów (mE – minor Error),
dużych błędów (ME – Major Error) oraz bardzo dużych błędów (VME - Very Major Error). Zasada
punktacji przedstawiona została w Tabeli 1.
Tabela1. Ocena punktowa wyniku lekowrażliwości (kategorii wrażliwości) w zależności od wyniku referencyjnego
Wynik
Laboratorium
Wrażliwy
Wynik
referencyjny



(S)
Średniowrażliwy
(I)
Oporny
(R)
Wrażliwy (S)
2
1 (mE)
0 (ME)
Średniowrażliwy (I)
1/0* (mE)
2
1/0* (mE)
Oporny (R)
-1 (VME)
1 (mE)
2
S (ang. susceptible)
I (ang. intermediate)
R (ang. resistant)
-
wrażliwy
średniowrażliwy
oporny
*liczba punktów uzależniona od gatunku drobnoustroju i wyniku referencyjnego oznaczenia lekowrażliwości (wynik referencyjny na
granicy breakpoint między kategoriami wrażliwości)
C. Oznaczenie mechanizmu oporności


prawidłowa interpretacja testu wykrywającego mechanizm oporności
–
nieprawidłowa interpretacja testu wykrywającego mechanizm oporności –
5 punktów
0 punktów
II. Wersja elektroniczna (zadania złożone z pytań zamieszczonych na stronie internetowej)
 zadanie rozwiązane prawidłowo
 zadanie rozwiązane nieprawidłowo
– 2 punkty
- 0 punktów
Strona 2 z 3
Zgodnie z międzynarodową normą PN-EN ISO/IEC 17043:2010 „Ocena zgodności.
Ogólne wymagania dotyczące badań biegłości”, za kryterium przyznania oceny
pozytywnej/oceny negatywnej przyjęto wskaźnik „z”:
WSKAŹNIK „z” (z-score)
|z| ≤ 2,0
- wskazuje rezultat działania jako „zadawalający” i nie wywołuje żadnego sygnału
- ocena pozytywna
2,0 < |z| <3,0 - wskazuje rezultat działania jako „wątpliwy” i wywołuje sygnał ostrzegawczy
- ocena pozytywna
|z| ≥ 3,0
- wskazuje rezultat działania „niezadawalający” i wywołuje sygnał działania
- ocena negatywna
„z” jest obliczany zgodnie z Równaniem (R.1):
(R.1)
gdzie:
x
– wynik uzyskany przez uczestnika - suma wszystkich punktów cząstkowych
składających się na ocenę (punkty otrzymane za poprawną identyfikację i oznaczanie
lekowrażliwości dla
wszystkich badanych izolatów –przykłady omówiono poniżej)
X
– wartość przypisana - maksymalna, możliwa do otrzymania liczba punktów w danym
sprawdzianie
σ
– odchylenie standardowe dla oceny biegłości – obliczone z wyników uczestników wg
wzoru (R.2):
(R.2)
gdzie:
xśr
– średnia wyników wszystkich uczestników (laboratoriów) biorących udział w
sprawdzianie
N
– liczba uczestników
Prof. dr hab. med. Waleria Hryniewicz
Dyrektor
Centralnego Ośrodka Badań Jakości
w Diagnostyce Mikrobiologicznej
Strona 3 z 3