• Post author:
  • Post published:

Czy warto przejmować się wynikami PISA?

Zacznę od paru słów na temat samego badania: jaka jest jego jakość, na ile porównywalne są wyniki między latami i krajami, jak interpretować konkretne wartości i co w zasadzie jest mierzone.

W PISA bada się 15-latków (choć “rocznikowo” są to już 16-latkowie) w trzech dziedzinach: czytanie, matematyka i przyroda. Zadania są jednak tak zaprojektowane, by ocenić, na ile uczniowie potrafią wykorzystać wiedzę w praktycznych, życiowych problemach. To nie jest badanie sprawdzające opanowanie materiału szkolnego (to bada się w TIMSS).

Wyniki podawane są w skali o średniej 500 i odchyleniu standardowym 100. Zostały w ten sposób wystandaryzowane w pierwszych edycjach dla krajów OECD. Na przykład wartość 450 oznacza, że średnie wyniki w danym kraju są o pół odchylenia niższe niż przeciętne wyniki uczniów w krajach OECD w latach 2000-2006 (rok bazowy zależy od dziedziny). Pół odchylenia to dużo: taka jest mniej więcej różnica w Polsce między wynikami dla liceów i techników. Czasem podaje się też taki przelicznik, że przyrost 20 punktów w teście PISA to średnio rok więcej edukacji [1].

W każdym kraju zadania są praktycznie takie same. Wyniki między latami są porównywalne, co osiąga się między innymi w taki sposób, że część zadań powtarza się w kolejnych edycjach (ich treść nie jest dostępna). Przy pomocy takich zadań (tzw. kotwiczących) można dokonać kalibracji wyników. W kolejnych edycjach dokonywano pewnych istotnych zmian, np. test zaczęto przeprowadzać na komputerach, a nie pisemnie, oraz wprowadzono podejście adaptacyjne: im lepiej uczeń odpowiada na pierwsze pytania, tym więcej trudniejszych zadań dostaje (dzięki temu można dokładniej oszacować jego umiejętności). To oczywiście nie jest neutralne dla wyników, natomiast każda taka zmiana jest poprzedzana badaniami pilotażowymi, by w dalszym ciągu zapewnić porównywalność.

Mimo wszystko pewne problemy z porównywalnością pozostają. Po publikacji głównych raportów dane są w dalszym ciągu analizowane, by bardziej zaawansowanymi metodami rozwiązać niektóre z tych problemów (część z nich jest specyficzna dla danego kraju).

Badanie jest tak zaprojektowane, by jak najlepiej oszacować wynik dla kraju i podgrup (np. dziewczęta i chłopcy), ale nie wyniki dla pojedynczych uczniów. W szczególności, jak wspomniałem wyżej, różni uczniowie otrzymują różne zadania. W sumie pula zadań jest tak duża, że jedna osoba nie byłaby w stanie ich rozwiązać – ale “populacja” już tak. A dzięki dużej liczbie zadań można lepiej oszacować umiejętności w danej dziedzinie.

Ogólnie, trudno wskazać na lepiej przeprowadzone badanie, i to nie tylko dotyczące edukacji.

Matematyka 2003-2025

Na poniższym wykresie prezentuję wyniki z matematyki dla wszystkich krajów uczestniczących w PISA w latach 2003-2025 z pominięciem Chin (na podstawie danych z [2] i [3]). Chiny pomijam dlatego, że w PISA uczestniczą jedynie najbardziej rozwinięte jednostki administracyjne z tego państwa (to tak, jakby podać wyniki tylko dla Warszawy, w której są znacznie wyższe niż ogólnie w Polsce). Innymi słowy, wynik dla Chin jest po prostu nieznany.

Na czerwono wynik dla Polski, na czarno średnia dla 23 krajów OECD, które brały udział we wszystkich edycjach badania. Na wykresie widać bardzo dużą rozpiętość wyników: średnie w niektórych krajach są poniżej 350 punktów. Oprócz tego wyniki mogą wydawać się dość stabilne (linie są w przybliżeniu poziome), natomiast nie jest to najlepsze przedstawienie tych danych, gdyż już 20 punktów różnicy z edycji na edycję to dużo (biorąc pod uwagę interpretację, że jest to rok nauki). Dlatego na kolejnym wykresie zaznaczyłem tylko kilka krajów wraz ze średnią dla 23 krajów OECD, które brały udział we wszystkich edycjach, oraz średnią dla Unii Europejskiej. Warto tu dodać, że oś Y na takich wykresach NIE powinna zaczynać się od zera, bo skala PISA jest interwałowa i zero nie ma żadnego sensu.

Zaznaczyłem Finlandię, bo swego czasu była stawiana za wzór, jak powinna wyglądać państwowa edukacja. Obecnie za taki wzorcowy kraj podaje się czasem Estonię.

Spadki w ostatnich edycjach wystąpiły w większości krajów i są duże. Tłumaczy się je zwykle pandemią i cyfryzacją (“smartfony”), a w Polsce dodatkowo reformą szkolnictwa, tzn. odejściem od gimnazjów. We wcześniejszych latach 15-latkowie byli głównie uczniami trzecich klas gimnazjów, a w edycji 2022 pierwszych i drugich klas szkół ponadpodstawowych: liceów, techników i szkół branżowych (plus niewielka część w szkołach muzycznych i podstawowych). Innymi słowy, w 2018 roku wspólne kształcenie ogólne trwało dłużej, a podział uczniów na różne ścieżki kształcenia następował później.

Szkoły ponadpodstawowe

Zobaczmy, jak duże są różnice między typami szkół. Poniżej rozkłady wyników matematyki (ważone estymowane funkcje gęstości; pole pod krzywą w danym przedziale odpowiada udziałowi uczniów danego typu szkoły w tym przedziale).

Różnica w średnich wynikach PISA z matematyki między uczniami liceów i szkół branżowych jest mniej więcej taka, jak między średnią OECD a Rwandą, która ma najniższy średni wynik ze wszystkich badanych krajów.

Interpretując te różnice, pamiętajmy, że w głównej mierze to kwestia selekcji do różnych typów szkół (do liceów chodzą uczniowie, którzy lepiej radzą sobie w szkole podstawowej, a do szkół branżowych ci, którzy mają najniższe wyniki). Choć pewna część różnic może wynikać z nauki w danym typie szkoły, bo większość badanych uczniów uczęszczała już do drugiej klasy szkoły ponadpodstawowej (w przeciwieństwie do poprzedniej edycji PISA, gdy była to głównie pierwsza klasa).

Płeć

Średnia różnica w matematyce między dziewczętami a chłopcami wynosi 13 punktów na korzyść chłopców. Co ciekawe, jeśli policzymy ją osobno dla typów szkół, to różnice są znacznie większe: 40 punktów w technikach, 36 w liceach i 23 w szkołach branżowych na korzyść chłopców.

Jak to możliwe, że te różnice uśredniają się do 13 punktów? Dziewczęta częściej chodzą do liceów, a chłopcy do techników i szkół branżowych (w ostatniej kolumnie są podane odsetki dziewcząt). A jak wynika z poprzedniego wykresu, wyniki uczniów liceów są znacznie lepsze.

Z kolei w czytaniu ze zrozumieniem dziewczęta otrzymały średnio 34 punkty więcej. Poniżej wyniki z rozbiciem na szkoły. Tym razem różnice są mniejsze niż różnica ogólnopolska – również z tego powodu, że w liceach jest więcej dziewcząt.

Średnie wyniki z przyrody są praktycznie takie same, chyba że rozbijemy je ze względu na typ szkoły.

W tabelach podany jest też rozrzut wyników (SD), który jest większy wśród chłopców w każdej dziedzinie. Skupmy się na krańcach rozkładu wyników i policzmy, jaki jest udział dziewcząt i chłopców wśród uczniów z dziesiątego i pierwszego decylu.

Mimo średnio takich samych wyników z przyrody, udział chłopców wśród uczniów z najwyższymi i najniższymi wynikami jest większy.

Status społeczno-ekonomiczny

Jedną z charakterystyk, która najsilniej koreluje z wynikami uczniów, jest status społeczno-ekonomiczny rodziny ucznia (SES). W PISA jest on mierzony za pomocą indeksu statusu ekonomicznego, społecznego i kulturowego (ESCS). W jego skład wchodzą wykształcenie rodziców, ich zawód oraz zasoby dostępne w domu (np. liczba samochodów i książek), każdy z tych trzech aspektów z taką samą wagą.

Na poniższym wykresie zależność między wynikami z czytania i matematyki a ESCS dla wszystkich krajów OECD, które brały udział w obu ostatnich edycjach. Wyznaczono decyle rozkładu ESCS (oś X) i dla każdego z nich obliczono średni wynik PISA. (Wybierając typ wykresu, inspirowałem się tym wpisem).

Po pierwsze, widać silną zależność między ESCS a wynikami. W 2022 roku różnica między pierwszym a ostatnim decylem wyniosła około 120 punktów. W 2025 wyniki w każdym decylu ESCS są niższe, natomiast w ostatnich decylach znacznie niższe. (Wyniki z przyrody w 2025 są trochę lepsze niż w 2022 w decylach od pierwszego do ósmego, natomiast w ostatnim decylu gorsze).

Na poniższym wykresie zaznaczyłem jedynie samą różnicę dla każdego decylu.

W Polsce zależność jest bardziej skomplikowana, natomiast wciąż największe spadki występują w ostatnich decylach ESCS:

W oficjalnym raporcie PISA [4] odnotowuje się ten znaczący spadek wyników w ostatnich decylach i traktuje go jako coś ważnego i zaskakującego (“Taken together, these two findings suggest a new phenomenon wherein a group of students from relatively affluent families, but who struggle academically, are contributing most to the overall decline in mean scores”). Problem w tym, że indeks ESCS nie jest porównywalny między edycjami 2022 i 2025.

Zmiana metody liczenia ESCS

W poprzednich edycjach dbano o to, by ESCS było porównywalne. Innymi słowy, obecność w ostatnim decylu ESCS w 2022 i 2018 oznaczała mniej więcej to samo. Jednak w 2025 sposób liczenia tego indeksu zmienił się na tyle, że nie można go wprost porównywać do 2022. Piszą o tym sami autorzy raportu: “in contrast to what was done in previous cycles, the ESCS computed for PISA 2025 is not treated as a trend scale” (jest to dość zastanawiające, że mimo wszystko analizują tę zmienną tak, jakby była porównywalna).

Najbardziej zmienił się sposób pomiaru zasobów gospodarstwa domowego. W 2025 roku usunięto wiele pytań związanych z książkami, a dodano te, które są powiązane z warunkami życia (zamożnością). Problem w tym, że to obecność książek silniej koreluje z wynikami. W 2025 roku w ostatnim decylu mogli znaleźć się uczniowie z bogatych domów, ale niekoniecznie z bogatym kapitałem kulturowym. Podobnie, do trochę niższych decyli mogli trafić uczniowie z mniej zamożnych domów, za to z większym kapitałem kulturowym.

W artykule [5] pokazano, że jeśli dostosuje się ESCS w 2025 do tego, jak był liczony w 2022 (głównie przez pominięcie niepowtarzających się składowych), spadek w najwyższych decylach jest podobny jak w niższych. Innymi słowy, efekt znacznego spadku wśród uczniów z rodzin o najwyższym statusie społeczno-ekonomicznym znika.

Nie będę powtarzał analizy ze wspomnianej pracy, natomiast możemy łatwo sprawdzić, na ile zmieniły się wyniki PISA, jeśli rozważyć nie syntetyczny indeks ESCS, ale jego składowe. Na poniższych wykresach dwie składowe z trzech: HISEI, który mówi o pozycji społeczno-ekonomicznej zawodów rodziców, oraz zasoby domowe. Ta pierwsza składowa nie uległa zmianie w 2025, a druga tak. Skala na osi Y na obu wykresach jest taka sama.

Jak widać, efekt największych spadków w najwyższych decylach występuje dla wskaźnika, który uległ modyfikacji – co sugeruje, że jest to wynik właśnie tej modyfikacji. Dodajmy od razu, że z tego nie wynika, że ta modyfikacja była niewłaściwa, a jedynie że występuje problem z porównywalnością ESCS między 2022 a 2025 rokiem.

Migranci

Polska wypada nieźle na tle innych europejskich krajów w wynikach w 2025 roku, warto jednak odnotować znaczące różnice między wynikami uczniów “natywnych” i uczniów mających pochodzenie migracyjne. PISA definiuje “native students” jako uczniów, których co najmniej jeden rodzic urodził się w danym kraju. Na poniższym wykresie są oni oznaczeni jako “bez pochodzenia migracyjnego” i wyniki dla nich zaznaczyłem ciągłą linią. Z kolei przerywana linia to oficjalne wyniki dla wszystkich uczniów. Są to wyniki z czytania ze zrozumieniem, ale dla innych dziedzin sytuacja jest podobna.

W Polsce uczniów mających pochodzenie migracyjne jest niewiele i ich pominięcie nie ma dużego wpływu na wyniki (choć w ostatniej edycji większe). Ale np. w Niemczech różnica jest bardzo duża. Jeśli porównujemy jedynie uczniów bez pochodzenia migracyjnego, wyniki polskich uczniów są gorsze niż niemieckich.

(Uwaga, ten wykres nie pokazuje dobrze, jak duża jest różnica między wynikami uczniów z pochodzeniem migracyjnym i bez, bo różnica między przerywaną linią a ciągłą zależy też od tego, jak dużo jest uczniów z pochodzeniem migracyjnym).

Trzeba tu jednak od razu dodać, że w zmiennej identyfikującej, czy dany uczeń ma pochodzenie migracyjne, jest stosunkowo dużo braków danych. W zależności od kraju braki stanowią 5-8% obserwacji, a dla Niemiec 14%. Na powyższym wykresie, licząc wyniki dla “uczniów bez pochodzenia migracyjnego”, ograniczyłem się do tych, których da się zidentyfikować jako “native”. Innymi słowy, odrzuciłem uczniów, którzy mają pochodzenie migracyjne, ale również tych, których pochodzenie nie jest znane – a przez to traktuję ich tak, jakby mieli pochodzenie migracyjne. Dlatego poniżej bardziej “konserwatywna” wersja wykresu, w której wszystkich uczniów z brakami danych traktuję jako “natywnych”.

Porównując teraz wyniki polskich uczniów z niemieckimi, wyniki tych drugich co prawda nie są lepsze (jak na poprzednim wykresie), ale w dalszym ciągu efekt pochodzenia jest duży. Przewaga polskich uczniów znika, jeśli porównamy się z Austrią, Niemcami, Szwajcarią i Szwecją.

Podsumowując, w przypadku drugiego wykresu założyłem, że wszyscy uczniowie, u których nie udało się ustalić pochodzenia, nie mają pochodzenia migracyjnego. Najpewniej część z nich jednak takie pochodzenie ma, więc można przypuszczać, że rzeczywista wielkość efektu pochodzenia znajduje się gdzieś pomiędzy tymi dwoma wykresami.

Przynależność do szkoły

Poza umiejętnościami, w PISA mierzy się wiele innych cech charakteryzujących uczniów, między innymi zadowolenie z życia. Polscy uczniowie deklarują niski poziom zadowolenia w porównaniu do innych krajów. Jak wynika z [2] (raport IBE, str. 136), najsilniej powiązane z zadowoleniem z życia jest poczucie przynależności do szkoły oraz wsparcie rodziny. Przypatrzmy się tym zmiennym, zaczynając od przynależności.

Skala poczucia przynależności powstaje z sześciu stwierdzeń, na które uczniowie odpowiadają, jak bardzo się z nimi zgadzają (“zdecydowanie się zgadzam”, “zgadzam się”, “nie zgadzam się” i “zdecydowanie się nie zgadzam”).

  1. Czuję się obco w szkole.
  2. Łatwo nawiązuję znajomości w szkole.
  3. Czuję, że jestem częścią szkoły.
  4. Czuję się niezręcznie i czuję, że nie pasuję do mojej szkoły.
  5. Wydaje mi się, że inni uczniowie mnie lubią.
  6. Czuję się w szkole osamotniona/osamotniony.

Wynik dla Polski na skali przynależności wynosi -0,18. Oznacza to, że jest niższy o taką część odchylenia standardowego od średniej dla krajów z OECD dla którejś z wcześniejszych edycji (niestety nie mogłem dojść do której konkretnie). Średnia dla OECD w 2025 roku wynosi 0,09. Wartość -0,18 jest jedną z najniższych wśród wszystkich krajów uczestniczących w PISA.

W 2025 roku obserwujemy dość dużą różnicę w przynależności między chłopcami a dziewczętami. Poniżej przedstawiam te różnice dla edycji 2015-2025 wraz z przedziałami ufności. Zostały one policzone na podstawie modelu regresji, w którym kontrolowano: status społeczno-ekonomiczny (ESCS), klasę (czy uczeń powtarzał klasę lub jest w wyższej klasie niż najczęstsza w danej edycji) oraz migrację (uczeń z pochodzeniem migracyjnym lub bez). W modelu regresji uwzględniono wagi próbkowania, a błędy standardowe oszacowano z wykorzystaniem 80 wag replikacyjnych metodą Faya.

Na czerwono zaznaczono różnice dla Polski, na szaro średnie dla krajów OECD, które wzięły udział we wszystkich edycjach 2015-2025. Jak widać, różnice w poczuciu przynależności między chłopcami a dziewczętami w Polsce są coraz większe, natomiast nie jest to sytuacja wyjątkowa — średnio w krajach OECD też tak jest.

Warto jeszcze sprawdzić, czy te różnice w 2025 są podobne w każdym z sześciu stwierdzeń, na podstawie których jest tworzony syntetyczny wskaźnik poczucia przynależności. Z czterech możliwych odpowiedzi, na ile uczeń zgadza się z danym stwierdzeniem, utworzono dwie: zgadzam się lub nie zgadzam. Następnie dopasowałem model regresji logistycznej

Różnice występują w przypadku każdego stwierdzenia. Chłopcy rzadziej zgadzają się ze stwierdzeniami negatywnymi (1, 4 i 6), a częściej zgadzają się z pozytywnymi. Jedynie w przypadku poczucia, że uczeń czuje się częścią szkoły, różnice na korzyść chłopców nie są znaczące. Z dodatkowych analiz (których nie prezentuję) wynika, że w edycjach 2015 i 2018 to dziewczęta istotnie częściej zgadzały się z tym stwierdzeniem, a w 2022 roku różnice między płciami nie były istotne.

Wsparcie rodziny

Przejdźmy do drugiej cechy najsilniej powiązanej z zadowoleniem z życia: deklarowanym przez uczniów wsparciem rodziny. Uczniowie odpowiadają na pięć pytań:

Jak często Twoi rodzice lub ktoś z Twojej rodziny robią z Tobą następujące rzeczy?

  1. Rozmawiają z Tobą o tym, jak radzisz sobie w szkole?
  2. Rozmawiają z Tobą o problemach, jakie możesz mieć w szkole?
  3. Interesują się tym, czego uczysz się w szkole?
  4. Rozmawiają z Tobą o Twojej przyszłej edukacji?
  5. Pytają, co robiłeś(-aś) danego dnia w szkole?

Możliwe odpowiedzi to “nigdy lub prawie nigdy”, “raz lub dwa razy w roku”, “raz lub dwa razy w miesiącu”, “raz lub dwa razy w tygodniu” oraz “codziennie lub prawie codziennie”. Z pięciu pytań powstaje skala wsparcia o średniej 0 i odchyleniu 1. Wartość 0 to średnia OECD z 2022 roku. Uwaga: w 2022 skala składała się z 10 pytań, a nie z pięciu, natomiast zachowano porównywalność tych wskaźników.

Na poniższym wykresie pokazuję zmianę wsparcia rodziny między 2022 a 2025 rokiem. Szare linie to wszystkie kraje biorące udział w PISA, oprócz tego wyraźnie zaznaczyłem wyniki dla Polski i Estonii.

Jedynie w sześciu krajach wsparcie rodziców nie zmalało. Największy wzrost odnotowano w Estonii i w Polsce. (Szara najwyższa linia to Albania, w której wiele tego typu wskaźników osiąga maksymalne wartości).

Spójrzmy jeszcze na pojedyncze pytania na podstawie których powstaje skala wsparcia. Przyporządkowałem poszczególnym odpowiedziom wartości 1-5, gdzie 1 to “nigdy lub prawie nigdy”, a 5 to “codziennie lub prawie codziennie” (oczywiście jest to skala porządkowa, a nie ilościowa, więc trzeba uważać z interpretacją średnich; mimo wszystko nie powinniśmy popełnić błędów, interpretując ogólne trendy).

Wzrost dla Polski występuje w dwóch pierwszych pytaniach. W opinii uczniów ich rodziny częściej rozmawiają z nimi o tym, jak radzą sobie w szkole, oraz o problemach, jakie mogą w niej mieć. Warto też odnotować najwyższą średnią wartość dla Polski w pierwszym pytaniu.

A jeśli spytam uczniów o wsparcie nauczycieli? Z ich deklaracji wynika, że jest ono najniższe ze wszystkich badanych krajów. Poniżej wyniki dla 2022 i 2025 roku, choć trzeba uważać z interpretacją, bo nie są do końca porównywalne: w 2022 pytano o nauczycieli matematyki, w 2025 przyrody. Stąd mówienie o wzrostach lub spadkach raczej nie ma sensu.

Poniżej każde z czterech pytań, z których jest tworzony wskaźnik wsparcia nauczyciela (w 2025 pojawiło się jeszcze jedno pytanie). Odpowiedzi udzielano na czterostopniowej skali: “nigdy lub prawie nigdy”, “na niektórych lekcjach”, “na większości lekcji” i “na każdej lekcji”. Przyporządkowałem im liczby od 1 do 4 (jak w przypadku przynależności, pamiętajmy, że jest to skala porządkowa, a nie ilościowa).

W przypadku pytania, czy nauczyciel oferuje uczniom dodatkową pomoc w nauce, kiedy tego potrzebują, Polska jest wręcz obserwacją odstającą.

Interpretując obie miary wsparcia (rodziny i nauczycieli), pamiętajmy, że mówimy tu o deklaracjach uczniów. Ocena poziomu takiego wsparcia jest w dużej mierze relatywna i uczniowie mogą go odnosić np. do wsparcia, jakie otrzymywali w szkole podstawowej, lub do wsparcia, jakie otrzymują od rodzin. Jeśli porównujemy Polskę z innymi krajami, mogą też występować różnice kulturowe w sposobie odpowiadania. Oprócz tego zauważmy, że wsparcie rodziny nie polega na pomocy w nauce, tzn. pytania dotyczą jedynie zainteresowania rodziny edukacją ucznia.

Źródła

[1] Avvisati, F. and P. Givord (2021), How much do 15-year-olds learn over one year of schooling? An international comparison based on PISA

[2] Raport IBE

[3] Serwis Our World in Data

[4] Raport OECD

[5] Cobreros et al. (2026), Explaining the learning decline in PISA 2025 by socioeconomic quartiles through methodological changes