Od czego zacząć: pomiar poziomu przed kursem

Bez punktu startowego nie ma pomiaru postępu — to najczęstszy błąd firm kupujących kursy językowe. Punktem startowym jest audyt językowy: test pisemny plus rozmowa z lektorem, z wynikiem opisanym w skali CEFR (A1–C2). U większości dostawców z naszego porównania audyt jest bezpłatny lub wliczony w cenę kursu, więc jedyne, czego wymaga, to decyzja HR, by wynik audytu zapisać — per pracownik, z datą — a nie potraktować go wyłącznie jako narzędzie podziału na grupy. Ten sam format testu powtórzony po roku daje porównywalny wynik „przed–po".

Jak szybko realnie rośnie poziom języka?

Najczęstsze rozczarowanie kursami firmowymi bierze się z nierealistycznych oczekiwań, nie ze złych lektorów. Według Cambridge przejście z jednego poziomu CEFR na następny wymaga około 200 godzin nauki kierowanej (zajęcia plus zadania domowe zaprojektowane przez prowadzącego), a im wyższy poziom, tym godzin potrzeba więcej (Cambridge, „How long does it take to learn a language?"; definicja godzin nauki kierowanej: support.cambridgeenglish.org).

Prosty rachunek dla typowego kursu firmowego: dwa spotkania po 60 minut tygodniowo to — po odliczeniu urlopów i świąt — około 90–100 godzin zajęć rocznie. Nawet z sumiennie odrabianymi zadaniami domowymi zespół pokona w rok mniej więcej połowę dystansu między poziomami. Wniosek dla HR: cel „z B1 do B2 w rok" przy jednej lekcji tygodniowo jest z góry nierealny; uczciwy cel roczny przy standardowej intensywności to postęp rzędu połowy poziomu, widoczny w wynikach testu jako wyraźny wzrost punktowy, niekoniecznie zmiana litery.

Jakie wskaźniki śledzić co miesiąc?

Źródłem tych danych powinien być dostawca. Zakres raportowania bardzo się jednak różni — w naszym rankingu 12 dostawców najbardziej rozbudowane narzędzia oferują Preply Business (centralny panel z frekwencją, poziomami CEFR i zaangażowaniem — preply.com) i Fluentbe (raporty postępów co najmniej raz w miesiącu plus dane o frekwencji — fluentbe.com), a część szkół przekazuje informacje wyłącznie w kontakcie bezpośrednim. Zakres i częstotliwość raportów warto zapisać w umowie przed startem kursu, nie dopytywać po fakcie.

Model Kirkpatricka: cztery poziomy oceny szkolenia

Klasyczna rama oceny szkoleń — model Kirkpatricka — wyróżnia cztery poziomy ewaluacji i dobrze porządkuje pomiar kursów językowych:

  1. Reakcja — czy uczestnicy uważają zajęcia za przydatne i dopasowane do pracy. Mierzona krótką ankietą; tania, ale najsłabiej powiązana z realnym efektem.
  2. Uczenie się — czy przybyło umiejętności. W kursach językowych to dokładnie zmiana wyniku testu CEFR „przed–po".
  3. Zachowanie — czy pracownicy używają języka w pracy. Przykładowe mierniki: liczba osób prowadzących samodzielnie telekonferencje po angielsku, obsługa zgłoszeń zagranicznych klientów bez eskalacji, dokumenty pisane bez korekty przełożonego.
  4. Rezultaty — efekty biznesowe: obsadzenie ról wymagających języka wewnętrznymi kandydatami zamiast rekrutacji zewnętrznej, wejście zespołu w projekty międzynarodowe.

Większość firm zatrzymuje się na poziomach 1–2, bo 3 i 4 wymagają danych spoza szkolenia. W przypadku języka poziom 3 jest jednak wyjątkowo uchwytny: wystarczy przed kursem spisać listę czynności, których zespół nie wykonuje po angielsku, a po roku sprawdzić, które z niej zniknęły.

Czym zmierzyć poziom po kursie?

Do wyboru są dwie drogi, które można łączyć. Pierwsza: retest u dostawcy kursu tym samym narzędziem co audyt wstępny — bez dodatkowych kosztów, ale oceniany przez stronę zainteresowaną wynikiem. Druga: test niezależny od dostawcy, np. Cambridge Linguaskill (adaptacyjny test online z wynikiem w skali CEFR i raportami grupowymi, wskazywany przez Cambridge m.in. jako narzędzie oceny efektywności firmowych programów językowych) albo bezpłatny EF SET (50 minut, czytanie i słuchanie, wynik 0–100 mapowany na CEFR). Niezależny retest raz w roku to niewielki koszt wobec budżetu kursu, a ucina dyskusje o obiektywności pomiaru.

Kiedy uznać kurs za nieskuteczny?

Progi warto ustalić z dostawcą przed startem i wpisać do umowy — po roku dyskusja „czy zadziałało" bez wcześniejszych kryteriów kończy się przeciąganiem liny. Sensowna konstrukcja progów:

Jeżeli dostawca nie chce rozmawiać o mierzalnych celach albo nie jest w stanie regularnie raportować frekwencji, to sygnał ostrzegawczy już na etapie zakupu — porównanie zakresu raportowania u 12 dostawców znajdziesz w naszym rankingu, a realne stawki w analizie kosztów szkoleń językowych.

Źródła

  1. Cambridge, „How long does it take to learn a language?" — cambridge.org/elt/blog
  2. Guided learning hours — support.cambridgeenglish.org
  3. The Kirkpatrick Model — kirkpatrickpartners.com
  4. Preply Business — preply.com/en/business-language-training
  5. Fluentbe dla firm — fluentbe.com/pl/angielski-dla-firm
  6. Cambridge Linguaskill — cambridgeenglish.org/exams-and-tests/linguaskill
  7. EF SET — efset.org