Ten artykuł opisuje, jak przejść na stronę Spostrzeżenia dotyczące testów praktycznych, na której znajdują się liczne wskaźniki dotyczące tego, jak uczestnicy korzystają z Twoich testów praktycznych.
- Spostrzeżenia dotyczące testów praktycznych są dostępne dla instruktorów, którzy opublikowali taki test. Dowiedz się, jak utworzyć test praktyczny.
Spis treści
- Jak przejść na stronę Spostrzeżenia dotyczące testów praktycznych
- Funkcje strony Spostrzeżenia dotyczące testów praktycznych
- Ogólne statystyki testu
- Lejek skuteczności
- Historia wersji
- Analizy dotyczące pytań
- Elastyczny selektor zakresu dat
- Błąd niespójności danych
- Jakość pytań
Jak przejść na stronę Spostrzeżenia dotyczące testów praktycznych
Strona Spostrzeżenia dotyczące testów praktycznych jest częścią funkcji Wydajność przeznaczonej dla instruktorów:
1. Otwórz widok Instruktor (Dowiedz się, jak to zrobić).
2. Po lewej stronie wybierz Wydajność.
3. W sekcji Zaangażowanie wybierz Spostrzeżenia dotyczące testów praktycznych.
Funkcje strony Spostrzeżenia dotyczące testów praktycznych
Na stronie Spostrzeżenia dotyczące testów praktycznych możesz przeglądać szereg danych dla dowolnego kursu zawierającego co najmniej jeden test praktyczny. Wybierz menu u góry strony, aby wybrać kurs.
Następnie użyj selektora zakresu dat, aby wybrać gotowe ramy czasowe, lub wskaż własny zakres dat.
Jeżeli masz testy praktyczne objęte subskrypcją treści Udemy Business, to wskaźniki dotyczące osób uczących się w ramach Udemy Business są uwzględnione w danych ze Spostrzeżeń dotyczących testów praktycznych.
1. Aby wyświetlić dane dotyczące wydajności dotyczące tylko uczestników z Udemy Business, wybierz kartę Udemy Business na górze strony.
2. Kliknij przycisk „Edytuj test praktyczny”, aby zaktualizować test praktyczny, bazując na otrzymanych danych (dowiedz się, jak to zrobić).
Ogólne statystyki testu
Sekcja Średnia liczba prób pokazuje średnią liczbę ponownych podejść do testu praktycznego i liczbę uczestników, na których opiera się ten wskaźnik. Jest on obliczany poprzez podzielenie całkowitej liczby prób w danym okresie przez całkowitą liczbę unikalnych uczestników testu.
Sekcja Średni poświęcony czas pokazuje średni czas spędzony przy teście przez uczniów, którzy zdali test oraz liczbę uczniów, którzy go zdali.
Uwaga: dane są przetwarzane i udostępniane do wyświetlania w czasie rzeczywistym.
Lejek skuteczności
W sekcji lejka skuteczności możesz zobaczyć liczbę i odsetek uczestników, którzy rozpoczęli, ukończyli i zaliczyli test.
Dane wyświetlane w lejku skuteczności pokazują dane dotyczące wszystkich prób uczestników z wybranego zakresu dat.
Historia wersji
Sekcja z historią wersji pomaga śledzić wprowadzane zmiany.
- Zapoznaj się z logiem wersji, aby zobaczyć wszystkie opublikowane aktualizacje testów praktycznych wraz z datami, w których każda wersja testu była dostępna dla uczestników.
- Kliknij „filtruj zakres dat”, aby wyświetlić spostrzeżenia dotyczące testów praktycznych z zakresu dat, w którym określona wersja była lub jest obecnie dostępna dla uczestników.
Wskazówka: podawaj konkretne informacje
Kiedy aktualizujesz test praktyczny, dodaj szczegółowe notatki, aby lepiej zrozumieć, jak uczestnicy reagują na różne wersje testu.
Jeżeli odwołujesz się do jednego z pytań, wskaż, czego ono dotyczy. Pytania wyświetlają się uczestnikom w losowej kolejności. Jeżeli napiszesz jedynie „zmiany w pytaniu nr 5”, uczestnicy nie będą wiedzieli, o które chodzi.
Pamiętaj, że słowa, których używasz w tym miejscu, są widoczne także dla uczestników, dlatego im bardziej są konkretne, tym lepiej!
Analizy dotyczące pytań
W sekcji z analizami dotyczącymi pytań możesz uzyskać dokładniejszy wgląd w każde pytanie, pozwalający ustalić, w którym miejscu uczestnicy mają problemy.
- Użyj pola wyszukiwania, aby szybko znajdować pytania poprzez wyszukiwanie słów kluczowych.
- Wybierz pozycję z menu, aby filtrować pytania według odsetka powodzeń.
- Dla każdego pytania możesz zobaczyć średni poświęcony czas, liczbę uczestników i odsetek powodzeń. Wybierz „Pokaż szczegóły”, aby zobaczyć podział według wybieranych przez uczestników odpowiedzi.
- Wybierz „Edytuj pytanie”, aby przejść bezpośrednio do edytora i wprowadzić w teście praktycznym zmiany w oparciu o spostrzeżenia dotyczące tego testu.
Uwaga: dane wyświetlane w analizie pytań odzwierciedlają sposób, w jaki uczestnicy odpowiadali na pytanie po raz pierwszy. W przypadku uczestników, którzy ponownie przystępują do testów, w danych zostanie uwzględniona tylko pierwsza odpowiedź.
Elastyczny selektor zakresu dat
Elastyczny selektor dat umożliwia wyświetlanie spostrzeżeń z samodzielnie wybranego okresu.
Błąd niespójności danych
Przy wyświetlaniu spostrzeżeń z różnych wersji testu połączone dane mogą być niedokładne, jeśli wersje te znacznie się od siebie różnią.
Istotne zmiany w pytaniach, takie jak zmiana opcji odpowiedzi lub poprawnych odpowiedzi, mogą prowadzić do niespójności w analizach pytań. W takich przypadkach wyświetlany będzie komunikat Niespójne dane.
Jeżeli wyświetli się błąd Niespójne dane, należy użyć logu wersji, aby wybrać zakres dat obejmujący jedną wersję testu praktycznego. To podejście pozwala na analizowanie wyników dotyczących każdej wersji pytania osobno i otrzymywanie w rezultacie precyzyjnych danych.
Wskazówka: aby uzyskiwać lepsze spostrzeżenia z długich okresów przy wprowadzaniu istotnych zmian w pytaniach, warto stosować następujące metody:
- Usuwaj i twórz od nowa pytania
- Unikaj istotnego zmieniania treści pytań
- Zachowuj prawidłową odpowiedź w tym samym miejscu (np. niech będzie ona na pozycji 4 w obu wersjach pytania)
Istotne zmiany to między innymi
- Zmiana sensu pytania
- Zmiana liczby odpowiedzi
- Całkowita zmiana jednej z odpowiedzi
Jakość pytań w przypadku pytań wielokrotnego wyboru
Dla najnowszej wersji testu praktycznego obliczamy ocenę jakości pytań wielokrotnego wyboru, do których podeszło co najmniej 50 uczestników.
Ocena jakości pytania opiera się na dwóch kluczowych czynnikach z klasycznej teorii testów:
- Moc różnicująca: moc różnicująca odnosi się do tego, jak dobrze pojedyncze pytanie przyczynia się do naszego zrozumienia wyników uczestnika testu praktycznego. Niska moc różnicująca może wskazywać na pytanie, które jest mylące, niejednoznaczne, ma wiele poprawnych odpowiedzi lub jest nawet niedokładne.
- Trudność: trudność odnosi się do proporcji uczestników, którzy odpowiadają na pytanie poprawnie (im wyższa liczba, tym łatwiejsze pytanie). Pytania, które są bardzo łatwe lub bardzo trudne, mogą sygnalizować problemy z pytaniem.
Podczas wyświetlania najnowszej wersji testu praktycznego obok pytań wielokrotnego wyboru zobaczysz jedną z trzech ocen:
✅ Dobrze
- Pytanie działa tak, jak powinno.
- Dane wskazują, że uczestnicy rozumieją treść pytania.
⚠️ Wymaga uwagi
- Dane wskazują na potencjał do ulepszeń.
- Twoja fachowa ocena pozwoli stwierdzić, czy tak faktycznie jest.
- Przejrzyj spostrzeżenia dotyczące testu praktycznego i zdecyduj, czy chcesz coś ulepszyć.
📊 Za mało danych
- Mniej niż 50 podejść uczestników.
- Ocena czeka na więcej odpowiedzi.