Wartości psychometryczne

Psychometria ma prawie stuletnią historię znajdowania sposobów etycznego podejmowania decyzji na podstawie danych uczniów. Znajdziesz Wspólne Standardy NCME/APA dla Testów Edukacyjnych i Psychologicznych tutaj. Zapoznaj się z typami standardów w tym tekście:

• Standardy 1.0-1.25, które opisują rodzaj pomiarów walidacyjnych, które są potrzebne przed użyciem do podejmowania decyzji, oraz ich wpływ na uczniów („ważność”)
• Standard 2.0-2.20, które opisują niezbędną dokładność („niezawodność”)
• Standard 3.0-3.20, które opisują implikacje dotyczące uczciwości i stronniczości
• Standard 4.0-4.25, które opisują wymagania dotyczące przejrzystości, projekt testów i punktację. Przyjrzyj się rozdziałom poświęconym zautomatyzowanym algorytmom (np. 4.19)
• Pomiń rozdziały 5 i 6
• Przejrzyj rozdział 7, który opisuje wymagania dotyczące dokumentacji
• Przeczytaj dogłębnie rozdział 8, który opisuje prawa osób zdających testy.
• Szybko przejrzyj rozdział 9, który opisuje wymagania administratorów testów i użytkowników instytucjonalnych
• Rozdziały 10, 11 i 13 wykraczają poza zakres tego warsztatu, ale są pomocne, ponieważ skupiają się odpowiednio na pomiarach psychologicznych, w miejscu pracy i polityce.
• Rozdział 12 podaje wymagania dotyczące edukacji i podejmowania decyzji edukacyjnych

Jakich równoważnych zasad powinniśmy używać, korzystając z rodzajów pomiarów edukacyjnych, które widzimy w AI-ED, EDM i LAK? Takie decyzje opierają się na złożonych algorytmach, których zrozumienie często wymaga doktoratu z informatyki. Bardziej nowoczesne algorytmy — takie jak rozwinięte systemy głębokiego uczenia — są dla każdego czarną skrzynką.

Opracuj odpowiednie ramy w erze big data, agregacji danych, uczenia maszynowego i, przede wszystkim, modeli czarnych skrzynek.