Artykuł metodologiczny

Integrowanie konkursów opartych na programie nauczania z dydaktyką zarządzania strategicznego: odtwarzalny protokół ulepszania kursu

90 wyświetleń

DOI:

10.3791/72235

18 sierpnia 2026

W tym artykule

Podsumowanie

Niniejszy protokół wprowadza sekwencję konkurencji opartą na diagnozie-decyzji-obronie do nauczania Zarządzania Strategicznego na poziomie studiów licencjackich poprzez etapowe zadania zespołowe, ustrukturyzowany feedback, szkolenie oceniających, monitorowanie wierności implementacji oraz oddzielną analizę wyników na poziomie studentów i zespołów.

Streszczenie

Nauczanie Zarządzania Strategicznego wymaga od studentów stosowania ram analitycznych w niepewnych sytuacjach biznesowych, ograniczonych zasobami i opartych na kompromisach. Konkursy kursowe mogą wspierać ten proces, jeśli są zorganizowane jako strukturalny system dydaktyczny, a nie jako pojedyncza aktywność prezentacyjna. Niniejszy artykuł opisuje powtarzalny protokół integrowania trzyetapowego konkursu kursowego z programem studiów licencjackich z Zarządzania Strategicznego. Protokół opiera się na 16-tygodniowej sekwencji, która obejmuje ocenę wyjściową, podstawowy proces nauczania, wprowadzenie do przypadku przedsiębiorstwa, formowanie zespołów, diagnozę strategiczną, symulację decyzji strategicznych lub wypełnienie arkusza decyzji, końcową obronę strategii, ocenę po kursie oraz przegląd kursu. Mechanizm dydaktyczny łączy etapową praktykę, analizę przypadku przedsiębiorstwa, strukturalną informację zwrotną, odpowiedzialność zespołową, obronę ustną oraz punktację opartą na rubrykach. Lokalnie zoperacjonalizowane wskaźniki procesu są wykorzystywane do monitorowania interakcji w klasie, kompletności projektu przypadku, terminowości informacji zwrotnej, zgodności zadań z rubrykami, zaangażowania studentów oraz wierności implementacji. Wyniki na poziomie studenta, wyniki konkursowe na poziomie zespołu, zgodność oceniających, wzorce brakujących danych, ujawnienie wykorzystania sztucznej inteligencji oraz wzorce ostrzeżeń o inflacji ocen są analizowane oddzielnie, aby uniknąć problemów z jednostką analizy. Reprezentatywne wyniki, w przypadku ich raportowania, powinny być interpretowane jako specyficzne dla kontekstu efekty implementacji z retrospektywnego, nierandomizowanego porównania dokumentacji edukacyjnej, a nie jako dowód skuteczności przyczynowej. Protokół dostarcza możliwej do audytu procedury projektowania, wdrażania, dokumentowania, oceniania i udoskonalania nauczania Zarządzania Strategicznego zintegrowanego z konkursem w ramach cyklu doskonalenia kursu.

Wprowadzenie

Kierunki zarządzania strategicznego wymagają od studentów wyjścia poza samo przypominanie sobie pojęć. Studenci muszą stosować koncepcje takie jak struktura branży, przewaga konkurencyjna, alokacja zasobów, wybór strategiczny i wdrożenie w warunkach niepełnych informacji oraz konkurujących priorytetów. Pozycjonowanie konkurencyjne wyjaśnia, w jaki sposób firmy wybierają pozycje w ramach ograniczeń zewnętrznych1, podczas gdy ujęcie oparte na zasobach podkreśla specyficzne dla firmy zasoby i kompetencje, które kształtują opcje strategiczne2. Perspektywy te sprawiają, że zarządzanie strategiczne nadaje się do stosowania projektów nauczania praktycznego, w których studenci diagnozują sytuację biznesową, dokonują wyboru strategicznego, argumentują swój wybór i weryfikują tok rozumowania po otrzymaniu informacji zwrotnej. Wykłady i odizolowane dyskusje nad przypadkami pozostają użyteczne, jednak mogą one nie w pełni ukazywać sposób, w jaki studenci radzą sobie z niepewnością, kompromisami i ograniczeniami wdrożeniowymi. Konkurs w ramach kursu może stworzyć bardziej wymagające środowisko uczenia się tylko wtedy, gdy jest on powiązany z celami kursu, sekwencją zadań, kryteriami oceniania i cyklami informacji zwrotnej. Bez tych elementów rywalizacja może nagradzać pewność siebie podczas prezentacji lub podział zadań, a nie rozumowanie strategiczne.

Wcześniejsze prace nad grami biznesowymi i symulacjami wykazały, że działania te wymagają jasnych reguł, cykli decyzyjnych, dowodów oceny oraz podsumowania (debriefingu), aby mogły funkcjonować jako metody edukacyjne, a nie jedynie jako rozrywka w klasie3,4. Aktywne uczenie się zależy również od projektu zadania, a nie od samej aktywności. Studenci mogą sprawiać wrażenie zaangażowanych, podczas gdy w rzeczywistości stosują koncepcje w sposób powierzchowny. Strukturalny konkurs z zarządzania strategicznego powinien zatem wymagać od studentów analizy sytuacji, uzasadnienia decyzji, otrzymania informacji zwrotnej o charakterze formatywnym, skorygowania swojego rozumowania i obrony planu wdrożenia. Ta sekwencja odzwierciedla zasady aktywnego uczenia się, ponieważ studenci tworzą, testują i udoskonalają własne rozumowanie, zamiast ograniczać się do słuchania instrukcji5. Odzwierciedla ona również uczenie się przez doświadczenie, ponieważ cykl konkursowy łączy bezpośredni kontakt z konkretnym przypadkiem, analizę refleksyjną, podejmowanie decyzji i skorygowane działanie6.

Publikowane raporty z symulacji biznesowych i konkursów różnią się znacznie pod względem szczegółowości procedur. Niektóre opisują wykorzystanie symulacji lub konkursu, ale dostarczają ograniczone informacje na temat tworzenia zespołów, etapowania zadań, czasu przekazywania informacji zwrotnych, szkolenia oceniających, konstruowania rubryk, obsługi brakujących danych lub rozdzielania wyników indywidualnych i zespołowych. Poprzednie przeglądy i taksonomie wykazały również, że gry biznesowe nie są jedną, jednorodną metodą instruktażową; różnią się one zasadami, stopniem realizmu, rolami uczestników, strukturą decyzji, wykorzystaniem technologii, projektem oceny oraz procedurami podsumowania7,8. W związku z tym powtarzalny protokół zarządzania strategicznego musi określać nie tylko fakt odbycia się konkursu, ale także sposób, w jaki konkurs został włączony do programu kursu oraz w jaki sposób monitorowano jego realizację.

Niniejszy protokół najlepiej rozumieć jako wieloskładnikowy pakiet ulepszenia kursu zintegrowany z elementem rywalizacji. Oczekiwanego efektu edukacyjnego nie można przypisać wyłącznie rywalizacji, ponieważ protokół obejmuje również analizę studiów przypadków przedsiębiorstw, powtarzalną praktykę, ustrukturyzowaną informację zwrotną, odpowiedzialność zespołową, publiczną obronę, kalibrację oceniających oraz systematyczną rewizję kursu. Element rywalizacji jest użyteczny z punktu widzenia edukacyjnego, ponieważ wprowadza terminy, porównania, odpowiedzialność i konieczność publicznego uzasadnienia, jednak elementy te są celowo łączone z etapowymi zadaniami edukacyjnymi i kontrolą oceny. Procedura ta różni się od konwencjonalnego nauczania Zarządzania Strategicznego opartego na doświadczeniu, symulacjach i rywalizacji w trzech aspektach. Po pierwsze, rywalizacja jest rozłożona etapowo na diagnozę, decyzję i końcową obronę, zamiast być skoncentrowana w jednej prezentacji końcowej. Po drugie, przed interpretacją wyników uczenia się monitorowana jest wierność implementacji. Po trzecie, wyniki uczenia się na poziomie studenta są oddzielone od wyników rywalizacji na poziomie zespołu. Rozróżnienie to jest istotne, ponieważ zespół może osiągnąć dobry wynik podczas końcowej obrony, podczas gdy niektórzy jego członkowie mogą wykazać ograniczone indywidualne postępy w nauce. Uczenie się w zespole wymaga odpowiedzialności, interakcji i wspólnego rozumowania, a nie tylko członkostwa w grupie9. Dlatego protokół wykorzystuje karty zespołów, dzienniki procesów, formularze wkładu rówieśników, szkolenia oceniających, sprawdzanie zgodności ocen oraz zasady ostrzegania przed zawyżaniem ocen.

Protokół został wdrożony jako rutynowa działalność dydaktyczna w ramach studiów licencjackich na kursie Zarządzania Strategicznego w Szkole Biznesu w Zhuhai College of Science and Technology w Chinach. Grupa protokołu była nauczana w sekcji kursu SM-2025-F01 w semestrze jesiennym roku akademickiego 2025–2026. Grupa porównawcza stanowiła grupę historyczną, która była nauczana w sekcji kursu SM-2024-F01 w semestrze jesiennym roku akademickiego 2024–2025. W sekcji kursu protokołu zapisano 96 studentów; 94 studentów wyraziło pisemną lub elektroniczną zgodę na wykorzystanie w badaniach zanonimizowanych zapisów z kursu po uzyskaniu zgody komisji etycznej i przed włączeniem do zbioru danych badawczych, 2 studentów zostało wykluczonych z powodu rezygnacji z kursu przed 8. tygodniem lub braku jakichkolwiek prawidłowych wyników po zakończeniu kursu, a 92 studentów utworzyło końcową analityczną grupę protokołu. W historycznej sekcji porównawczej zapisano 92 studentów; 90 studentów wyraziło zgodę na wykorzystanie w badaniach zanonimizowanych zapisów z kursu po uzyskaniu zgody komisji etycznej i przed retrospektywną ekstrakcją danych, 2 zostało wykluczonych po zastosowaniu tych samych zasad dotyczących brakujących danych i rezygnacji, a 88 studentów utworzyło końcową analityczną grupę porównawczą.

Obie kohorty składały się ze studentów biznesu na trzecim roku studiów licencjackich. Kierunki obejmowały Administrację Biznesu, Marketing, Handel Elektroniczny oraz Biznes Międzynarodowy. Kohorta protokołu obejmowała 51 studentek i 41 studentów, średnia wieku wynosiła 20,4 ± 0,7 lat. Kohorta porównawcza obejmowała 49 studentek i 39 studentów, średnia wieku wynosiła 20,5 ± 0,8 lat. Poprzednie doświadczenie w konkursach zgłosiło 27 studentów w kohorcie protokołu i 24 studentów w kohorcie porównawczej. Odsetek osób, które wycofały się przed końcową analizą, wyniósł 4,2% w kohorcie protokołu i 4,3% w kohorcie porównawczej. Liczba brakujących danych w kohorcie protokołu obejmowała 2 testy wiedzy bazowej, 3 testy wiedzy po kursie, 4 ankiety uczenia się po kursie oraz 4 niepełne rekordy zadań konkursowych. Liczba brakujących danych w kohorcie porównawczej obejmowała 3 testy wiedzy bazowej, 4 testy wiedzy po kursie, 5 ankiet uczenia się po kursie oraz 70 niepełnych rekordów zadań konkursowych, ponieważ historyczny kurs nie obejmował pełnego, trzystopniowego procesu konkursowego.

Grupa porównawcza przeszła konwencjonalne nauczanie zarządzania strategicznego oparte na analizie przypadków, bez pełnej trzyetapowej sekwencji konkursowej. Obie grupy były prowadzone przez tego samego instruktora. Obie grupy objęto porównywalnymi efektami uczenia się, głównymi zagadnieniami z zakresu zarządzania strategicznego, zakresem oceny wiedzy, oceną indywidualnej analizy przypadków oraz strukturą końcowego oceniania kursu. Grupa protokołu otrzymała dodatkowo pakiet przypadków przedsiębiorstw, etapowe zadania konkursowe, ustrukturyzowane cykle informacji zwrotnej, formalne zapisy procesów zespołowych, procedury szkolenia oceniających oraz monitorowanie wierności implementacji. Niniejszy artykuł opisuje protokół jako odtwarzalną metodę doskonalenia kursu, a nie jako dowód na skuteczność przyczynową. Reprezentatywne wyniki przedstawiają rodzaje implementacji, jakość dydaktyczną, wyniki na poziomie studenta i zespołu, niezawodność punktacji, brakujące dane oraz wyniki rozwiązywania problemów wygenerowane przez protokół. Ponieważ porównanie ma charakter historyczny, nieryndomizowany i specyficzny dla danego kontekstu, różnice między grupami należy interpretować jako dowód na ulepszenie kursu w ramach jednego kontekstu implementacji, a nie jako dowód na to, że sama konkurencja w ramach kursu spowodowała zaobserwowane wyniki.

Szerszym celem niniejszego protokołu jest pomoc instruktorom w projektowaniu, dokumentowaniu, ocenianiu i udoskonalaniu nauczania Zarządzania Strategicznego zintegrowanego z elementami rywalizacji. Wspiera on zapewnienie efektów uczenia się poprzez powiązanie działań dydaktycznych, wyników studentów, rubryk oceniania, zapisów z wdrożenia oraz decyzji dotyczących przeglądu kursu10. Odnosi się on również do kwestii poruszanych w badaniach nad grywalizacją i uczeniem się poprzez rywalizację, zgodnie z którymi elementy przypominające gry mogą przynosić niejednoznaczne rezultaty, gdy kładzie się nacisk na motywację bez wystarczającej uwagi poświęconej projektowaniu zadań, jakości informacji zwrotnej i trafności oceny11,12. Oczekiwane wyniki obejmują zapisy z wdrożenia, lokalnie zoperacjonalizowane wskaźniki jakości nauczania, efekty uczenia się na poziomie studenta, wyniki rywalizacji na poziomie zespołu, dowody zgodności oceniających, ujawnienia dotyczące wykorzystania sztucznej inteligencji, dokumentację brakujących danych oraz zapisy z rozwiązywania problemów.

Protokół

Wykorzystanie zanonimizowanych dokumentacji edukacyjnych z obu kohort do celów badawczych zostało zatwierdzone przez Komisję Etyki Badań Pedagogicznych Zhuhai College of Science and Technology w Zhuhai w Chinach (nr zatwierdzenia 20260507001; data zatwierdzenia: 7 maja 2026 r.). Zatwierdzenie obejmowało kohortę protokołu oraz kohortę porównawczą historyczną, w tym rutynową dokumentację kursu, ankiety, obserwacje w klasie, zapisy procesów zespołowych, wyniki konkursów, oceny recenzentów, zapisy z platformy edukacyjnej oraz zanonimizowane zmienne z dziennika ocen. 16-tygodniowy kurs był prowadzony jako rutynowe nauczanie w zakresie Zarządzania Strategicznego przed ekstrakcją danych do celów badawczych; żaden identyfikowalny zbiór danych badawczych nie został wyodrębniony, zakodowany, przeanalizowany ani zaraportowany przed uzyskaniem zgody etycznej. Pisemna lub elektroniczna zgoda na wykorzystanie zanonimizowanej dokumentacji kursu do celów badawczych została uzyskana po zatwierdzeniu etycznym i przed włączeniem danych do zbioru. Udział w kursie był oddzielony od wykorzystania danych w badaniach; studenci, którzy nie wyrazili zgody, ukończyli kurs w normalny sposób, lecz zostali wykluczeni z analizy badawczej. Dokumentacja zgód była przechowywana oddzielnie od dziennika ocen, dostęp do pliku przypisującego kody do tożsamości był ograniczony do menedżera danych, a zbiór danych gotowy do analizy został utworzony dopiero po przesłaniu ocen, weryfikacji zgód, przypisaniu kodów oraz usunięciu bezpośrednich identyfikatorów i identyfikowalnych komentarzy w formie tekstu dowolnego.

1. Ustanowienie protokołu doskonalenia kursu zintegrowanego z rywalizacją.

  1. Zdefiniuj protokół jako 16-tygodniowy proces doskonalenia kursu zintegrowanego z konkursem dla przedmiotu Zarządzanie Strategiczne na poziomie studiów licencjackich. Mechanizmem dydaktycznym jest etapowy cykl diagnoza-decyzja-obrona, łączący analizę strategiczną, podejmowanie decyzji w oparciu o dowody, informację zwrotną, odpowiedzialność zespołową, obronę ustną oraz przegląd kursu.
  2. Zdefiniuj jakość dydaktyczną poprzez interakcje w klasie, kompletność projektu studiów przypadku, terminowość informacji zwrotnej, zgodność zadań z rubrykami oceniania oraz zaangażowanie studentów. Zdefiniuj wierność implementacji poprzez realizację zaplanowanych aktywności, ukończenie sesji poświęconych przedsiębiorstwu lub studiom przypadku, wykonanie zadań, czas odpowiedzi z informacją zwrotną, wypełnienie rubryk oceniania, przeprowadzenie obserwacji oraz ukończenie szkolenia oceniających. Agreguj wskaźniki tylko wtedy, gdy niezawodność i dowody wymiarowe wspierają agregację.
  3. Przed realizacją kursu uzgodnij efekty uczenia się, działania dydaktyczne, zadania konkursowe, rubryki oceniania, punkty informacji zwrotnej oraz miary wyników, aby zachować spójność konstruktywną13.
  4. Przypisz role wykładowcy kursu, koordynatora konkursu, łącznika z przedsiębiorstwem, obserwatora zajęć, koordynatora oceniających oraz zarządcy danych. Role dydaktyczne mogą być łączone w małych programach, jednak zarządca danych powinien w miarę możliwości pozostać oddzielony od końcowego oceniania i przygotowania zbiorów danych badawczych.
  5. Przygotuj folder implementacji kursu z kontrolą wersji, zawierający sylabus, pliki studiów przypadku, podręcznik, szablony zadań, rubryki oceniania, formularze obserwacji, ankiety, ewidencję zespołów, formularze punktacji, dzienniki informacji zwrotnej, formularze ujawniania wykorzystania AI oraz zapisy kontroli wersji. Po uzyskaniu zgody etycznej utwórz folder reprodukowalności badań zawierający zapis zgody, rejestr weryfikacji świadomej zgody, dziennik deidentyfikacji, zanonimizowane zbiory danych, słownik danych, dziennik czyszczenia danych, skrypty analizy, wyniki statystyczne, pliki źródłowe rycin, tabele oraz pliki uzupełniające (Rycina 1 i Tabela Materiałów; szablony operacyjne znajdują się w Pliku Uzupełniającym 1).

Schemat przygotowania protokołu szczegółowo przedstawiający kroki wdrażania kursu, dokumentację edukacyjną i wykorzystanie w badaniach.
Rysunek 1: Schemat blokowy protokołu ulepszania kursu Zarządzania Strategicznego zintegrowanego z konkursem. Schemat przedstawia sekwencję działań od przygotowania kursu, przez 16-tygodniową rutynową realizację zajęć, rutynowe generowanie dokumentacji edukacyjnej, przesyłanie ocen, przygotowanie do zatwierdzonych etycznie badań, weryfikację zgód, deidentyfikację, blokowanie zbioru danych, analizę, raportowanie, rozwiązywanie problemów oraz udoskonalanie kursu. Rysunek oddziela rutynowe działania dydaktyczne od ekstrakcji i analizy danych badawczych po wystawieniu ocen. Aby zobaczyć powiększoną wersję tego rysunku, kliknij tutaj.

2. Rekrutacja kohorty studentów i przygotowanie zbioru danych badawczych.

  1. Uwzględnić studentów formalnie zapisanych do wybranej sekcji przedmiotu Zarządzanie Strategiczne na poziomie studiów licencjackich. Odnotować instytucję, rok akademicki, semestr, sekcję, typ kohorty, kierunek studiów, rok studiów, tygodnie nauczania, godziny kontaktowe, liczbę zapisanych osób, próbę po uzyskaniu zgody, wykluczenia, końcową próbę analityczną, dane demograficzne, wcześniejsze doświadczenie w konkursach, liczbę osób, które zrezygnowały z udziału oraz liczbę brakujących danych.
  2. Zdefiniować kohortę protokołu jako grupę otrzymującą kompletny protokół zintegrowany z konkursem, a kohortę porównawczą jako grupę historyczną otrzymującą konwencjonalne nauczanie Zarządzania Strategicznego oparte na analizie przypadków, bez pełnej trzyetapowej sekwencji konkursowej. Odnotować, czy oba kohorty były prowadzone przez tego samego wykładowcę oraz czy efekty uczenia się, zakres oceny, indywidualne wymagania dotyczące analizy przypadków i struktura oceniania były porównywalne.
  3. Po uzyskaniu zgody komisji etycznej zweryfikować zgody, przypisać nieidentyfikowalne kody studentów i zespołów, usunąć bezpośrednie identyfikatory oraz zastosować zasady włączenia, wykluczenia i obsługi brakujących danych przedstawione w Tabeli 1.
  4. Uwzględnić studentów, którzy wyrazili zgodę i posiadają co najmniej jeden prawidłowy wynik po zakończeniu kursu. Wykluczyć studentów z analizy porównawczej wiedzy, jeśli brakuje któregokolwiek z testów wiedzy, oraz z analizy związanej z konkursem, jeśli brakuje zapisów ze wszystkich trzech zadań. Zachować dostępne rekordy dla innych kwalifikujących się analiz.
  5. Oznaczyć brakujące dane badawcze jako NA. Nie przypisywać wartości zero, chyba że zero odzwierciedla rzeczywisty wynik w kursie zgodnie z zatwierdzonymi zasadami przedmiotu. Stworzyć rekord przepływu uczestników dla każdej kohorty.
ElementDefinicja operacyjnaZasada stosowaniaZmienna zbioru danychImplikacje analizy
Kurs docelowyKierunkowy kurs zarządzania strategicznego na poziomie studiów licencjackich, realizowany w wybranym semestrzeUwzględnij studentów formalnie zapisanych do wybranej sekcji kursusekcja kursuOkreśla kwalifikującą się populację nauczycieli
Kohorta protokołuGrupa otrzymująca pełny protokół ulepszenia kursu zintegrowanego z konkursemKod jako 1typ kohortyKohorta protokołu
Historyczna kohorta porównawczaGrupa historyczna otrzymująca konwencjonalną nauczkę zarządzania strategicznego opartą na analizie przypadków, bez pełnego, trzyetapowego procesu rywalizacjiKoduj jako 0typ kohortyNielosowa historyczna kohorta porównawcza
Oficjalna rekrutacjaStudent figuruje na oficjalnej liście uczestników kursuPrzesiewowo wytypować jako potencjalnie kwalifikowalnychstatus kwalifikowalnościWymagane przed badaniem przesiewowym do celów badawczych
Zgoda na udział w badaniuStudent wyraża pisemną lub elektroniczną zgodę na wykorzystanie zanonimizowanych zapisów z kursu po uzyskaniu zatwierdzenia komisji etycznejW zbiorze danych badawczych należy uwzględnić wyłącznie studentów, którzy wyrazili zgodę na udział w badaniustatus_zgodyStudenci, którzy nie wyrazili zgody, realizują kurs w trybie normalnym, lecz zostają wyłączeni z analizy badawczej.
Udział w kursieRutynowe zajęcia dydaktyczne realizowane niezależnie od zgody na udział w badaniuUmożliwić wszystkim zapisanym studentom uczestnictwo w zajęciach, dołączenie do zespołów, wykonywanie zadań kursu oraz otrzymywanie ocenstatus_uczestnictwa_w_kursieOddziela udział w nauczaniu od udziału w badaniach naukowych
Ważny wynik po zakończeniu kursuDostępny jest co najmniej jeden prawidłowy wynik po zakończeniu kursuUwzględnić w analizach, dla których dostępny jest odpowiedni wynikdostępność wynikuUmożliwia analizę przypadków dostępnych
Wycofanie się z kursu przed połową semestruStudent rezygnuje przed 8. tygodniemWyłączyć z końcowego zbioru danych badawczychstatus wycofaniaZmniejsza błąd wynikający z niepełnej ekspozycji
Brak testu wiedzy wyjściowejBrak testu wiedzy z tygodnia 1Oznaczyć jako NAbrak wiedzy wstępnejWyklucz wyłącznie z analizy wiedzy sparowanej
Brak końcowego testu wiedzy po kursieBrakuje testu sprawdzającego wiedzę z 16. tygodniaOznaczyć jako NAbrak_wiedzy_po_eksperymencieWyklucz tylko z analizy wiedzy sparowanej
Brak obu testów wiedzyBrakuje wyników testów wiedzy zarówno z poziomu bazowego, jak i po zakończeniu kursuWyklucz z analizy wyniku wiedzystatus_pary_wiedzyZachować do innych kwalifikujących się analiz, jeśli dane są dostępne
Brak ankiety pokursowejBrak anonimowej ankiety po kursieOznaczyć jako NAbrak_ankietyZachować w obiektywnych analizach wydajności
Brak jednego lub dwóch rekordów zadań konkursowychBrak jednego lub dwóch rekordów zadań lub zmapowanych projektówOznacz brakujące rekordy jako NA, chyba że zasady kursu przewidują przypisanie zerabrak_wyniku_zadaniaZachowaj dostępne rekordy zadań lub przypisanych projektów
Brak wszystkich trzech zapisów zadań konkursowychBrak dostępnego poprawnego rekordu dla zadania 1, zadania 2 lub zadania 3Wyklucz z analiz związanych z konkurencjązakończenie konkurencjiZachować do analiz niekonkurencyjnych, jeśli dostępne są inne punkty końcowe
Zduplikowany rekordDla tego samego kodu studenta pojawia się więcej niż jeden wierszZachowaj zweryfikowany zapis końcowy po sprawdzeniu pliku źródłowegokontrola_duplikatówRozdzielić przed analizą
Wyciek identyfikatorówImię i nazwisko, numer albumu, numer telefonu, adres e-mail, konto na platformie, identyfikator urządzenia lub identyfikowalny komentarz w formie tekstu wolnego pojawia sięUsuń identyfikator przed analiząsprawdzenie identyfikatoraZestaw danych nie może zostać poddany analizie do czasu usunięcia danych identyfikacyjnych
Końcowa próbka analitycznaLiczba studentów, którzy wyrazili zgodę i których dane są użyteczne po zastosowaniu kryteriów wykluczenia oraz zasad dotyczących brakujących danychNależy podać ostateczną liczbę oraz powody wykluczeniaanaliza_próbkiWymagane do raportowania przepływu uczestników

Tabela 1: Struktura kohorty, kryteria włączenia, kryteria wykluczenia i zasady dotyczące brakujących danych.Tabela ta definiuje kohortę protokołu, kohortę porównawczą historyczną, kryteria kwalifikowalności, zgodę na wykorzystanie w badaniach, kryteria wykluczenia, sposób postępowania z brakującymi danymi oraz konstrukcję próby analitycznej.

3. Wdrożenie 16-tygodniowego cyklu kursu.

  1. Realizuj kurs w ciągu 16 tygodni nauczania, zapewniając 32 godziny kontaktu w sali wykładowej oraz około 24–30 godzin niezależnej pracy zespołowej. Oddzielnie rejestruj godziny instruktażu, czas pracy zespołowej, interakcje nad studium przypadku, informacje zwrotne, próby oraz czas oceny.
  2. W 1. tygodniu przeprowadź odprawę kursową, test wiedzy bazowej oraz ankietę zaangażowania początkowego jako rutynowe czynności kursu. Wyjaśnij proces przebiegu kursu, sekwencję zadań, zasady oceny, zasady ochrony danych oraz późniejsze wykorzystanie zanonimizowanych rekordów do celów badawczych. Przekaż podstawowe instrukcje z zakresu zarządzania strategicznego w tygodniach 2–3 oraz przeprowadź krótkie utrwalanie pojęć w tygodniach 4–15.
  3. W 4. tygodniu przedstaw pakiet studiów przypadku przedsiębiorstwa oraz podręcznik konkursowy, zawierający sekwencję zadań, zasady przesyłania prac, rubryki oceny, harmonogram informacji zwrotnych, obowiązki zespołów, zasady rzetelności akademickiej, ujawnianie wykorzystania AI, procedurę weryfikacji ustnej oraz proces odwoławczy.
  4. Wdróż Zadanie 1 w tygodniach 5–6 i przekaż informacje zwrotne w ciągu 7 dni kalendarzowych w 7. tygodniu. Wymagaj poprawy sformułowania problemu strategicznego przed realizacją Zadania 214. Wdróż Zadanie 2 w tygodniach 8–10, mentoring przedsiębiorstwa lub ustrukturyzowany coaching nad studium przypadku w 11. tygodniu oraz Zadanie 3 w tygodniach 12–15.
  5. W 16. tygodniu przeprowadź końcowy test wiedzy, ankietę pokursową, audyt danych oraz przegląd kursu jako rutynowe czynności kursu. Eksportuj, koduj, anonimizuj i analizuj rekordy do celów badawczych wyłącznie po uzyskaniu zgody komisji etycznej, weryfikacji zgód i przesłaniu ocen (patrz Tabela 2).
    PUNKT PRZERWANIA: Przerwij proces po 4. tygodniu, jeśli przydział zespołów, pliki z przypadkami, podręcznik, rubryki oceny, formularz ujawniania AI, szablony zadań lub formularze rejestracji danych są niekompletne. W przypadku raportowania badawczego wstrzymaj analizę do momentu uzyskania zgody etycznej, weryfikacji zgód, przesłania ocen, anonimizacji i zablokowania zbioru danych.
TydzieńAktywnośćZakres instruktażowyWyniki studenta lub zespołuWymagany zapisKontrola jakości
Tydzień 1Wstęp do kursu i ocena wyjściowaPrzebieg kursu, zasady oceniania, wstępny test wiedzy, wstępna ankieta zaangażowaniaTest wiedzy wyjściowej; ankieta wyjściowaLista obecności; plik z testem bazowym; plik z ankietą bazową; protokół wprowadzenia do kursuPotwierdzenie zakończenia oceny wyjściowej oraz rutynowe oddzielenie dokumentacji kursowej od późniejszego wykorzystania w badaniach
Tydzień 2Podstawy zarządzania strategicznego IAnaliza otoczenia, analiza branży, analiza konkurencjiArkusz ćwiczeń do pracy w klasieLista obecności; arkusz ewidencjiSprawdź kompletność arkusza ćwiczeń
Tydzień 3Podstawy zarządzania strategicznego – instrukcja IIAnaliza zasobów wewnętrznych, wybór strategiczny, planowanie wdrożenia, ocena wynikówKrótka odpowiedź do dyskusji nad studium przypadkuLista obecności; protokół omówienia przypadkuPotwierdzenie kluczowych koncepcji przed uruchomieniem konkursu
Tydzień 4Wprowadzenie do studium przypadku przedsiębiorstwa i omówienie zasad konkursuPakiet spraw, podręcznik, sekwencja zadań, rubryki oceny, oświadczenie o wykorzystaniu AI, zasady współpracy zespołowej, procedura odwoławczaLista zespołu; karta zespołu; oświadczenie o wykorzystaniu sztucznej inteligencjiLista zespołu; karta zespołu; rejestr dostępu do podręcznika; rejestr dostępu do przypadkówPrzerwij pracę, jeśli akta spraw, podręcznik, rubryki, zapisy zespołu, szablony zadań lub formularze dotyczące wykorzystania AI są niekompletne
Tydzień 5Rozpoczęcie zadania 1Struktura raportu z diagnozy strategicznej i wymagania dotyczące dowodówProjekt raportu z diagnozy strategicznejDziennik procesów zespołu; protokół konsultacyjnyPotwierdzenie przydziału ról w zespole
Tydzień 6Przesłanie zadania 1Diagnoza strategiczna, analiza branżowa i wewnętrzna, wykorzystanie dowodówKońcowy raport z zadania 1Rejestr zgłoszeń; plik raportuIdentyfikacja brakujących lub nieprawidłowo sformatowanych zgłoszeń
Tydzień 7Informacja zwrotna do zadania 1Informacja zwrotna na podstawie rubryk i wytyczne do poprawekZrewidowane sformułowanie problemu strategicznegoRejestr informacji zwrotnych; zapis czasu realizacji informacji zwrotnychWstrzymaj, jeśli >15% raportów nie spełnia wymaganej struktury
Tydzień 8Zadanie 2 rozpoczyna sięArkusz decyzyjny, założenia symulacji, zmienne decyzyjneWstępna karta decyzji strategicznychDziennik procesów zespołu; zapis obserwacjiPotwierdzenie zrozumienia zmiennych decyzyjnych
Tydzień 9Doskonalenie decyzji strategicznychPozycjonowanie rynkowe, alokacja zasobów, sekwencja wdrażania, założenia dotyczące ryzykaZrewidowany arkusz decyzyjnyKarta coachingowa; lista kontrolna obserwacjiZweryfikuj uzasadnienie oparte na dowodach
Tydzień 10Przesłanie zadania 2Końcowa logika decyzji strategicznejArkusz decyzji dla zadania końcowego 2Wynik zadania 2; rejestr zgłoszeń; plik z arkuszem decyzjiSprawdź kompletność zgłoszenia
Tydzień 11Coaching przypadków strukturalny lub przedsiębiorstwowyInformacje zwrotne od mentora lub oparte na analizie przypadków w odniesieniu do dylematów strategicznychArkusz refleksji mentora; plan rewizji zespołuDziennik współpracy z przedsiębiorstwem; pytania studentów; arkusz refleksjiPotwierdź obecność i ukończenie refleksji
Tydzień 12Zadanie 3 rozpoczyna sięFormat końcowej obrony, streszczenie menedżerskie, struktura slajdów, pytania&ZasadyWstępny zarys prezentacjiDziennik procesów zespołu; aktualizacja dotycząca ujawnienia użycia AISprawdź zrównoważenie obciążenia pracą za pomocą formularza wkładu współpracowników
Tydzień 13Przygotowanie do obrony końcowejSpójność strategiczna, wykonalność, kontrola ryzyka, wykorzystanie dowodówProjekt prezentacji; podsumowanie menedżerskieDziennik coachingu; lista kontrolna obserwacjiPotwierdzenie powiązań między diagnozą, wyborem a wdrożeniem
Tydzień 14Próba generalna i kalibracja oceniającychPróbna obrona i szkolenie oceniającychPrezentacja próbnaKarta szkolenia oceniających; wstępna weryfikacja rubryki ocenyPotwierdzenie kalibracji punktacji
Tydzień 15Ostateczna obrona strategii8-minutowa prezentacja i 5-minutowa sesja pytań i odpowiedzi&AKońcowy zestaw slajdów; podsumowanie menedżerskie; obrona ustnaWyniki zadania 3; oceny recenzentów; Q&NotatkiObliczanie ICC dla nakładających się ocen subiektywnych
Tydzień 16Ocena po kursie i przegląd kursuTest wiedzy po kursie, ankieta po kursie, recenzja kursu, rutynowy audyt danychTest wiedzy po kursie; ankieta po kursiePlik z testem końcowym; plik z ankietą; arkusz oceny kursuWstrzymać analizę badawczą do czasu przekazania ocen, uzyskania zgody komisji etycznej, weryfikacji zgód, deidentyfikacji oraz zablokowania zbioru danych

Tabela 2: Szesnastotygodniowy harmonogram wdrażania protokołu kursu Zarządzania Strategicznego zintegrowanego z konkursem.Tabela ta podsumowuje cotygodniowe działania w ramach protokołu, koncentrację dydaktyczną, efekty pracy studentów lub zespołów, wymagane dokumentacje oraz punkty kontrolne jakości w trakcie 16-tygodniowego kursu.

4. Przygotuj studia przypadków przedsiębiorstw oraz materiały konkursowe.

  1. Wybierz jeden główny przypadek przedsiębiorstwa oraz dwa opcjonalne przypadki wspierające z publicznych, zanonimizowanych lub zatwierdzonych przez przedsiębiorstwo materiałów dydaktycznych. Przeanalizuj każdy przypadek pod kątem kontekstu branżowego, problemu decyzyjnego kadry zarządzającej, ograniczeń zasobowych, kompromisów strategicznych, wyzwań wdrożeniowych oraz mierzalnych konsekwencji. Stosuj kryterium „kompletności projektu przypadku” zamiast „autentyczności przypadku”, chyba że dostępna jest niezależna walidacja.
  2. Przygotuj zanonimizowany przypadek modelowy, jeśli materiały zatwierdzone przez przedsiębiorstwo są niedostępne. Określ branżę, wielkość firmy, segment klientów, presję konkurencyjną, ograniczenia zasobowe, decyzję strategiczną, ryzyko wdrożenia oraz oczekiwaną konsekwencję. Usuń poufne informacje przedsiębiorstwa, w tym nazwy firm, dokładne dane finansowe, informacje o klientach, informacje o pracownikach, dane zastrzeżone oraz dokumenty strategiczne, chyba że uzyskano pisemną zgodę. Szablon przypadku znajduje się w Pliku uzupełniającym 1.
  3. Przygotuj podręcznik, szablony zadań, formularz wkładu rówieśniczego, dziennik procesu zespołowego, dziennik informacji zwrotnych, formularz ujawnienia wykorzystania AI, formularz zapisu weryfikacji ustnej, rubryki ocen oraz tabelę kontroli wersji. Zezwól na ujawnione wykorzystanie AI do korekty językowej, formatowania, sprawdzania gramatyki, ogólnej burzy mózgów i ulepszania układu slajdów. Zabroń wykorzystania AI w zakresie, który zastępuje opracowaną przez studenta diagnozę, wybór dowodów, uzasadnienie decyzji, analizę ryzyka, planowanie wdrożenia lub obronę ustną.
  4. Opracuj rubryki ocen, które nadają priorytet rozumowaniu strategicznemu nad dopracowaną formą tekstu. Oceniaj wykorzystanie dowodów, rozumowanie w zakresie kompromisów, wykonalność wdrożenia, spójność wewnętrzną oraz obronę ustną oddzielnie od stylu prezentacji. Prześlij podręcznik, szablony, rubryki, materiały do przypadków, zasady korzystania z AI oraz procedurę odwoławczą przed 4. tygodniem.

5. Formuj zespoły studenckie i przydziel role w zespołach.

  1. Stwórz zespoły składające się z 4–6 studentów. Zastosuj grupowanie warstwowe, jeśli dostępne są i są dozwolone przez instytucjonalny regulamin kursu dane dotyczące wyników początkowych, kierunku studiów, płci lub wcześniejszego doświadczenia w konkursach.
  2. Przed Zadaniem 1 przypisz każdemu studentowi jedną główną rolę. Wymagaj od każdego zespołu przedłożenia karty zespołu oraz prowadzenia dziennika procesu, w którym dokumentowane będą: przydział ról, zasady komunikacji, oczekiwania dotyczące wkładu pracy, terminy, odpowiedzialność za korzystanie z AI, obecność, decyzje, przeanalizowane dowody, nierozwiązane problemy oraz kolejne działania.
  3. Zbierz oceny wkładu pracy wystawiane przez członków zespołu w połowie oraz na końcowym etapie, aby zidentyfikować nierównomierny podział pracy. Przeprowadź indywidualne weryfikacje ustne podczas coachingu, prób lub końcowej obrony, prosząc wybranych studentów o wyjaśnienie własnymi słowami diagnozy zespołu, podstawy dowodowej, logiki decyzji, założeń dotyczących ryzyka lub planu wdrożenia.

6. Przeprowadź ocenę wyjściową.

  1. Przeprowadź wstępny test wiedzy z zakresu zarządzania strategicznego w 1. tygodniu, przed wprowadzeniem studium przypadku przedsiębiorstwa i zadań konkursowych, w ramach rutynowej oceny kursu.
  2. Zastosuj test składający się z 24 zadań punktowanych w skali od 0 do 100, obejmujący analizę środowiskową, analizę branży i konkurencji, analizę zasobów wewnętrznych, wybór strategiczny, planowanie wdrożenia oraz ewaluację strategiczną. Matryca testu, zasady opracowywania zadań, formularz recenzji oraz zasady punktowania znajdują się w Supplementary File 1.
  3. Opracuj Formularz A i Formularz B jako wersje równoważne, lecz nieidentyczne, dopasowane pod względem zakresu tematów, formatu zadań, poziomu poznawczego, zakresu punktowego, przewidywanego poziomu trudności oraz zasad punktowania. Zleć dwóm wykładowcom zarządzania strategicznego i jednemu recenzentowi ds. oceny w edukacji biznesowej ocenę relewantności, jasności, poziomu poznawczego oraz zakresu tematów zadań. Przeprowadź pilotaż obu formularzy z grupą 24 studentów spoza próby analitycznej.
  4. Zachowaj zadania o wartościach trudności w przedziale 0,30–0,80 i wartościach dyskryminacyjności powyżej 0,20, jeśli jest to możliwe. Uznaj spójność wewnętrzną za akceptowalną, gdy KR-20 lub alfa Cronbacha wynosi ≥0,70. Uznaj formularze za akceptowalne do zastosowania w parach, gdy średnia różnica w pilotażu wynosi ≤3 punkty, a różnica standaryzowana jest <0,20.
  5. Zastosuj przeciwważenie formularzy, jeśli jest to możliwe. Przypisz połowę studentów do Formularza A na etapie wstępnym i Formularza B po kursie, a drugą połowę do Formularza B na etapie wstępnym i Formularza A po kursie. W przypadku zastosowania jednego stałego schematu, odnotuj to jako ograniczenie badania.
  6. Przeprowadź wstępną ankietę zaangażowania po teście wiedzy. Użyj pytań w skali 5-stopniowej, aby zarejestrować zainteresowanie zarządzaniem strategicznym, postrzeganą relewantność praktyczną, pewność w analizie przypadków, chęć uczestnictwa w zadaniach zespołowych, gotowość do pracy zespołowej oraz wcześniejsze doświadczenie w konkursach. Analizuj koncepcyjnie różne pytania oddzielnie, chyba że rzetelność i dowody wymiarowości wspierają zastosowanie wyniku zbiorczego.
  7. Zarejestruj wstępną frekwencję, ukończenie testu wiedzy, wypełnienie ankiety oraz wersję formularza podczas rutynowej realizacji kursu. Eksportuj dane wstępne do celów badawczych wyłącznie po uzyskaniu zgody komisji etycznej, weryfikacji zgód, przypisaniu kodów i usunięciu bezpośrednich identyfikatorów.

7. Realizacja nauczania Zarządzania Strategicznego w oparciu o studia przypadków przedsiębiorstw.

  1. Realizuj instruktaż oparty na studiach przypadków poprzez krótkie wykłady, moderowane dyskusje, arkusze ćwiczeń zespołowych i krótkie ćwiczenia decyzyjne. Wykorzystuj zadania aktywnego uczenia się, aby przeprowadzić studentów od etapu przyswajania pojęć do analizy, podejmowania decyzji, dyskusji zespołowej i refleksji15.
  2. Zapraszaj menedżerów przedsiębiorstw, przedsiębiorców lub mentorów branżowych, jeśli są dostępni. Przekaż cele kursu, poziom studentów, temat studium przypadku, wymogi dotyczące poufności, koncentrację dyskusji oraz czas zaangażowania co najmniej 7 dni przed sesją. W przypadku braku dostępności mentora wykorzystaj zanonimizowany lub publiczny opis przypadku.
  3. Przedstaw jeden niepoufny problem strategiczny dotyczący niepewności rynkowej, presji konkurencyjnej, dostosowania modelu biznesowego, ograniczeń zasobowych, barier wdrożeniowych lub kontroli ryzyka. Wymagaj od każdego zespołu zidentyfikowania problemu, podstawy dowodowej, alternatyw, ryzyk i rekomendowanej decyzji przy użyciu ustrukturyzowanego arkusza ćwiczeń.
  4. Wymagaj od każdego zespołu przedłożenia refleksji o długości 300–500 słów, łączącej problem studium przypadku z jednym pojęciem z zakresu zarządzania strategicznego i jedną decyzją podjętą w ramach aktywnej konkurencji. Odnotuj w dzienniku współpracy z przedsiębiorstwami wykształcenie mentora, źródło przypadku, obecność, pytania studentów, wypełnienie arkusza ćwiczeń oraz przedłożenie refleksji. Powiąż analizę przypadku, refleksję, podejmowanie decyzji i rewizję w całym cyklu konkursowym poprzez działania z zakresu uczenia się przez doświadczenie16.

8. Wdrożenie trzyetapowego konkursu nauczania.

  1. Przeprowadzić oficjalny instruktaż przed konkursem w 4. tygodniu. Wyjaśnić sekwencję zadań, harmonogram, rubryki oceniania, zasady udzielania informacji zwrotnych, wymagania dotyczące rzetelności akademickiej, zasady ujawniania stosowania AI, procedurę weryfikacji ustnej oraz procedurę odwoławczą.
  2. Zrealizować Zadanie 1 w tygodniach 5–6 w formie raportu z diagnozy strategicznej o objętości 1500–2000 słów, obejmującego analizę branży, analizę konkurencji, analizę zasobów wewnętrznych, diagnozę problemów strategicznych, wykorzystanie dowodów oraz wstępną rekomendację. Przekazać informację zwrotną w ciągu 7 dni kalendarzowych i wykorzystać zrewidowany opis problemu strategicznego jako punkt wyjścia do Zadania 2.
  3. Zrealizować Zadanie 2 w tygodniach 8–10 w formie symulacji decyzji strategicznej lub ustrukturyzowanego arkusza decyzyjnego, obejmującego pozycjonowanie rynkowe, alokację zasobów, logikę cenową lub kosztową, sekwencję wdrożenia, założenia dotyczące ryzyka oraz oczekiwany rezultat.
  4. Zrealizować Zadanie 3 w tygodniach 12–15 w formie końcowej obrony strategii. Wymagać prezentacji składającej się z 8–12 slajdów, streszczenia menedżerskiego o objętości 1000–1500 słów, 8-minutowego wystąpienia oraz 5 minut na pytania. Potwierdzić, że obrona łączy diagnozę z Zadania 1, logikę decyzyjną z Zadania 2, plan wdrożenia, kontrolę ryzyka i oczekiwany rezultat.
  5. Ocenić wszystkie trzy zadania przy użyciu 100-punktowych rubryk, stosując strukturę i wymiary oceniania przedstawione w Tabeli 3.
    PUNKT PRZERWY: Przerwać proces po ocenianiu Zadania 1, jeśli więcej niż 15% prac nie spełnia wymaganej struktury lub gdy oceniający zidentyfikują niejasne deskryptory. Zrewidować instrukcje do zadań lub wytyczne dla oceniających przed rozpoczęciem Zadania 2.
ZadanieTygodnieWymagany wynikTreść głównaWynikWymiary oceny
Zadanie 1: Raport z diagnozy strategicznejTygodnie 5–6raport zespołowy o objętości 1 500–2 000 słówAnaliza branży, analiza konkurencji, analiza zasobów wewnętrznych, diagnoza kwestii strategicznych, wykorzystanie dowodów, wstępna rekomendacja100Analiza przemysłu i rynku, 20
analiza zasobów wewnętrznych, 20
diagnoza problemów strategicznych, 20
wykorzystanie dowodów, 20
logika i przejrzystość tekstu, 20
Zadanie 2: Symulacja decyzji strategicznych lub arkusz decyzyjnyTygodnie 8–10Ustrukturyzowany arkusz decyzji zespołowychPozycjonowanie rynkowe, alokacja zasobów, logika cenowa lub kosztowa, sekwencja wdrożenia, założenia dotyczące ryzyka, oczekiwany rezultat100Spójność strategiczna, 25
logika rynkowa, 20
wykonalność operacyjna, 20
analiza ryzyka, 20
uzasadnienie decyzji, 15
Zadanie 3: Końcowa obrona strategiiTygodnie 12–15prezentacja z 8–12 slajdami, streszczenie menedżerskie o objętości 1000–1500 słów, 8-minutowa prezentacja, 5-minutowa sesja pytań i odpowiedzi&ADiagnoza strategiczna, wybór strategiczny, plan wdrożenia, kontrola ryzyka, przewidywane wyniki100Diagnostyka strategiczna, 20
wybór strategiczny, 25
wykonalność wdrożenia, 20
innowacja, 15
wykorzystanie dowodów, 10
obrona ustna, 10

Tabela 3: Struktura i wymiary punktacji trzyetapowego konkursu dydaktycznego. Tabela ta definiuje trzy zadania konkursowe, tygodnie realizacji, wymagane rezultaty, główne wymagania dotyczące treści, maksymalną liczbę punktów oraz wymiary punktacji.

9. Standaryzacja punktacji i szkolenie osób oceniających.

  1. W miarę dostępności personelu należy zaangażować co najmniej dwóch oceniających do oceny subiektywnej; w przypadku braku drugiego oceniającego należy udokumentować ocenę dokonaną przez jedną osobę.
  2. Przeszkolić oceniających, wykorzystując rubryki, deskryptory, materiały kalibracyjne, zestawienie typowych błędów w ocenianiu, zasady ujawniania użycia AI oraz kryteria weryfikacji ustnej. Oceniający niezależnie oceniają dwa materiały kalibracyjne i omawiają różnice w punktacji przekraczające 10 punktów.
  3. Po szkoleniu należy zamrozić rubrykę i stosować tę samą wersję przez cały cykl wdrażania. Obliczyć współczynnik ICC, gdy dwoje lub więcej oceniających ocenia ten sam materiał. Przyjąć ICC ≥ 0.75 jako wartość akceptowalną i uzgodnić oceny w przypadku, gdy ICC <0.75 lub różnice w punktacji przekraczają 10 punktów. Zachować wyniki surowe, wyniki uzgodnione oraz notatki z procesu uzgadniania.
  4. Stosować ocenianie w oparciu o rubryki w celu doprecyzowania oczekiwań i wsparcia oceny kształtującej17. Postępować zgodnie z procedurą szkolenia oceniających, uzgadniania ocen i reconcyliacji opisaną w Tabeli uzupełniającej S1.

10. Zbierz dane dotyczące jakości instruktażu i wierności implementacji.

  1. Jakość dydaktyczną należy mierzyć poprzez interakcje w klasie, kompletność projektu studium przypadku, terminowość informacji zwrotnej, zgodność zadań z rubrykami oceny oraz zaangażowanie studentów. Wskaźniki należy analizować oddzielnie, chyba że dowody dotyczące niezawodności i wymiarowości wspierają ich agregację.
  2. Należy używać terminu „kompletność projektu studium przypadku” zamiast „autentyczność studium przypadku”, chyba że dostępna jest niezależna walidacja autentyczności.
  3. Wierność implementacji należy mierzyć poprzez realizację zaplanowanych działań, ukończenie sesji przedsiębiorstwa lub studium przypadku, przesyłanie zadań, czas udzielenia informacji zwrotnej, wypełnienie rubryk oceny, przeprowadzenie obserwacji oraz ukończenie szkolenia oceniających.
  4. Progi przedstawione w Tabeli 4 należy traktować jako zdefiniowane operacyjnie reguły kontroli jakości, a nie jako zewnętrznie zwalidowane wartości odcięcia. Progi te zostały ustalone przed analizą badawczą w oparciu o wykazalność pilotażu, konsensus zespołu dydaktycznego oraz ograniczenia związane z obciążeniem pracą.
  5. Należy stosować wskaźniki, źródła danych, progi, reguły ostrzegawcze i działania korygujące zawarte w Tabeli 4. Dodatkowe procedury rozwiązywania problemów znajdują się w Uzupełniającej Tabeli S2.
  6. Implementację uznaje się za odpowiednią, gdy zrealizowano ≥85% zaplanowanych tygodniowych działań, ≥85% studentów z kohorty protokołu ukończyło wszystkie trzy zadania, ≥80% informacji zwrotnych przekazano w ciągu 7 dni kalendarzowych, wszystkie główne rubryki zostały wypełnione, a wymagane obserwacje są dostępne. Implementację uznaje się za nieoptymalną, gdy ukończenie zadań wynosi <75%, czas udzielenia informacji zwrotnej przekracza 14 dni kalendarzowych dla >20% przesłanych prac, ICC wynosi <0.75 lub brakuje >25% zaplanowanych obserwacji.
KategoriaWskaźnikŹródło danychPunkt czasowySkalaSygnał dodatni lub prógZasada ostrzegawczaDziałanie korygujące
Wierność implementacjiPlanowane ukończenie działańDziennik wdrażania kursuTygodnie 1–16% ukończonozrealizowano ≥85% zaplanowanych działań Przejrzyj pominięte sesje i zaktualizuj kontrolę harmonogramu
Wierność implementacjiSesja przypadków strukturalnych lub korporacyjnychRejestr zaangażowania przedsiębiorstwTydzień 11Zaimplementowano / nie zaimplementowanoZaplanowana sesja zrealizowana lub zastąpiona ustrukturyzowanym coachingiem przypadkówZaplanowana sesja pominięta bez zastąpieniaNależy wykorzystać zanonimizowaną sesję przypadku lub ustrukturyzowany coaching przypadku
Wierność implementacjiUzupełnianie sekwencji trzech zadańRejestry zgłoszeńTydzień 6, 10, 15% studentów≥85% studentów z kohorty protokołu wykonuje wszystkie trzy zadania<75% wykonanych wszystkich zadańUprość instrukcje i dodaj punkty kontrolne postępów
Wierność implementacjiTerminowość informacji zwrotnejDziennik informacji zwrotnychTygodnie 7, 10, 15Dni kalendarzowe≥80% otrzymanych odpowiedzi w ciągu 7 dni>20% odpowiedzi zwrotnych otrzymano po 14 dniachSkrócenie formularza opinii i rozdzielenie obciążenia punktacją
Wierność implementacjiZakończenie obserwacjiFormularze obserwacyjneTygodnie 1–16% planowanych obserwacjizrealizowano ≥75% zaplanowanych obserwacji>brak 25% zaplanowanych obserwacjiDodaj wsparcie obserwatora oraz stały harmonogram obserwacji
Ocena jakościZgodność oceniającychWyniki oceniającychPodzbiór zadania 1 i obrona zadania 3ICC (immunocytochemia)ICC ≥0,75ICC <0.75Ponowne przeszkolenie oceniających, doprecyzowanie deskryptorów, uzgodnienie zmienionych wyników
Jakość instruktażowaInterakcja w klasieLista kontrolna obserwacjiWybrane sesjewynik w skali 1–5Średnia ≥3,50 lub wzrost ≥0,30Średnia <3.50Wzmocnienie impulsów do dyskusji i moderacji
Jakość dydaktycznaKompletność projektu badaniaLista kontrolna przypadkuPrzed 4. tygodniemwynik 0–5 lub 1–5Średnia ≥4,00Średnia <3.50Zrewiduj kontekst przypadku, problem decyzyjny, ograniczenia i konsekwencje
Jakość dydaktycznaZgodność zadań z kryteriami ocenyLista kontrolna dopasowaniaPrzed 4. tygodniem i po zakończeniu kursuwynik 0–5 lub 1–5Średnia ≥4,00Średnia <3.50Korekta spójności między zadaniem, wynikami, rubryką oceniania a informacją zwrotną
Jakość instruktażowaZaangażowanie studentówObecność, uczestnictwo, dzienniki, pytania ankietoweTygodnie 1–16Wynik na poziomie pozycji lub w skali 1–5Wzrost o ≥0,30 punktuZmniejszenie >0,30 pktZredukowanie przeciążenia, doprecyzowanie oczekiwań, zwiększenie wsparcia kształtującego
Efekt uczenia sięWiedza z zakresu zarządzania strategicznegoTesty wyjściowe i końcoweTygodnie 1 i 160–100Średni wzrost ≥5 punktówZwiększenie <3 punktyPrzegląd zakresu nauczania, zgodności zadań i równoważności testów
Efekt uczenia sięAnaliza pojedynczych przypadkówKryteria oceny analizy przypadkuKoniec semestru0–100Protokół – przewaga kohorty ≥3 punktyBrak korzyści lub spadekDodaj ćwiczenia z analizy przypadków oraz przykłady z adnotacjami
Wynik zespołuWyniki zespołów w rywalizacjiKryteria oceny konkursowejTygodnie 6, 10, 150–100Progresywna poprawa w poszczególnych zadaniachWysoki wynik końcowy przy słabych dowodach wcześniejszychSprawdzić inflację ocen i zrebalansować rubrykę w kierunku rozumowania
Percepcja studentówSatysfakcjaAnkieta po kursieTydzień 16wynik w skali 1–5Średnia ≥4,00Średnia <3.50Ocena obciążenia pracą, jasności zadań, jakości informacji zwrotnych oraz koordynacji zespołu
Postrzeganie studentówZnaczenie praktyczneAnkieta po kursieTydzień 16wynik w skali 1–5Średnia ≥4,00Średnia <3.50Zwiększenie specyfiki przypadków oraz powiązań z rzeczywistymi decyzjami strategicznymi
Bezpieczeństwo obciążenia roboczegoPresja konkurencyjnaAnkieta pokursowaTydzień 16wynik 1–5 lub %Wysokie ciśnienie ≤20% studentówWysokie ciśnienie >20% studentówZredukuj nakładanie się zadań i dostosuj odstępy między terminami
Ostrzeżenie dotyczące interpretacjiEfekt sufituTest i ankieta wyjścioweTydzień 10–100 lub 1–5Wiedza wyjściowa ≤85 i satysfakcja ≤4,50Wiedza >85 lub satysfakcja >4.50Należy ostrożnie interpretować niewielką poprawę
Ostrzeżenie dotyczące interpretacjiInflacja ocenWyniki zespołowe i indywidualneKoniec semestruRozpoznawanie wzorcówPrzyrosty zespołowe połączone z dowodami uczenia się indywidualnegoWyniki zespołowe ulegają poprawie, lecz proces uczenia się poszczególnych osób nie wykazuje wzrostuZwiększenie indywidualnej odpowiedzialności i oceniania opartego na rozumowaniu
Proces zespołowyBilans wkładu recenzenckiegoFormularz wkładu recenzenckiegoEtap środkowy i końcowywynik w skali 1–5Brak powtarzającej się znacznej nierównowagiJeden lub więcej członków otrzymywało powtarzalnie bardzo niskie ocenyWymagana ponowna alokacja ról i konsultacja z instruktorem
Rzetelność naukowaPrzejrzystość w wykorzystaniu AIUjawnienie wykorzystania AI i weryfikacja ustnaKażde główne zadanieUjawnione / nieujawnioneWykorzystanie AI ujawnione zgodnie z zasadami instytucjonalnymiNieujawnione lub niewłaściwe wykorzystanie sztucznej inteligencjiZastosować instytucjonalną procedurę rzetelności akademickiej i wyjaśnić zasady dotyczące AI

Tabela 4: Wskaźniki wierności implementacji, jakości instruktażu, interpretacji wyników oraz rozwiązywania problemów.Tabela ta określa wskaźniki wierności implementacji, wskaźniki jakości instruktażu, wskaźniki wyników na poziomie studenta i zespołu, wskaźniki jakości punktacji, progi interpretacyjne, reguły ostrzegawcze oraz działania korygujące.

11. Zbierz dane dotyczące wyników po zakończeniu kursu.

  1. Przeprowadzić końcowy test wiedzy z zakresu Zarządzania Strategicznego w 16. tygodniu, wykorzystując równoważny formularz końcowy zamiast identycznego formularza bazowego.
  2. Zebrać wyniki indywidualnej analizy przypadku z końca semestru, korzystając z rubryki oceny obejmującej identyfikację problemu, wykorzystanie dowodów, logikę strategiczną, wykonalność oraz przejrzystość pisemną. Wynik ten należy raportować jako wskaźnik efektów po kursie, chyba że przeprowadzono rzeczywistą bazową ocenę analizy przypadku.
  3. Zebrać wyniki zespołowe z Zadań 1–3 i utrzymać je oddzielnie od efektów uczenia się na poziomie indywidualnym.
  4. Zebrać dane dotyczące satysfakcji, postrzeganej relewancji praktycznej, użyteczności informacji zwrotnej, współpracy zespołowej, presji konkurencyjnej, obciążenia pracą oraz postrzeganej poprawy za pomocą anonimowej ankiety po kursie. Nie łączyć elementów w jeden wynik, chyba że dowody dotyczące rzetelności i wymiarowości wspierają stworzenie wskaźnika złożonego.
  5. Zebrać końcowe oceny z kursu dopiero po ich oficjalnym zatwierdzeniu. Eksportować rekordy po kursie do celów badawczych wyłącznie po uzyskaniu zgody komisji etycznej, weryfikacji zgód uczestników, przypisaniu kodów oraz usunięciu bezpośrednich identyfikatorów i możliwych do zidentyfikowania komentarzy.
    PUNKT PRZERWANIA: Wstrzymać analizę badawczą do momentu zatwierdzenia ocen końcowych, uzyskania zgody komisji etycznej, zakończenia weryfikacji zgód, oddzielenia listy zgód od zbioru danych badawczych oraz potwierdzenia depersonalizacji danych.

12. Oczyść i połącz zanonimizowany zestaw danych.

  1. Po uzyskaniu zgody komisji etycznej i weryfikacji zgód uczestników należy utworzyć zanonimizowane zbiory danych na poziomie studenta, zespołu oraz sesji zajęciowej. Należy sprawdzić rekordy pod kątem duplikatów, wartości niemożliwych, brakujących kodów, niespójnych kodów zespołów oraz bezpośrednich identyfikatorów.
  2. Połącz dane na poziomie studentów i zespołów, korzystając wyłącznie z kodu zespołu. Oczyść i zakoduj wszystkie zbiory danych, stosując szablon w Plik uzupełniający 1 or słownik zmiennych w Tabela uzupełniająca S3.
  3. Wartości brakujące należy oznaczyć jako NA. Nie należy uzupełniać brakujących wyników, chyba że zasady kursu definiują ocenę wyrównawczą lub przyznanie zera za konkretne wymaganie. Z analizy parowej wiedzy należy wykluczyć wyłącznie studentów, którym brakuje testu wiedzy, a z analiz związanych z konkursem należy wykluczyć studentów, którym brakuje wszystkich trzech zadań konkursowych. Pozostałe dostępne rekordy należy zachować do innych kwalifikujących się analiz.
  4. Zapisz oczyszczony zbiór danych, słownik danych, dziennik oczyszczania, plik gotowy do analizy oraz zablokowany plik wynikowy. Modyfikuj zablokowane dane wyłącznie z zastosowaniem datowanego dziennika korekt.

13. Przeanalizuj wierność implementacji, jakość instruktażu oraz efekty uczenia się.

  1. Przed interpretacją wyników uczenia się należy przeanalizować wierność implementacji. Różnice w wynikach należy interpretować z ostrożnością, jeśli progi wierności nie zostały osiągnięte.
  2. Należy przedstawić statystyki opisowe dla zmiennych ciągłych oraz częstości dla zmiennych kategorycznych, w tym typ kohorty, główną grupę, wcześniejsze doświadczenie w konkursach, ukończenie zadania, kategorię brakujących danych oraz poziom nagrody w kohorcie protokolnej. Poziom nagrody należy podać wyłącznie dla kohorty protokolnej, chyba że kohorta porównawcza korzystała z tego samego systemu nagród.
  3. Charakterystykę wyjściową należy porównać za pomocą testów t dla prób niezależnych, testów chi-kwadrat lub dokładnych testów Fishera, w zależności od potrzeb, aby opisać porównywalność wyjściową, a nie równoważność przyczynową.
  4. Zmianę wiedzy wewnątrz kohorty należy porównać za pomocą testów t dla prób zależnych lub testów znaków Wilcoxona. Wyniki po kursie między kohortami należy porównać za pomocą testów t dla prób niezależnych, testów U Manna-Whitneya, ANCOVA lub modeli regresji skorygowanych o różnice wyjściowe. Wszystkie porównania kohort należy interpretować jako analizy zapisów edukacyjnych specyficzne dla danego kontekstu, a nie jako oszacowania przyczynowe.
  5. W przypadku analizy wielu punktów czasowych należy stosować modele z powtarzanymi pomiarami lub modele efektów mieszanych. Należy uwzględnić losowe efekty na poziomie studenta dla powtarzanych pomiarów oraz losowe efekty na poziomie zespołu lub błędy standardowe odporne na klastrowanie, gdy studenci są zagnieżdżeni w zespołach.
  6. Wyniki na poziomie zespołu należy analizować oddzielnie od wyników na poziomie studenta. Wyników zespołowych nie należy traktować jako niezależnych obserwacji indywidualnych, chyba że uwzględniono klastrowanie.
  7. Dla głównych różnic średnich należy podać współczynnik d Cohena, interpretując wartości 0,20, 0,50 i 0,80 odpowiednio jako małe, umiarkowane i duże. W miarę możliwości należy podać 95% przedziały ufności i porównać wyniki dla pełnych przypadków (complete-case) z wynikami dla przypadków dostępnych (available-case) w analizach wrażliwości.
  8. Należy zapisać skrypt statystyczny, wyniki z oprogramowania, pliki źródłowe rycin oraz końcowe tabele. Wszystkie tabele należy przesłać jako oddzielne pliki edytowalne, a dane źródłowe rycin należy zarchiwizować.

14. Interpretacja prawidłowej i nieoptymalnej implementacji.

  1. Zdefiniuj sukces wdrożenia przed interpretacją końcowych wyników. Protokół uznaje się za pomyślnie wdrożony, jeśli spełnione zostaną podstawowe progi wierności przedstawione w Tabeli 4.
  2. Interpretuj efekty uczenia się dopiero po sprawdzeniu wierności, rzetelności punktacji, wzorców brakujących danych, porównywalności poziomu wyjściowego oraz jednostki analizy.
  3. Przy odpowiedniej wierności, za pozytywny sygnał wdrożenia uznaje się wzrost wiedzy po kursie o ≥5 punktów, przewagę w indywidualnej analizie przypadku pod koniec semestru o ≥3 punkty lub wzrost wskaźnika procesu instruktażowego o ≥0.30 w skali 5-punktowej.
  4. Przed analizą określ wzorce ostrzegawcze: efekt sufitu, gdy wiedza wyjściowa przekracza 85/100 lub satysfakcja wyjściowa przekracza 4.50/5; inflację punktową, gdy wyniki zespołowe poprawiają się bez dowodów na indywidualne uczenie się; nadmierną presję konkurencyjną, gdy satysfakcja spada o >0.30 punktu lub >20% studentów zgłasza wysoką presję obciążenia pracą.
  5. Interpretuj ewaluację jako proces warstwowy — od wierności wdrożenia, przez reakcje studentów i dowody uczenia się, aż po udoskonalenie kursu, a nie jako pojedynczą ocenę18. Unikaj sformułowań przyczynowych, ponieważ projekt wykorzystuje rutynowe kohorty edukacyjne, historyczną grupę porównawczą oraz retrospektywne, zanonimizowane rekordy kursu, a nie przydział randomizowany.

15. Przeprowadź rozwiązywanie problemów, adaptację i iterację kursu.

  1. Oceniaj wierność po każdym głównym zadaniu i identyfikuj opóźnienia w przekazywaniu informacji zwrotnych, niski poziom uczestnictwa zespołu, niejasne instrukcje, niekompletne formularze punktacji, brak obserwacji, niedostateczną kompletność projektu przypadku, rozbieżności między oceniającymi lub niewłaściwe wykorzystanie AI.
  2. Wprowadź działania korygujące w Tabela uzupełniająca S2w tym rewizję instrukcji, dodatkowy coaching, ponowne przeszkolenie oceniających, realokację ról, dostosowanie obciążenia pracą lub instytucjonalny przegląd rzetelności akademickiej.
  3. W przypadku krótszych terminów należy połączyć zadania 1 i 2 w zwięzły opis decyzji diagnostycznej, zachowując końcową obronę, zapis informacji zwrotnej oraz kontrole wierności. W przypadku realizacji online, hybrydowej lub w dużych grupach wielosekcyjnych należy wykorzystać cyfrowe odprawy, dzienniki zgłoszeń, internetowe sprawdziany ustne, zestandaryzowane szablony informacji zwrotnej, wspólne rubryki oceniania, wspólne szkolenie oceniających, obserwatorów na poziomie sekcji, pulpity nawigacyjne zespołów oraz centralne zarządzanie danymi.
  4. Po 16. tygodniu należy przeanalizować zgodność z protokołem, wskaźniki procesowe, wyniki studentów, notatki oceniających, wzorce brakujących danych, rejestry wykorzystania AI, komentarze studentów oraz refleksje instruktora. Przed rozpoczęciem następnego cyklu należy zaktualizować podręcznik, pakiet studiów przypadku, rubryki oceny, szablony, harmonogram udzielania informacji zwrotnych oraz formularze rejestracji danych.
  5. Po uzyskaniu zgody komisji etycznej i przygotowaniu danych badawczych należy zarchiwizować mapę protokołu, harmonogram, podręcznik, akta spraw, rubryki, formularze obserwacyjne, narzędzia badawcze w formie ankiet, zanonimizowany zestaw danych, słownik danych, skrypt analizy, wyniki statystyczne, pliki źródłowe rycin, tabele oraz materiały uzupełniające. Wszystkie poprawki należy odnotować w tabeli kontroli wersji.

Wyniki

Reprezentatywne wyniki przedstawiają efekty wygenerowane przez 16-tygodniowy protokół ulepszenia kursu Zarządzania Strategicznego zintegrowanego z konkursem. Wyniki są uporządkowane według wierności implementacji, jakości dydaktycznej, efektów na poziomie studenta, efektów na poziomie zespołu oraz zdefiniowanych wzorców ostrzegawczych. Ponieważ dane pochodzą z rutynowych kohort edukacyjnych z historyczną grupą porównawczą, a nie z przydziału randomizowanego, wszystkie wyniki należy interpretować jako wyniki implementacji i ewaluacji specyficzne dla danego kontekstu, a nie jako dowody przyczynowe skuteczności.

Wierność implementacji i jakość instruktażu

Dostępny zbiór danych z dokumentacji edukacyjnej obejmował 88 studentów w kohorcie porównawczej oraz 92 studentów w kohorcie protokołu. Zbiór danych na poziomie zespołów obejmował 22 zespoły z kohorty porównawczej i 23 zespoły z kohorty protokołu. Po zastosowaniu reguły sparowanych testów wiedzy przed i po interwencji, do analizy przyrostu wiedzy zakwalifikowano 79 studentów z kohorty porównawczej i 84 studentów z kohorty protokołu.

Przed interpretacją wyników uczenia się sprawdzono wierność implementacji. Grupa protokołu zrealizowała 15 z 16 zaplanowanych cotygodniowych aktywności (93,8%), podczas gdy grupa porównawcza zrealizowała 13 z 16 (81,3%). Sesja przypadku przedsiębiorstwa lub ustrukturyzowana została zrealizowana w grupie protokołu, ale nie stanowiła części pełnej struktury historycznej grupy porównawczej. W grupie protokołu 88 z 92 studentów ukończyło wszystkie trzy zadania konkursowe, co odpowiada 95,7%. W grupie porównawczej 18 z 88 studentów posiadało pełną dokumentację dla trzech porównywalnych ocen opartych na projektach, co odpowiada 20,5%; dokumentacja ta została zachowana wyłącznie do celów porównania opisowego, ponieważ w kursie historycznym nie wdrożono pełnej sekwencji konkursowej. Informacja zwrotna została przekazana w ciągu 7 dni kalendarzowych dla 243 z 268 zgłoszeń w grupie protokołu, co odpowiada 90,7%, w porównaniu do 49 z 66 zgłoszeń w grupie porównawczej, co odpowiada 74,2%. Średni czas przekazania informacji zwrotnej wynosił odpowiednio 5,8 ± 1,9 dnia oraz 8,4 ± 2,7 dnia. Stopień ukończenia obserwacji wyniósł 81,3% i 62,5%. Współczynnik ICC dla dwóch oceniających w przypadku nakładających się ocen subiektywnych w grupie protokołu wyniósł 0,82, przekraczając zdefiniowany próg 0,75. Ogólnie grupa protokołu osiągnęła 5 z 5 podstawowych wskaźników wierności implementacji, podczas gdy grupa porównawcza osiągnęła 2 z 5.

Wskaźniki jakości dydaktycznej były wyższe w kohorcie z protokołem. Interakcja w klasie wyniosła 3,70 ± 0,44 w kohorcie z protokołem i 3,15 ± 0,48 w kohorcie porównawczej. Kompletność projektu przypadku wyniosła odpowiednio 4,08 ± 0,36 i 3,23 ± 0,42. Zgodność zadań z kryteriami oceny wyniosła 4,01 ± 0,39 i 2,30 ± 0,51. Zaangażowanie studentów wzrosło o 0,42 ± 0,41 punktu w kohorcie z protokołem, przekraczając zdefiniowany próg sygnałowy 0,30 punktu, podczas gdy w kohorcie porównawczej wzrost wyniósł 0,07 ± 0,34 punktu. Obecność była podobna w obu kohortach: 89,6% ± 5,8% i 89,1% ± 6,2%. Tabela 5 podsumowuje te wskaźniki.

WskaźnikŹródło danychZdefiniowany prógHistoryczna kohorta porównawczaKohorta protokołuInterpretacja
Realizacja zaplanowanych cotygodniowych aktywnościDziennik wdrażania kursu≥85%13/16 tygodni, 81.3%15/16 tygodni, 93.8%Osiągnięto w kohorcie protokołu
Wdrożenie sesji przypadków przedsiębiorstwa lub strukturalnychDziennik zaangażowania przedsiębiorstwa≥1 wdrożona sesja0/1 sesja, 0.0%1/1 sesja, 100.0%Osiągnięto w kohorcie protokołu
Ukończenie zadania lub przypisanej dokumentacji projektuRejestry przesłanych prac≥85%18/88 studentów, 20.5%88/92 studentów, 95.7%Osiągnięto w kohorcie protokołu; dane historyczne mają charakter opisowy
Informacja zwrotna przekazana w ciągu 7 dniDziennik informacji zwrotnych≥80%49/66 przesłanych prac, 74.2%243/268 przesłanych prac, 90.7%Osiągnięto w kohorcie protokołu
Uzupełnienie listy kontrolnej obserwacjiFormularze obserwacyjne≥75%10/16 sesji, 62.5%13/16 sesji, 81.3%Osiągnięto w kohorcie protokołu
Zgodność między dwoma oceniającymiWyniki oceniającychICC ≥0.75NiewymaganeICC = 0.82Osiągnięto w kohorcie protokołu
Czas przekazania informacji zwrotnejDziennik informacji zwrotnychPreferowana średnia ≤7 dni8.4 ± 2.7 dni5.8 ± 1.9 dniW preferowanym zakresie w kohorcie protokołu
Interakcje w klasieLista kontrolna obserwacjiŚrednia ≥3.50 lub wzrost ≥0.303.15 ± 0.483.70 ± 0.44Wyższa w kohorcie protokołu
Kompletność projektu przypadkuLista kontrolna projektu przypadkuPreferowana średnia ≥4.003.23 ± 0.424.08 ± 0.36Wyższa w kohorcie protokołu
Zgodność zadania z rubryką ocenyLista kontrolna zgodnościŚrednia ≥4.002.30 ± 0.514.01 ± 0.39Osiągnięto w kohorcie protokołu
Wzrost zaangażowania studentówObecność, dzienniki, pytania ankietoweWzrost ≥0.30 pkt+0.07 ± 0.34+0.42 ± 0.41Osiągnięto w kohorcie protokołu
Wskaźnik obecnościRejestr obecnościOpisowy89.1% ± 6.2%89.6% ± 5.8%Podobny w obu kohortach
Podsumowanie wierności wdrażania kluczowych elementówWskaźniki wdrażaniaOsiągnięcie większości kluczowych progówOsiągnięto 2/5 progówOsiągnięto 5/5 progówProtokół wdrożony zgodnie z założeniami

Tabela 5: Reprezentatywne wskaźniki wierności implementacji i jakości instruktażu. W tabeli przedstawiono reprezentatywne wyniki wierności implementacji i jakości instruktażu dla kohorty porównawczej historycznej oraz kohorty protokołu, wskazując, czy osiągnięto zdefiniowane progi operacyjne.

Rysunek 2 przedstawia profil wierności implementacji oraz jakości nauczania. Rysunek 2A pokazuje realizację zaplanowanych aktywności tygodniowych. Rysunek 2B pokazuje realizację sekwencji trzech zadań. Rysunek 2C pokazuje informacje zwrotne przekazane w ciągu 7 dni kalendarzowych. Rysunek 2D pokazuje interakcje w klasie, kompletność projektu przypadku, zgodność zadań z rubryką oceniania oraz wzrost zaangażowania studentów. Rysunek 2E pokazuje realizację obserwacji oraz ukończenie sesji przypadku przedsiębiorstwa lub sesji ustrukturyzowanej. Miary wierności oparte na procentach oraz wskaźniki nauczania oparte na skalach należy interpretować w ramach ich własnych skal pomiarowych.

Wykresy słupkowe porównujące kohorty, analizujące ukończenie, informacje zwrotne i zaangażowanie w środowisku edukacyjnym.
Rysunek 2: Profil wierności implementacji i jakości instruktażu. Ten rysunek podsumowuje wskaźniki wierności implementacji i jakości instruktażu dla historycznej kohorty porównawczej oraz kohorty protokołu. (A) Ukończenie planowanych aktywności tygodniowych. (B) Ukończenie pełnego zadania lub przypisanego rekordu projektu, z rozróżnieniem pełnej sekwencji trzech zadań w kohorcie protokołu od przypisanych rekordów projektów w historycznej kohorcie porównawczej. (C) Informacje zwrotne przekazane w ciągu 7 dni kalendarzowych, przy czym czas przekazywania informacji zwrotnych przedstawiono jako informacje uzupełniające. (D) Wskaźniki jakości instruktażu, obejmujące interakcje w klasie, kompletność projektu przypadku, zgodność zadania z rubryką oceny oraz wzrost zaangażowania studentów. (E) Ukończenie listy kontrolnej obserwacji oraz implementacja sesji przypadku w przedsiębiorstwie lub sesji ustrukturyzowanej. Kliknij tutaj, aby wyświetlić powiększoną wersję tego rysunku.

Efekty uczenia się na poziomie studenta

Wyniki na poziomie studentów analizowano oddzielnie od wyników rywalizacji na poziomie zespołów. Wyniki wiedzy wyjściowej wynosiły 64,18 ± 8,74 w grupie protokołu i 62,37 ± 8,91 w grupie porównawczej, przy niewielkiej różnicy wyjściowej wynoszącej 1,81 punktu (d = 0,21). Wyniki wiedzy po kursie wynosiły 71,08 ± 8,58 oraz 66,41 ± 9,06, z różnicą 4,67 punktu (d = 0,53). Przyrost wiedzy wyniósł 6,90 ± 5,41 punktu oraz 4,04 ± 5,26 punktu, z różnicą 2,86 punktu (d = 0,54). Grupa protokołu przekroczyła zdefiniowany wcześniej próg przyrostu wiedzy wynoszący 5 punktów.

Wyniki indywidualnej analizy przypadku na koniec semestru wyniosły 82,31 ± 7,06 w grupie protokołu i 76,42 ± 7,38 w grupie porównawczej, co oznacza różnicę 5,89 punktów (d = 0,82). Wynik ten zinterpretowano jako wskaźnik osiągnięć po kursie, a nie jako przyrost sparowany, ponieważ nie przeprowadzono rzeczywistej oceny wyjściowej analizy przypadku. Satysfakcja wyniosła odpowiednio 3,66 ± 0,58 i 3,34 ± 0,62 (d = 0,53). Postrzegana relewantność praktyczna wyniosła 3,91 ± 0,55 i 3,41 ± 0,59 (d = 0,88). Presja konkurencyjna była wyższa w grupie protokołu (3,12 ± 0,76) w porównaniu z grupą porównawczą (2,48 ± 0,71; d = 0,87), jednak wysoka presja związana z obciążeniem pracą została zgłoszona przez 13 z 92 studentów grupy protokołu, co odpowiada 14,1% i znajduje się poniżej zdefiniowanego progu ostrzegawczego 20%. Końcowa ocena z kursu została potraktowana jako wtórny wynik edukacyjny i wyniosła 87,20 ± 6,10 w grupie protokołu oraz 84,80 ± 6,70 w grupie porównawczej (d = 0,37). Tabela 6 podsumowuje wyniki na poziomie studenta i zespołu.

WynikPoziomHistoryczna kohorta porównawczaKohorta protokołuRóżnicaWielkość efektuInterpretacja
Dostępny próbny zapis edukacyjnyStudentn = 88n = 92Użyteczne zanonimizowane rekordy kursowe
Próbka do analizy wiedzy w układzie parzystymStudentn = 79n = 84Studenci z wynikami wiedzy przed kursem i po jego zakończeniu
Wyjściowy wynik wiedzyStudent62.37 ± 8.9164.18 ± 8.741.810.21Niewielka różnica wyjściowa
Wynik testu wiedzy po kursieStudent66.41 ± 9.0671.08 ± 8.584.670.53Wyższa w kohorcie protokołu
Przyrost wiedzyStudent4.04 ± 5.266.90 ± 5.412.860.54Kohorta protokołu przekroczyła sygnał ≥5 punktów
Wynik analizy pojedynczego przypadkuStudent76.42 ± 7.3882.31 ± 7.065.890.82Przekroczono sygnał analizy przypadków ≥3 punktów
Wzrost zaangażowania studentówStudent+0.07 ± 0.34+0.42 ± 0.41+0.350.93Przekroczono sygnał ≥0,30 pkt
Wynik satysfakcjiStudent3.34 ± 0.623.66 ± 0.580.320.53Wyższa w kohorcie protokołu
Postrzegana istotność praktycznaStudent3.41 ± 0.593.91 ± 0.550.50.88Wyższe w kohorcie protokołowej
Wskaźnik presji konkurencyjnejStudent2.48 ± 0.713.12 ± 0.760.640.87Wyższe ciśnienie w kohorcie protokołu
Wysoka presja obciążenia pracąStudentNie oceniono jako presji konkurencyjnej13/92, 14.1%Poniżej progu ostrzegawczego 20%
Końcowa ocena z kursuStudent84.80 ± 6.7087.20 ± 6.102.40.37Wtórny punkt końcowy edukacyjny
Liczba zespołówZespółn = 22n = 23Analizy na poziomie zespołów przedstawione oddzielnie
Ekspozycja w rundzie decyzyjnejZespół0,77 ± 0,81 rund5,09 ± 0,79 cykli4.32NieoszacowaneWskaźnik ekspozycji implementacyjnej
Zadanie 1 lub wynik mapowania diagnozyZespół69.84 ± 6.4572.18 ± 6.282.340.37Umiarkowana różnica na poziomie zespołu
Zadanie 2 lub zmapowany wynik decyzjiZespół71.09 ± 6.1273.52 ± 5.912.430.4Umiarkowana różnica na poziomie zespołu
Zadanie 3 lub przeliczona ocena z obrony końcowejZespół72.71 ± 6.3677.20 ± 6.044.490.72Największa różnica na poziomie zespołu
Końcowy wynik zespołuZespół71.21 ± 5.8174.30 ± 5.523.090.55Umiarkowana różnica na poziomie zespołu
Wymiar strategicznej diagnozyZespół14.60 ± 1.80 15.60 ± 1.70 1Kryterium oceny obrony końcowej
Wymiar wyboru strategicznegoZespół17.90 ± 2.20 19.10 ± 2.10 1.2Kryterium oceny obrony końcowej
Wymiar wykonalności wdrożeniaZespół14.40 ± 1.90 15.50 ± 1.80 1.1Kryteria oceny obrony końcowej
Wymiar innowacjiZespół10.80 ± 1.60 11.50 ± 1.50 0.7Kryterium oceny obrony końcowej
Wymiar wykorzystania dowodówZespół7.10 ± 1.00 7.50 ± 0.90 0.4Kryteria oceny obrony końcowej
Wymiar obrony ustnejZespół7.91 ± 1.10 8.00 ± 1.00 0.09Kryteria oceny obrony końcowej
Średnia wkładu recenzentówZespół3.72 ± 0.413.91 ± 0.360.190.49Brak poważnych błędów w procesach zespołowych
Zespoły z nierównowagą wkładu pracyZespół4/22, 18.2%3/23, 13.0%−5,2 punktu procentowegoBrak systematycznego wzorca niezrównoważenia
Rozkład nagródZespółNie dotyczy10 brak; 8 trzeci; 2 drugi; 3 pierwszyWyłącznie kohorta protokołu
Wzorzec ostrzegania przed zawyżaniem ocenZespółNie dotyczy2/23 zespołów, 8,7%Oznaczone do rozwiązywania problemów

Tabela 6: Reprezentatywne wyniki na poziomie studenta i zespołu. W tabel tej przedstawiono reprezentatywne wyniki na poziomie studenta i zespołu, w tym dostępną próbkę dokumentacji edukacyjnej, sparowaną próbkę analizy wiedzy, wyniki testów wiedzy, przyrost wiedzy, indywidualny wynik analizy przypadku, zaangażowanie, satysfakcję, postrzeganą przydatność praktyczną, obciążenie pracą, końcową ocenę z kursu, wyniki zadań zespołowych, wyniki wymiarów rubryki oceny końcowej, wkład rówieśników, podział nagród oraz wskaźniki ostrzegawcze.

Rycina 3 przedstawia wyniki na poziomie studenta wraz z szacunkami niepewności, tam gdzie jest to możliwe. Rycina 3A pokazuje wyniki wiedzy wyjściowej oraz po zakończeniu kursu. Rycina 3B przedstawia przyrost wiedzy. Rycina 3C obrazuje indywidualne wyniki analizy przypadków. Rycina 3D pokazuje wzrost zaangażowania, poziom satysfakcji oraz postrzeganą relewantność praktyczną. Rycina 3E przedstawia końcową ocenę z kursu jako wynik wtórny.

Wykresy słupkowe porównujące wskaźniki edukacyjne; wiedza wyjściowa i po kursie, zaangażowanie, satysfakcja.
Rysunek 3: Reprezentatywne wyniki uczenia się na poziomie studenta. Na tym rysunku przedstawiono wyniki na poziomie indywidualnym oddzielnie od wyników rywalizacji na poziomie zespołów. (A) Wyniki wiedzy z zakresu zarządzania strategicznego (Strategic Management) przed i po kursie. (B) Przyrost wiedzy od oceny wyjściowej do oceny po kursie. (C) Indywidualna ocena analizy przypadku z końca semestru. (D) Przyrost zaangażowania i wskaźniki postrzegania z ankiety, w tym satysfakcja i postrzegana przydatność praktyczna; tam, gdzie było to konieczne, zastosowano oddzielne skale. (E) Końcowa ocena z kursu jako wtórny wynik edukacyjny oraz wysoki poziom presji obciążenia pracą w kohorcie protokołu w stosunku do predefiniowanego progu ostrzegawczego. Wartości przedstawiono jako średnia ± SD w przypadkach, gdy podano wartości ±, a słupki błędu reprezentują SD. Na panelu (E) przerywana linia referencyjna wskazuje predefiniowany próg ostrzegawczy wysokiej presji obciążenia pracą na poziomie 20%. Kliknij tutaj, aby wyświetlić powiększoną wersję tego rysunku.

Wyniki rywalizacji na poziomie zespołów

Wyniki na poziomie zespołów analizowano oddzielnie od wyników na poziomie studentów. W raportowaniu opisowym rekordy projektów przypadków z kohorty porównawczej przyporządkowano do porównywalnych punktów oceny, jeśli były one dostępne, jednak rekordy te nie reprezentowały ukończenia pełnego cyklu zintegrowanego z konkursem. Ekspozycja na rundy decyzyjne została zaraportowana jako wskaźnik ekspozycji na wdrożenie, a nie jako szacunek efektu uczenia się. Kohorta protokołu ukończyła 5,09 ± 0,79 rund decyzyjnych, podczas gdy kohorta porównawcza ukończyła 0,77 ± 0,81 przyporządkowanych rund.

W grupie protokołu średni wynik Zadania 1 wyniósł 72,18 ± 6,28, średni wynik Zadania 2 wyniósł 73,52 ± 5,91, a średni wynik Zadania 3 wyniósł 77,20 ± 6,04. Odpowiadające im zmapowane wyniki grupy porównawczej wyniosły odpowiednio 69,84 ± 6,45, 71,09 ± 6,12 oraz 72,71 ± 6,36. Końcowy wynik zespołu wyniósł 74,30 ± 5,52 w grupie protokołu i 71,21 ± 5,81 w grupie porównawczej. Wymiary kryteriów oceny obrony końcowej lub zmapowanego projektu końcowego były następujące: diagnoza strategiczna, 15,60 ± 1,70 i 14,60 ± 1,80; wybór strategiczny, 19,10 ± 2,10 i 17,90 ± 2,20; wykonalność wdrożenia, 15,50 ± 1,80 i 14,40 ± 1,90; innowacyjność, 11,50 ± 1,50 i 10,80 ± 1,60; wykorzystanie dowodów, 7,50 ± 0,90 i 7,10 ± 1,00; oraz obrona ustna, 8,00 ± 1,00 i 7,91 ± 1,10, odpowiednio.

Rozkład nagród zgłoszono wyłącznie dla kohorty protokołu, ponieważ kohorta porównawcza nie korzystała z pełnej struktury rywalizacji opartej na nagrodach. W kohorcie protokołu 10 zespołów nie otrzymało żadnej nagrody, 8 otrzymało trzecią nagrodę, 2 otrzymały drugą nagrodę, a 3 otrzymały pierwszą nagrodę. Średni wkład rówieśniczy wyniósł 3,91 ± 0,36 w kohorcie protokołu i 3,72 ± 0,41 w kohorcie porównawczej. Nierównowaga wkładu została zidentyfikowana w 3 z 23 zespołów kohorty protokołu i w 4 z 22 zespołów kohorty porównawczej. Wzorzec ostrzegawczy dotyczący inflacji wyników zidentyfikowano w 2 z 23 zespołów kohorty protokołu, co odpowiada 8,7%.

Rysunek 4 przedstawia wyniki na poziomie zespołów oraz wzorce ostrzeżeń. Rysunek 4A pokazuje wyniki zespołów dla Zadania 1, Zadania 2 i Zadania 3. Rysunek 4B przedstawia wyniki w wymiarach rubryki oceny obrony końcowej. Rysunek 4C pokazuje wyłącznie rozkład nagród w kohortach protokołu. Rysunek 4D przedstawia przypadki ostrzeżeń o zawyżaniu ocen. Rysunek 4E pokazuje równowagę wkładu rówieśniczego oraz liczbę przypadków nierównowagi wkładu.

Wykresy oceny wyników zespołu: wyniki zadań, mierniki wymiarów rubryki, nagrody i recenzje rówieśnicze.
Rycina 4: Wyniki konkurencji na poziomie zespołu i wzorce ostrzegawcze. Rycina ta przedstawia wyniki na poziomie zespołu oddzielnie od wyników uczenia się na poziomie studenta. (A) Wyniki zespołów na etapie zadań dla Zadania 1 (diagnoza strategiczna), Zadania 2 (decyzja strategiczna) i Zadania 3 (obrona końcowa), z uwzględnieniem przypisanych wyników projektów dla kohorty porównawczej historycznej, tam gdzie były dostępne. (B) Wyniki wymiarów rubryki dla obrony końcowej, obejmujące diagnozę strategiczną, wybór strategiczny, wykonalność wdrożenia, innowacyjność, wykorzystanie dowodów oraz obronę ustną. (C) Rozkład nagród wyłącznie dla kohorty protokołu, ponieważ kohorta porównawcza historyczna nie korzystała z pełnej struktury konkurencji opartej na nagrodach. (D) Wzorzec ostrzegania przed zawyżaniem ocen, zdefiniowany jako wysoka wydajność w obronie końcowej bez wspierającej siły diagnostycznej lub dowodów indywidualnego uczenia się. (E) Wynik wkładu rówieśniczego i liczba niezrównoważeń wkładu są wyświetlane jako oddzielne wskaźniki na poziomie zespołu. Kliknij tutaj, aby zobaczyć powiększoną wersję tej ryciny.

Nieoptymalne wzorce i wskaźniki rozwiązywania problemów

Dwa z 23 zespołów z kohorty protokołu wykazały zdefiniowany wcześniej wzorzec ostrzegający przed sztucznym zawyżeniem wyników. Zespoły te uzyskały stosunkowo wysokie końcowe wyniki z obrony, ale słabsze wyniki diagnostyczne w Zadaniu 1 oraz poniżej średniej przyrost wiedzy indywidualnej. Wzorzec ten został oznaczony do dalszej analizy w kolejnej edycji kursu, zamiast być interpretowany jako dowód poprawy procesu uczenia się. Nie zaobserwowano istotnego ostrzeżenia dotyczącego efektu sufitu, ponieważ bazowe wyniki wiedzy były niższe niż 85 z 100, a bazowa satysfakcja była niższa niż 4,50 z 5. Frekwencja była podobna w obu kohortach i nie zaobserwowano systematycznej nierównowagi wkładu w pracę zespołu, choć trzy zespoły z kohorty protokołu wymagały monitorowania.

Ogólnie rzecz biorąc, reprezentatywne wyniki wykazały, że protokół pozwolił na uzyskanie interpretowalnych danych na trzech poziomach: wierności wdrożenia, dowodów uczenia się na poziomie studenta oraz wyników rywalizacji na poziomie zespołu. Przypadki ostrzegawcze potwierdziły przydatność protokołu do monitorowania przebiegu kursu, rozwiązywania problemów oraz późniejszego udoskonalania programu zajęć.

Zanonimizowany zbiór danych wspierający niniejsze badanie został zdeponowany w serwisie figshare.com i jest dostępny pod adresem https://doi.org/10.6084/m9.figshare.33094931. Zbiór danych obejmuje rekordy na poziomie studentów, rekordy z rywalizacji na poziomie zespołów, wskaźniki wdrożenia, rekordy przepływu uczestników, rekordy audytu brakujących danych oraz rekordy ocen raterów. Identyfikatory studentów, rekordy zgód, pliki powiązań oraz identyfikowalne komentarze w tekście wolnym nie zostały uwzględnione.

Tabela uzupełniająca S1: Szkolenie oceniających, zgodność punktacji i procedura uzgadniania wyników.Tabela ta zawiera informacje dotyczące przydziału oceniających, weryfikacji niezależności, zapoznania z rubryką, punktacji kalibracyjnej, weryfikacji zgodności punktacji, reguły różnic w punktacji, procedury uzgadniania, audytu wprowadzania danych, blokady punktacji oraz procedury archiwizacji.Aby pobrać ten plik, kliknij tutaj.

Tabela uzupełniająca S2: Macierz rozwiązywania problemów w przypadku odchyleń od protokołu i nieoptymalnej implementacji. Tabela ta zawiera listę odchyleń od protokołu oraz wzorców nieoptymalnej implementacji, w tym reguły wyzwalające, działania korygujące, wymagane zapisy oraz uwagi dotyczące interpretacji.Kliknij tutaj, aby pobrać ten plik.

Tabela uzupełniająca S3: Struktura zbioru danych i słownik zmiennych dla zanonimizowanego edukacyjnego zbioru danych.Tabela ta definiuje zmienne na poziomie studenta, zespołu oraz sesji zajęć, w tym kody zmiennych, opisy, typy danych, zakresy kodowania, źródła danych oraz zasady dotyczące brakujących danych.Aby pobrać ten plik, kliknij tutaj.

Plik uzupełniający 1: Szablony operacyjne, materiały oceniające i arkusz z zanonimizowanym zbiorem danych.Ten plik uzupełniający zawiera szablony operacyjne, materiały oceniające, formularze punktacyjne, pytania ankietowe, weryfikację projektu przypadków, zasady dotyczące brakujących danych, strukturę arkusza z zanonimizowanym zbiorem danych, dziennik czyszczenia, szablon podsumowania analizy oraz rejestr kontroli wersji wykorzystane w celu zapewnienia powtarzalności.Kliknij tutaj, aby pobrać ten plik.

Dyskusja

Niniejszy protokół przedstawia powtarzalne podejście do wprowadzenia sekwencji nauczania opartej na rywalizacji do programu studiów licencjackich z zakresu zarządzania strategicznego. Jego celem nie jest dodanie wydarzenia konkurencyjnego do istniejącego kursu, lecz przekształcenie rywalizacji w ustrukturyzowany proces doskonalenia kursu, który łączy diagnozę strategiczną, podejmowanie decyzji, informację zwrotną (formative feedback), ostateczną obronę oraz ewaluację po zakończeniu kursu. Wartość dydaktyczna zależy zatem od projektu tej sekwencji, a nie od samego faktu występowania rywalizacji. Działania oparte na rywalizacji lub grach mogą zwiększyć zaangażowanie, jednak ich wartość edukacyjna staje się trudna do zinterpretowania, gdy cele nauczania, wyniki zadań, kryteria punktacji i rekordy danych nie są jasno określone19. Niniejszy protokół rozwiązuje ten problem poprzez zdefiniowanie sekwencji nauczania, rubryk oceniania, okna informacji zwrotnej, zapisów z implementacji oraz zanonimizowanej struktury danych niezbędnych do replikacji.

Centralną zasadą projektową jest spójność. Każde zadanie jest powiązane z efektem kształcenia kursu, tematem zajęć, produktem studenta oraz kryterium oceniania. Zadanie 1 wymaga od studentów zdiagnozowania problemu strategicznego, zadanie 2 wymaga wybrania i uzasadnienia decyzji strategicznej, a zadanie 3 wymaga obrony końcowej strategii za pomocą dowodów pisemnych i ustnych. Sekwencja diagnoza-decyzja-obrona ma zapobiec traktowaniu konkursu przez studentów wyłącznie jako ćwiczenia z prezentacji. Daje ona również studentom wielokrotne możliwości zrewidowania swojego rozumowania przed końcową obroną. Taka struktura jest zgodna z badaniami nad uczeniem się wspieranym symulacjami i uczeniem się przez doświadczenie, które sugerują, że uczenie się stosowane jest bardziej efektywne, gdy studenci angażują się w aktywne cykle podejmowania decyzji, otrzymują informacje zwrotne i wyjaśniają swoje wybory, zamiast tylko obserwować lub odgrywać scenariusz20,21.

Aby protokół działał zgodnie z zamierzeniem, konieczne jest wprowadzenie kilku kroków kontroli jakości. Po pierwsze, informacja zwrotna musi być przekazana wystarczająco szybko, aby mogła wpłynąć na kolejne zadanie. Siedmiodniowe okno czasowe na przekazanie informacji zwrotnej jest zatem traktowane jako wymóg projektowania dydaktycznego, a nie tylko jako cel administracyjny. Po drugie, należy monitorować jakość oceniania. Rubryki mogą zwiększyć przejrzystość, ale tylko wtedy, gdy oceniający mają wspólne rozumienie deskryptorów i wymogów dotyczących dowodów22. Z tego powodu protokół obejmuje szkolenie oceniających, kalibrację oceniania, sprawdzanie różnic w punktacji, monitorowanie ICC, notatki z uzgadniania ocen oraz blokowanie wyników. Po trzecie, wyniki zespołu muszą być oddzielone od dowodów indywidualnego uczenia się. Wysoka końcowa ocena z obrony może odzwiercielać biegłość w prezentowaniu lub nierówny wkład członków zespołu, a nie szerokie indywidualne opanowanie materiału. Protokół analizuje zatem oddzielnie oceny wiedzy, indywidualne oceny analizy przypadków, postrzeganie studentów, wkład rówieśników oraz oceny zespołowe.

Protokół zawiera również zasady rozwiązywania problemów, ponieważ nauczanie zintegrowane z rywalizacją może zawieść w przewidywalny sposób. Informacje zwrotne mogą być opóźnione, wkład poszczególnych członków zespołu może stać się nierównomierny, studenci mogą zbyt mocno polegać na dopracowaniu formy prezentacji, a oceny grupowe mogą wzrosnąć bez odpowiadających im dowodów na indywidualne uczenie się. Ryzyka te są monitorowane za pomocą dzienników informacji zwrotnych, rejestrów wkładu rówieśników, formularzy ujawniania korzystania z AI, sprawdzianów ustnych, wyników zgodności ocen oraz zasad ostrzegania przed zawyżaniem ocen. Elementy dotyczące ujawniania stosowania AI oraz sprawdziany ustne są szczególnie istotne, ponieważ studenci mogą wykorzystywać narzędzia cyfrowe do korekty językowej, formatowania lub burzy mózgów, jednak nadal muszą wykazać własne rozumowanie strategiczne. Protokół nie zakazuje wszelkiego wsparcia AI, ale wymaga jego ujawnienia i chroni główne zadanie edukacyjne: studenci muszą być w stanie wyjaśnić diagnozę, dowody, logikę decyzji, ryzyko wdrożenia oraz końcową rekomendację.

Protokół można dostosować do warunków danej instytucji, jednak kluczowa sekwencja powinna zostać zachowana. W przypadku braku dostępu do platformy symulacji biznesowych, w miejsce rundy symulacyjnej można wprowadzić ustrukturyzowany arkusz decyzji. Jeśli mentorzy z sektora przedsiębiorstw nie mogą uczestniczyć w zajęciach, można wykorzystać zanonimizowane studium przypadku, publiczny opis przypadku lub nagrane uwagi mentora. Duże grupy mogą wymagać utworzenia równoległych zespołów oceniających oraz zastosowania znormalizowanych szablonów informacji zwrotnej, natomiast w mniejszych grupach możliwe jest wydłużenie sesji obrony decyzji. Adaptacje te powinny zostać udokumentowane, ponieważ protokoły doskonalenia kursu zależą nie tylko od pomysłu dydaktycznego, ale także od wierności implementacji, wsparcia instruktora, warunków oceny oraz kompletności danych23. Niezbędnym wymogiem jest, aby kurs zachował powiązaną sekwencję obejmującą diagnozę, decyzję, obronę, informację zwrotną i ewaluację.

Należy uznać kilka ograniczeń. Niniejszy protokół służy udoskonaleniu kursu, a nie jest randomizowanym badaniem kontrolowanym. Różnice między kohortą protokołu a kohortą porównawczą należy zatem interpretować jako reprezentatywne wyniki wdrożenia i ewaluacji, a nie jako dowód przyczynowy skuteczności. Historyczne lub równoległe kohorty porównawcze mogą różnić się składem studentów, dynamiką w klasie, ramami czasowymi instytucji lub warunkami oceny. Końcowe oceny z kursu są również wynikami wtórnymi, ponieważ mogą obejmować rutynowe elementy kursu wykraczające poza zadania konkursowe. Ponadto wyniki na poziomie zespołu nie mogą służyć jako zamienniki wyników uczenia się na poziomie studenta. Ograniczenia te są uwzględnione poprzez oddzielne raportowanie wierności wdrożenia, wskaźników jakości nauczania, wyników na poziomie studenta, wyników na poziomie zespołu, obciążenia pracą oraz wzorców ostrzeżeń24.

Protokół ten najlepiej nadaje się do kursów, w których studenci muszą łączyć wiedzę koncepcyjną z zastosowaniem osądu menedżerskiego. Zarządzanie strategiczne jest naturalnym środowiskiem dla tej metody, ponieważ oczekuje się od studentów analizy otoczenia, oceny zasobów, porównywania opcji strategicznych i uzasadniania wyborów wdrożeniowych. Tę samą strukturę można zaadaptować do przedsiębiorczości, strategii marketingowej, zarządzania innowacjami, projektowania modeli biznesowych i innych kursów zarządzania wymagających podejmowania decyzji w oparciu o dowody. Jego szerszy wkład ma charakter praktyczny: dostarcza instruktorom weryfikowalnego sposobu dokumentowania tego, jak działanie na rzecz usprawnienia kursu było wdrażane, monitorowane, punktowane, anonimizowane, analizowane i korygowane. W edukacji menedżerskiej uczenie się przez doświadczenie jest często cenione za realizm, ale procedury te nie zawsze są opisywane z wystarczającą szczegółowością, aby umożliwić ich replikację. Niniejszy protokół wypełnia tę lukę, łącząc wierność implementacji, spójność punktowania, zarządzanie danymi i rozwiązywanie problemów w jeden odtwarzalny proces25.

Oświadczenia

Autorzy nie deklarują żadnych konfliktów interesów.

Podziękowania

Autorzy dziękują studentom oraz kadrze dydaktycznej, którzy uczestniczyli w działaniach konkursowych w ramach kursu i wspierali ich realizację. Autorzy dziękują również Business School of Zhuhai College of Science and Technology za zapewnienie niefinansowego wsparcia instytucjonalnego w zakresie rutynowej realizacji dydaktycznej, koordynacji kursu i organizacji danych. Badanie to zostało sfinansowane z 2024 Guangdong Provincial Undergraduate University Teaching Quality and Teaching Reform Project of Higher Education Teaching Reform (Grant No. 1174).

Materiały

Lista materiałów użytych w tym artykule
NazwaFirmaNumer katalogowyKomentarze
Formularz ujawnienia wykorzystania AIOpracowany przez autoraUjawnienie-AI-v1.0; Plik uzupełniający 1W zapisach ujawniono zastosowanie AI przy każdej głównej publikacji
Test wiedzy podstawowej z zakresu zarządzania strategicznegoOpracowane przez autorówSMKT-Pre-v1.0; Plik uzupełniający 1Pomiar wiedzy wyjściowej w 1. tygodniu
Lista kontrolna obserwacji zajęć lekcyjnychOpracowane przez autoraObserwacja-v1.0; Plik uzupełniający 1Rejestruje interakcje w klasie oraz jakość procesu nauczania
Dziennik czyszczeniaOpracowany przez autoraDziennik czyszczenia-v1.0; Plik uzupełniający 1Rejestrowanie kontroli danych, korekt, wykluczeń oraz blokady zbioru danych
Podręcznik konkursowyOpracowane przez autoraPodręcznik-v1.0; Plik uzupełniający 1Określa sekwencję zadań, zasady przesyłania prac, rubryki oceniające, ujawnianie wykorzystania AI, weryfikację ustną, procedury odwoławcze oraz terminy.
Słownik danychOpracowane przez autoraSłownik danych-v1.0; Tabela uzupełniająca 2Definiuje zmienne, zakresy kodowania, źródła danych oraz reguły dotyczące brakujących danych
Arkusz danych zanonimizowanego zbioru danychOpracowane przez autorówZbiór danych-Arkusz roboczy-v1.0; Plik uzupełniający 1Przechowuje zmienne na poziomie studenta, zespołu oraz sesji zajęć
Pakiet przypadków korporacyjnych lub zanonimizowanychOpracowany przez autora lub zatwierdzony przez przedsiębiorstwoCasePack-v1.0; Plik uzupełniający 1Zapewnia kontekst decyzji strategicznej
Szablon slajdów do obrony końcowejOpracowane przez autoraFSD-Template-v1.0; Plik uzupełniający 1Struktura prezentacji dla Zadania 3 w Przewodnikach
Arkusz ocen końcowej obrony strategiiOpracowane przez autorówFSDSF-v1.0; Plik uzupełniający 1Rejestruje oceny recenzentów z Zadania 3 oraz Q&ocena amp;A
IBM SPSS StatisticsIBMWersja 27.0; licencja instytucjonalna lub osobistaStatystyki opisowe, porównania grup, wielkości efektu oraz analiza ICC
Arkusz zadań z analizy poszczególnych przypadkówOpracowane przez autoraICATS-v1.0; Plik uzupełniający 1Określa wymagania dotyczące analizy poszczególnych przypadków oraz obszary punktacji
Klucz odpowiedzi do testu wiedzyOpracowane przez autoraSMKT-Klucz-v1.0; Plik uzupełniający 1Obsługuje ocenianie testów wiedzy
Microsoft ExcelMicrosoftExcel 2021; licencja instytucjonalna lub osobistaWprowadzanie danych, słownik danych, rejestr czyszczenia danych, przygotowanie tabel i weryfikacja danych źródłowych
Arkusz rejestracji badania jamy ustnejOpracowane przez autoraOral-Check-v1.0; Plik uzupełniający 1Rejestruje poszczególne pytania i odpowiedzi podczas egzaminu ustnego
Formularz wkładu recenzenckiegoOpracowane przez autoraPCF-v1.0; Plik uzupełniający 1Rejestruje wkład rówieśników oraz nierównowagę wkładu
Ankieta ewaluacyjna po kursieOpracowane przez autorówPCLS-v1.0; Plik uzupełniający 1Ocenia satysfakcję, istotność, użyteczność informacji zwrotnych, współpracę, obciążenie pracą oraz postrzeganą poprawę
Test sprawdzający wiedzę z zakresu zarządzania strategicznego po zakończeniu kursuOpracowane przez autorówSMKT-Post-v1.0; Plik uzupełniający 1Pomiar wiedzy w 16. tygodniu po zakończeniu kursu z wykorzystaniem formularza równoważnego
Plik szkoleniowy dla oceniającychOpracowane przez autorówSzkolenie oceniających-v1.0; Plik uzupełniający 1Zapewnia pliki kalibracyjne, deskryptory, przykłady oraz najczęstsze błędy w punktacji
Plik wynikowy analizy statystycznejWygenerowane przez oprogramowanieWyniki-Statystyczne-v1.0; zarchiwizowane z zablokowanym folderem analizyPrzechowuje wyniki statystyczne wraz z plikiem analizy i wersją zbioru danych
Arkusz decyzji strategicznychOpracowane przez autoraSDS-v1.0; Plik uzupełniający 1Wynik decyzji Zadania 2 dla przewodników
Szablon raportu z diagnozy strategicznejOpracowane przez autoraSDR-Szablon-v1.0; Plik uzupełniający 1Struktura raportu z Zadania 1 dla przewodników
Plik powiązań kodów studentówPlik ograniczony opracowany przez autoraPowiązanie-Kodu-Studenta-v1.0; przechowywane oddzielnie przez zarządcę danychŁączy tożsamość studenta z kodem badawczym przed deidentyfikacją
Lista kontrolna zgodności zadań z kryteriami ocenyOpracowane przez autoraDopasowanie-v1.0; Plik uzupełniający 1Weryfikacja spójności między efektami uczenia się, wynikami zadań, kryteriami oceniania a punktami informacji zwrotnej
Szablon karty zespołuOpracowane przez autoraKarta Zespołu-v1.0; Plik uzupełniający 1Dokumentuje podział ról, zasady komunikacji, terminy oraz oczekiwania dotyczące wkładu pracy
Dziennik procesów zespołuOpracowane przez autoraDziennik-Procesów-Zespołu-v1.0; Plik uzupełniający 1Rejestruje obecność na spotkaniach, decyzje, postępy, problemy oraz kolejne działania
Tabela kontroli wersjiOpracowane przez autorówWersja kontrolna-v1.0; Plik uzupełniający 1Rejestruje numer wersji, datę, redaktora, powód oraz status zatwierdzenia
platforma do ankiet online WenjuanxingWenjuanxingPlatforma internetowa; dostęp poprzez konto instytucjonalne lub użytkownikaAnkieta wstępna, ankieta końcowa, formularz wkładu rówieśniczego oraz eksporty ujawnień dotyczących AI

Bibliografia

  1. Porter ME. Competitive strategy: techniques for analyzing industries and competitors. Free Press; New York; 1980.
  2. Barney J. Firm resources and sustained competitive advantage. J Manage. 1991;17(1):99-120.
  3. Keys JB, Wolfe J. The role of management games and simulations in education and research. J Manage. 1990;16(2):307-36.
  4. Crookall D. Serious games, debriefing, and simulation/gaming as a discipline. Simul Gaming. 2010;41(6):898-920.
  5. Prince M. Does active learning work? A review of the research. J Eng Educ. 2004;93(3):223-31.
  6. Morris TH. Experiential learning: a systematic review and revision of Kolb’s model. Interact Learn Environ. 2020;28(8):1064-77.
  7. Greco M, Baldissin N, Nonino F. An exploratory taxonomy of business games. Simul Gaming. 2013;44(5):645-82.
  8. Vlachopoulos D, Makri A. The effect of games and simulations on higher education: a systematic literature review. Int J Educ Technol High Educ. 2017;14:22.
  9. Johnson DW, Johnson RT, Smith KA. Cooperative learning returns to college: what evidence is there that it works? Change. 1998;30(4):26-35.
  10. Martell K. Assessing student learning: are business schools making the grade? J Educ Bus. 2007;82(4):189-95.
  11. Hamari J, Koivisto J, Sarsa H. Does gamification work? A literature review of empirical studies on gamification. In: Proceedings of the 47th Hawaii International Conference on System Sciences. IEEE; 2014. p. 3025-34.
  12. Buckley P, Doyle E. Gamification and student motivation. Interact Learn Environ. 2016;24(6):1162-75.
  13. Biggs J, Tang C. Teaching for quality learning at university: what the student does. 4th ed. Open University Press; Maidenhead; 2011.
  14. Hattie J, Timperley H. The power of feedback. Rev Educ Res. 2007;77(1):81-112.
  15. Freeman S, et al. Active learning increases student performance in science, engineering, and mathematics. Proc Natl Acad Sci U S A. 2014;111(23):8410-5.
  16. Kolb DA. Experiential learning: experience as the source of learning and development. 2nd ed. Pearson FT Press; Upper Saddle River; 2014.
  17. Panadero E, Jonsson A. The use of scoring rubrics for formative assessment purposes revisited: a review. Educ Res Rev. 2013;9:129-44.
  18. Frye AW, Hemmer PA. Program evaluation models and related theories: AMEE Guide No. 67. Med Teach. 2012;34(5):e288-99.
  19. Garris R, Ahlers R, Driskell JE. Games, motivation, and learning: a research and practice model. Simul Gaming. 2002;33(4):441-67.
  20. Sitzmann T. A meta-analytic examination of the instructional effectiveness of computer-based simulation games. Pers Psychol. 2011;64(2):489-528.
  21. Shute VJ. Focus on formative feedback. Rev Educ Res. 2008;78(1):153-89.
  22. Jonsson A, Svingby G. The use of scoring rubrics: reliability, validity, and educational consequences. Educ Res Rev. 2007;2(2):130-44.
  23. O’Donnell CL. Defining, conceptualizing, and measuring fidelity of implementation and its relationship to outcomes in K-12 curriculum intervention research. Rev Educ Res. 2008;78(1):33-84.
  24. Marsden E, Torgerson CJ. Single group, pre- and post-test research designs: some methodological concerns. Oxf Rev Educ. 2012;38(5):583-616.
  25. Gosen J, Washbush J. A review of scholarship on assessing experiential learning effectiveness. Simul Gaming. 2004;35(2):270-93.

Przedruki i uprawnienia

Tagi

Konkurs oparty na kursieprotok instrukta owytworzenie zespo wstrategiczna diagnozasymulacja podejmowania decyzjipunktacja oparta na rubrykachinformacja zwrotna formuj cazaanga owanie student wwierno implementacji