Przegląd
Rozstrzygnięcie konkursu jest ostatnim, kluczowym etapem procesu oceniania. Na tym etapie sędziowie współpracują z doradcą sędziowskim i ze sobą nawzajem, aby wybrać kandydatów do poszczególnych nagród i stworzyć plan działania mający na celu zebranie wszelkich dalszych informacji potrzebnych do podjęcia ostatecznych decyzji.
Obrady nad przyznaniem nagród polegają na porównywaniu zespołów ze sobą. Integralność procesu oceniania zależy od tego, czy wszyscy sędziowie będą mogli wypowiadać się szczerze w trakcie tego procesu. Podczas narad wychodzą na jaw informacje szczególnie wrażliwe. Dlatego też wszelkie notatki i rozmowy z obrad sędziowskich muszą pozostać poufne zarówno w trakcie, jak i po zakończeniu wydarzenia.
Rubryka oceny zeszytu inżynierskiego i rubryka oceny wywiadu zespołowego to narzędzia pomocne w rozważaniach. Wynik zespołu, niezależnie od tego, czy jest to konkretna pozycja w rubryce, czy wynik ogólny, stanowi punkt danych, który sędziowie / doradcy sędziów mogą wykorzystać w ramach procesu. Nie zastępuje ona jakościowych osądów w procesie deliberacji.
KROK 1 – NOMINACJE DO NAGRÓD OD KAŻDEJ GRUPY SĘDZIOWSKIEJ
Po przeprowadzeniu wywiadów z członkami podgrupy sędziów powinni oni zdecydować, który lub które dwa zespoły z podgrupy, z którymi zostali przeprowadzeni, będą kandydatami do danej nagrody. Sędziowie nie muszą nominować drużyny do każdej nagrody. Powinni wrócić do Sali Sędziowskiej i podzielić się swoimi nominacjami z resztą sędziów-wolontariuszy i doradcą sędziowskim. Często odbywa się to w formie wypisania przez sędziów zalecanych numerów zespołów na karteczkach samoprzylepnych i przyklejania ich do wydruków opisów nagród, na oczach innych grup sędziowskich, które robią to samo.
Opis nagrody arkusze znajdują się na końcu tego dokumentu i można je wydrukować, aby pomóc w wizualnej organizacji uwag sędziów / zespołów kandydatów podczas narad. Kodowanie kolorami może pomóc w uporządkowaniu nominacji poszczególnych grup sędziowskich (patrz rysunek poniżej).
Końcowym efektem tego procesu jest krótka lista nominacji do każdej nagrody od wszystkich grup sędziowskich. Jeśli do każdej nagrody zgłoszono wiele nominacji, doradca sędziowski może zwrócić się do grup sędziowskich o wycofanie słabszych kandydatów z rozpatrywania, opierając się na krótkich argumentach za i przeciw każdej nominacji. Na przykład, jeśli zespół został nominowany do nagrody Think Award, ale nie uzyskał wysokiego wyniku w kategorii umiejętności autonomicznego kodowania, może nie być mocnym kandydatem. Albo grupa sędziów, po rozważeniu zalet innych kandydatów, może wycofać nominację swojego pierwotnego kandydata.
KROK 2 – KONTROLA KRZYŻOWA NOMINOWANYCH DO NAGRODY
Ten krok należy wykonać przed zakończeniem meczów kwalifikacyjnych. Doradca sędziowski organizuje grupy sędziów w celu zebrania dalszych informacji, które mają na celu zatwierdzenie krótkiej listy nominowanych do nagród. Może to mieć formę obserwacji meczów Skills Challenge, meczów kwalifikacyjnych i zachowania w boksach, a także przeprowadzania wywiadów uzupełniających z nominowanymi do nagród. Celem jest ustalenie ostatecznego rankingu nominowanych do każdej przyznawanej nagrody.
Zaleca się, aby w przypadku rozmów kwalifikacyjnych kandydaci byli przesłuchiwani przez sędziów, którzy wcześniej z nimi nie rozmawiali. Jeśli to możliwe, wybierz sędziów, którzy specjalizują się w tej samej dziedzinie i ocenią konkretne nagrody. Na przykład sędziowie posiadający wiedzę z zakresu programowania lub informatyki będą prawdopodobnie najlepiej przygotowani do oceny nominowanych finalistów do nagrody Think Award. Niniejsze wytyczne wyraźnie różnią się od wstępnych rozmów kwalifikacyjnych, podczas których sędziowie o podobnym doświadczeniu powinni zostać przydzieleni do różnych grup sędziowskich w celu umożliwienia wszystkim zespołom dokonania bardziej wszechstronnej wstępnej oceny.
Zespołom należy mówić, o jakie nagrody walczą. Stanowi to naruszenie zasady poufności zawartej w Przewodniku po ocenianiu.
KROK 3 – ROZWAŻANIE LAUREATÓW NAGRÓD
Następnym krokiem jest ostateczna narada dotycząca każdej nagrody podczas gali. Ten krok powinien zostać ukończony wkrótce po rozpoczęciu meczów finałowych/eliminacyjnych. Dane ilościowe potrzebne do rozpatrzenia kwestii przyznawania konkretnych nagród można uzyskać z raportów „Lista drużyn”, „Rankingi kwalifikacji” i „Rankingi wyzwań umiejętności według grupy wiekowej” na karcie Raporty w Menedżerze turniejów podczas wydarzenia.
KROK 4 – KOŃCOWA KLASYFIKACJA LAUREATÓW NAGRÓD
Po przeprowadzeniu wywiadów uzupełniających sędziowie, którzy je przeprowadzili, powinni podjąć decyzję i ustalić ranking tych zespołów. Dobrą praktyką jest wyznaczenie kandydatów pierwszego wyboru oraz trzech lub więcej kandydatów alternatywnych.
Jeżeli na podstawie obserwacji sędziego lub notatek terenowych do doradcywyjdzie na jaw, że zespół mógł naruszyć zasady Kodeksu postępowania lub Polityki skoncentrowanej na uczniu, rozpatrzenie wniosku takiego zespołu o przyznanie nagrody sędziowskiej powinno zostać dokładnie przeanalizowane przez doradcę sędziego. Jeżeli informacja ta okaże się uzasadniona, nagrodę przyznaje się kolejnej drużynie alternatywnej w rankingu nominacji do nagrody.
Jeśli zachowanie zespołu zostanie uznane za rażące, należy omówić to z Partnerem wydarzenia lub Regionalnym Menedżerem REC, traktując to jako potencjalne naruszenie Kodeksu postępowania. Miejmy nadzieję, że zdarza się to rzadko, jednak odpowiednia komunikacja jest istotna dla przejrzystości i zapewnienia, że konsekwencje działań niezgodnych z Kodeksem postępowania będą egzekwowane uczciwie.
W przypadku nagrody Excellence Award zwycięzca powinien znaleźć się na liście finalistów nagrody Design Award, którzy spełniają kryteria nagród Performance Awards i innych nagród przyznawanych przez jury. Przesunięcie zespołu z etapu finalisty nagrody Design Award do etapu laureata nagrody Excellence Award może skutkować zmianą składu zwycięzców innych nagród, aby mieć pewność, że żaden zespół nie zdobędzie więcej niż jednej nagrody przyznawanej przez jury podczas wydarzenia. Doradca sędziowski powinien uzgodnić nazwiska zwycięzców, aby mieć pewność, że każdy z nich otrzyma najwyższą nagrodę w wydarzeniu, do którego jest uprawniony. W takiej sytuacji bardzo pomocne jest przygotowanie rankingu trzech lub więcej kandydatów do każdej nagrody, który eliminuje potrzebę dodatkowych narad.
Na przykład: Poniżej pokazano dwa formularze. Rysunek 1 przedstawia nominowanych do nagrody przed przyznaniem Nagrody za Doskonałość. Rysunek 2 przedstawia wyniki po przyznaniu Nagrody za Doskonałość.
Zespół A został wybrany do zdobycia nagrody za doskonałość. Zespół A był również najlepszym kandydatem do nagrody za wzornictwo. W związku z tym kolejny zespół w rankingu Design Award (Zespół B) wygra teraz Design Award, a nie Innovate Award, ponieważ Design Award ma wyższe pierwszeństwo w kryteriach kwalifikacyjnych. Zespół D zostanie laureatem nagrody Innovate Award. Zespół C, formalnie zajmujący trzecie miejsce w konkursie Think Award, jest teraz laureatem nagrody Think Award, ponieważ zespoły A i B otrzymują nagrody o wyższym priorytecie. W przypadku Nagrody Sędziowskiej (Zespół E) zwycięzca pozostaje niezmieniony.
KROK 5 – ZGŁASZANIE LAUREATÓW NAGRÓD DO TOURNAMENT MANAGER
Po sfinalizowaniu nominacji do nagród doradca sędziowski powinien poinformować partnera wydarzenia o zakończeniu procesu, a operator Tournament Manager (TM) powinien wprowadzić numery drużyn do Tournament Manager na karcie „Nagrody”. Zaleca się, aby operator TM wydrukował Arkusz Podsumowania Nagród lub Raporty Scenariuszy Nagród, aby doradca sędziowski mógł sprawdzić, czy wszyscy zwycięzcy zostali prawidłowo zgłoszeni.
KROK 6 – ZBIERANIE I PRZETWARZANIE MATERIAŁÓW OCENIAJĄCYCH
Przed ceremonią wręczenia nagród doradca sędziowski powinien zabezpieczyć pokój sędziowski, w tym zebrać wszystkie notatki, rubryki i arkusze ocen oraz wymazać wszelkie notatki z tablicy. Sędziowie nie powinni przechowywać kopii żadnych notatek odnoszących się do poszczególnych zespołów, w tym rubryk oceniania i arkuszy rankingowych. Jeśli zostały zrobione zdjęcia drużyn lub robotów, sędziowie powinni je usunąć.
Po zakończeniu imprezy doradca sędziowski powinien zniszczyć wszystkie materiały sędziowskie poza miejscem imprezy. Przedmiotów tych nie wolno przekazywać Partnerowi Wydarzenia w celu ich zniszczenia.
Przejdź do następnej sekcji: „Przewodnik po ocenianiu: Ocenianie zdalne”