Przewodnik po ocenianiu: Ocenianie zeszytów inżynierskich

Zeszyt inżynierski oraz procesy, które studenci stosują w celu jego utworzenia, powinny być zgodne z Polityką skoncentrowaną na studencie i Kodeksem postępowaniaFundacji REC. Szablony wpisów do notatników mogą być przydatnym narzędziem ułatwiającym (szczególnie młodszym) uczniom dokumentowanie procesu nauki. Jednak końcowym celem powinno być umożliwienie uczniom samodzielnego organizowania i tworzenia treści notatników. Nigdy nie jest dopuszczalne, aby dorośli wnosili materialny wkład do zeszytów uczniów. Zaangażowanie osób dorosłych, w tym dodawanie treści, nadmierne wskazówki lub polecenia, „porządkowanie” dokumentacji (na przykład przepisywanie przez osobę dorosłą wpisu w zeszycie dla ucznia, którego pismo odręczne jest trudne do odczytania) lub porządkowanie treści zeszytu, nie jest zgodne z Polityką Fundacji REC skoncentrowaną na studencie. Istotną częścią wartości edukacyjnej Zeszytu inżynierskiego jest możliwość ćwiczenia przez studentów umiejętności komunikacji pisemnej, co obejmuje współpracę między studentami w zespole, organizowanie i syntezę pomysłów oraz podsumowywanie działań i czynności.

Zespoły muszą przestrzegać zasad uczciwości akademickiej w swoich zeszytach inżynierskich, co obejmuje cytowanie i przypisywanie zasług materiałom i pomysłom, które nie są ich własnością. Jeśli uczniowie znajdą informacje pomocne w rozwoju swojego projektu w jakimkolwiek zewnętrznym źródle (np. stronie internetowej, książce, filmie lub od innej osoby/zespołu), powinni odpowiednio podać źródło tych informacji i wyjaśnić, w jaki sposób wykorzystują te informacje w procesie projektowania. Autorzy nie powinni podejmować prób przedstawiania informacji pochodzących z zewnątrz jako swojego własnego, oryginalnego dzieła. Fałszywe przedstawienie prac uczniów jest uważane za naruszenie Kodeksu postępowania Fundacji REC, a także instrukcji gry.

Zespoły z tej samej organizacji, które przesyłają zeszyty o tej samej treści, znacznie utrudniają weryfikację, czy treść jest reprezentatywna dla uczniów w każdym indywidualnym zespole, i może to zostać zinterpretowane jako błędne przedstawienie pracy uczniów. Podobnie studenci programowania, którzy korzystają z bibliotek kodu, powinni podawać źródła, wyjaśniać, co zmienili i co wykorzystali, a także upewnić się, że rozumieją programowanie, którego używają. Uczniowie powinni unikać korzystania z programów i kodu, których nie są w stanie samodzielnie stworzyć i wyjaśnić.

Korzystanie z programów lub narzędzi sztucznej inteligencji (AI) do generowania lub organizowania treści zeszytu inżynierskiego lub kodu programowania jest również sprzeczne z Polityką zorientowaną na studenta oraz Kodeksem postępowania Fundacji REC. To, co narzędzia AI mogą wygenerować na podstawie podpowiedzi lub istniejących materiałów, nie odzwierciedla w pełni poziomu umiejętności zespołu wykorzystującego te narzędzia. Programy fundacji REC oferują możliwość zdobycia różnorodnych umiejętności technicznych, organizacyjnych i interpersonalnych. Nie wszyscy studenci osiągną ten sam poziom kompetencji w zakresie tych umiejętności, jednak wszyscy skorzystają na ćwiczeniu i stosowaniu tych umiejętności w ramach procesu projektowania inżynierskiego, którego Zeszyt inżynierski stanowi istotną część. Niewłaściwe wykorzystanie narzędzi sztucznej inteligencji, podobne do angażowania dorosłych w nauczanie, które nie koncentruje się na uczniu, pozbawia uczniów możliwości zdobycia doświadczenia w ćwiczeniu podstawowych umiejętności komunikacji, organizacji, niezależnego dociekania i podejmowania decyzji.

Jeżeli sędziowie dowiedzą się o nieuczciwości akademickiej w zeszycie zespołu lub o naruszeniu zasad programu Student-Centered lub Kodeksu postępowania, powinni zgłosić swoje obawy doradcy sędziego. Może to skutkować usunięciem naruszającej zasady drużyny z grona jurorów na tym wydarzeniu i ewentualnymi dalszymi działaniami zgodnie z procedurą Kodeksu postępowania Fundacji REC.

Przegląd: Notatnik inżynierski

Programy Fundacji REC pomagają uczniom rozwijać umiejętności życiowe, które mogą im się przydać w przyszłości akademickiej i zawodowej. Dokumentowanie pracy w Zeszycie Inżynierskim jest szeroko stosowaną praktyką w branży inżynieryjnej i projektowej. Dzięki przestrzeganiu Procesu Projektowania Inżynierskiego i dokumentowaniu tego procesu w Zeszycie Inżynierskim studenci ćwiczą zarządzanie projektami, zarządzanie czasem, burzę mózgów oraz skuteczne umiejętności interpersonalne i komunikacji pisemnej. Proces projektowania inżynierskiego ma charakter iteracyjny: studenci identyfikują i definiują problem, wymieniają się pomysłami na jego rozwiązanie, testują swoje pomysły projektowe i udoskonalają je aż do osiągnięcia satysfakcjonującego rozwiązania. Studenci będą musieli stawić czoła przeszkodom, sukcesom i niepowodzeniom w trakcie realizacji procesu projektowania inżynierskiego. Wszystko to studenci powinni udokumentować w swoich zeszytach inżynierskich.

Poniżej znajduje się przykładowa grafika przedstawiająca kroki prostego procesu projektowania inżynierskiego.

W programach REC Foundation zeszyt Engineering Notebook jest wymagany w przypadku nagród Excellence, Design, Innovate, przypadku innych nagród. Przesłanie notatnika jest wymogiem a nie aby zespół mógł zostać zaproszony na rozmowę kwalifikacyjną osobiście, a wszystkie zespoły biorące udział w wydarzeniu muszą mieć możliwość udzielenia wywiadu.

Zespoły mogą korzystać z fizycznego notatnika dostępnego w firmie VEX Robotics lub zakupić inny rodzaj fizycznego notatnika. Zespoły mogą również korzystać z różnych aplikacji komputerowych lub usług w chmurze, umożliwiających cyfrowe tworzenie i prowadzenie Cyfrowego Zeszytu Inżynierskiego, w tym szablonów opracowanych przez VEX Robotics. Więcej informacji na temat zgłoszeń w ramach Digital Engineering Notebook można znaleźć w sekcji Zdalne ocenianie. Niezależnie od formatu, wszystkie notatniki są oceniane przez sędziów według tych samych kryteriów i kryteriów.

NOTATNIKI INŻYNIERYJNE POWINNY ZAWIERAĆ NASTĘPUJĄCE ELEMENTY

Formatowanie notatnika

• Numer zespołu na okładce/początku dokumentu
• Spis treści z wpisami uporządkowanymi w celu umożliwienia przyszłego wykorzystania
• Każda strona/wpis datowany i numerowany chronologicznie, począwszy od pierwszego spotkania zespołu
• Każda strona/wpis zawiera informacje dotyczące autora/autorów ucznia
• Wszystkie strony/wpisy nienaruszone; żadne strony/wpisy ani części stron/wpisów nie zostały usunięte lub pominięte; błędy można przekreślić za pomocą jednej linii (aby były widoczne), zamiast je wymazywać lub usuwać
• Trwale przymocowane zdjęcia, rysunki CAD, dokumenty, przykłady kodu lub inne materiały istotne dla procesu projektowania (w przypadku fizycznych notatników dopuszczalna jest taśma, ale preferowany jest klej)
• Każda strona/wpis chronologicznie ponumerowany i datowany
• Notatnik zawiera dowody na to, że dokumentacja została wykonana zgodnie z indywidualnym procesem projektowania zespołu

Zawartość notatnika

• Zapewnia zapis zadań zespołowych i projektowych w tym notatki ze spotkań zespołowych, cele, decyzje oraz osiągnięcia w zakresie budowania/programowania
• Ograniczenia zasobów, w tym czasu i materiałów, są odnotowane w całym dokumencie.
• Opisy, szkice i zdjęcia koncepcji projektowych oraz procesu projektowania
• Obserwacje i przemyślenia członków zespołu na temat ich projektu i procesu projektowania
• Zapisy testów, wyników testów i ocen konkretnych projektów lub koncepcji projektowych
• Praktyki zarządzania projektami, w tym wykorzystanie zasobów ludzkich, finansowych i czasowych
• Notatki i spostrzeżenia z konkursów do uwzględnienia w kolejnej iteracji projektu
• Opisy koncepcji programowania, udoskonaleń programowania lub istotnych modyfikacji programowania
• Wystarczająco szczegółowe, aby osoba niezaznajomiona z pracą zespołu była w stanie zrozumieć logikę, którą zespół zastosował do opracowania projektu, i odtworzyć projekt robota

Format przesyłania notatników

Wybór formatu oceniania wydarzenia leży w gestii Partnera Wydarzenia. Szczegółowe informacje dotyczące oceniania można znaleźć na stronie wydarzenia pod adresem RobotEvents. Wszystkie zespoły biorące udział w wydarzeniu muszą przesłać swoje notatniki w tym samym formacie, niezależnie od ich macierzystego formatu. Zespół posiadający fizyczny notatnik inżynierski może zostać poproszony o przesłanie łącza do jego cyfrowej kopii za pośrednictwem RobotEvents. Ewentualnie zespół posiadający cyfrowy notatnik inżynierski może zostać poproszony o jego wydrukowanie przed wydarzeniem.

Niezależnie od tego, czy notatnik zostanie przesłany cyfrowo czy osobiście (w wersji papierowej), zespoły odpowiadają za formatowanie i prezentację swoich notatników oraz muszą zadbać o to, aby wszystkie materiały były prawidłowo zorganizowane — łącznie z ponumerowaniem i/lub datowaniem stron.

Jeśli Notatnik inżynierski jest napisany w języku, który nie jest powszechny w danym regionie, a sędziowie biegle władający językiem oryginalnym nie są dostępni, obowiązkiem zespołu jest dostarczenie wersji w oryginalnym języku wraz z przetłumaczoną kopią. Należy o tym poinformować Partnera Wydarzenia możliwie jak najwcześniej, aby mógł on poinformować Doradcę Sędziowskiego.

Różne zespoły mogą zgłaszać notatniki o zróżnicowanym poziomie zaawansowania i upiększenia. Na przykład niektóre zespoły mogą mieć krótkie szkice wykonane długopisem, inne – kolorowe ilustracje lub rysunki CAD/elektroniczne. Sędziowie powinni być świadomi, że oceniają , a nie stopień ich upiększenia. Istnieje możliwość wykorzystania wielu różnych typów notatników i różnych stylów komunikacji do prezentacji istotnych treści wyjaśniających proces projektowania.

Zespoły mogą korzystać z różnych metod porządkowania swoich zeszytów inżynierskich. Przykładowo, niektóre notatniki mogą być uporządkowane wyłącznie chronologicznie, podczas gdy inne mogą być podzielone na podsekcje według tematu. W zależności od formatu zgłoszenia może to utrudniać sędziom ocenę notatników. Sędziowie powinni dołożyć wszelkich starań, aby ocenić zawartość notatnika w oparciu o kryteria oceny notatnika inżynierskiego i nie sugerować się nadmiernie metodologią organizacji wybraną przez zespół, zwłaszcza jeśli przesłane zgłoszenie nie jest w natywnym formacie notatnika.

Uwaga: Zasada poufności oceny dotyczy również zeszytów inżynierskich. Niezależnie od tego, czy notatniki są udostępniane w formie fizycznej czy cyfrowej, sędziowie nie powinni fotografować, udostępniać ani kopiować informacji zawartych w notatnikach inżynierskich ani w żaden inny sposób łamać tej zasady.

Obsługa zeszytu inżynierskiego

Notatniki z zakresu inżynierii fizycznej są zazwyczaj zbierane podczas odprawy zespołu lub inspekcji robota na wydarzeniu i przekazywane doradcy sędziowskiemu. Linki do Digital Engineering Notebook należy przesłać za pośrednictwem RobotEvents przed datą wydarzenia.

się aby sędziowie zeszyty inżynierskie i rubryki oceniania umieszczali w zeszytach. Można o nich łatwo zapomnieć i nieumyślnie zwrócić je zespołom, co naruszałoby zasadę poufności oceny.

Zeszyty zebrane podczas wydarzenia należy zwrócić zespołom bezpośrednio w ich strefie serwisowej lub w inny kontrolowany sposób. Nie zaleca się pozostawiania zeszytów bez nadzoru, aby mogły je odebrać zespoły. Należy to zrobić przed meczami finałowymi, ponieważ niektóre drużyny mogą zdecydować się na opuszczenie imprezy przed jej zakończeniem.

Uwaga: Jeśli zeszyty inżynierskie są przesyłane w formie cyfrowej i oceniane przed wydarzeniem, sędziowie MUSZĄ mieć dostęp do tych zeszytów podczas samego wydarzenia. Ma to na celu umożliwienie sędziom oceny kandydatów pod kątem wszystkich nagród, w przypadku których jednym z kryteriów oceny jest Zeszyt Inżynierski. Nie oznacza to jednak, że sędziowie na wydarzeniu dokonają ponownej oceny wszystkich notatników.

KROK 1 – SORTOWANIE NOTATNIKÓW

Sędziowie dokonują szybkiego przeglądu wszystkich zeszytów inżynierskich i dzielą je na dwie kategorie: Rozwijające się i W pełni rozwinięte. Jeśli nie ma pewności, czy notatnik powinien zostać zakwalifikowany jako rozwijający się czy w pełni rozwinięty, inny sędzia może pomóc w podjęciu tej decyzji lub należy przyjąć korzyść wątpliwości i zakwalifikować notatnik jako w pełni rozwinięty.

Opracowywanie Notatniki inżynierskie zawierają niewiele szczegółów, niewiele rysunków i nie stanowią kompletnego zapisu procesu projektowania. Aby zaoszczędzić czas sędziów, rubryka Engineering Notebook nie będzie wypełniana dla tych zespołów. Niemniej jednak wszystkie zeszyty inżynierskie należy zachować aż do zakończenia obrad komisji oceniającej.

W pełni rozwinięte Zeszyty inżynierskie zawierają wiele szczegółów, w tym szczegółowe rysunki, testy i wyniki testów oraz rozwiązania problemów napotkanych przez zespół. W pełni rozwinięte notatniki zawierają kompletny zapis procesu projektowania. Atrybuty notatnika w pełni rozwiniętego mogą być oceniane według kryteriów Engineering Notebook Rubric jako rozwijające się, biegłe i eksperckie. Wszystkie notatniki, które uzyskały wynik dwóch lub więcej punktów w pierwszych czterech kryteriach Rubryki Notatników Inżynieryjnych, powinny być uważane za w pełni rozwinięte, ponieważ stanowiłyby pojedynczą iterację Procesu Projektowania Inżynieryjnego. W przypadku nagród Innowacyjność, Projektowanie i Doskonałość należy brać pod uwagę wyłącznie notatniki w pełni rozwinięte. W przypadku wszystkich innych nagród wymagających notatnika, notatnik powinien zawierać treści wspierające kryteria rozmowy kwalifikacyjnej i przyznawania nagród.

Uwaga: Zespoły mogą zamieszczać w swoich notatnikach linki lub kody QR do źródeł, takich jak strony internetowe lub filmy. Choć mogą być one przydatne dla zespołu i nie należy zniechęcać do ich uwzględnienia, sędziowie NIE powinni ich badać w ramach oceny Zeszytu inżynierskiego. Oprócz ryzyka związanego z bezpieczeństwem, jakie niesie ze sobą kliknięcie linku lub kodu QR do nieznanego źródła, sprawdzenie dodatkowych treści przez sędziów może zająć nieproporcjonalnie dużo czasu. W związku z tym treść tych linków/filmów nie jest uważana za część dokumentu Engineering Notebook zespołu. Zamiast tego zachęca się zespoły do podsumowania/opisywania zawartości linku, aby sędziowie mogli zorientować się w jego zawartości bez konieczności zagłębiania się w dokument Engineering Notebook.

KROK 2 – WYPEŁNIANIE KRYTERIUM OCENY NOTATNIKA INŻYNIERYJNEGO

Ważne: Rubryka dotycząca notatników inżynierskich jest narzędziem służącym do wstępnej oceny notatników zespołu poprzez ilościowe porównanie. Ostateczna decyzja o wyborze kandydatów do nagród i zwycięzców następuje w drodze dalszych, jakościowych obrad sędziów, w oparciu o opisy i kryteria nagród. Zatem uzyskanie przez zespół określonej lub ogólnej liczby punktów w danej rubryce nie oznacza automatycznej dyskwalifikacji ani nie stawia zespołu na progu żadnej przyznawanej nagrody.

Uwaga: Zaleca się, aby ci sami sędziowie, którzy przeprowadzają wywiady z grupą zespołów, oceniali również notatniki tych zespołów. Notatnik inżynierski i rozmowa kwalifikacyjna z zespołem powinny być ze sobą powiązane; ocena obu dokumentów przez tych samych sędziów pomoże sędziom lepiej zrozumieć zespół i może okazać się pouczająca.

W pełni rozwinięte zeszyty są punktowane i klasyfikowane przy użyciu Rubryki zeszytów inżynierskich. Początkowo można je uszeregować według punktów w rubrykach, a następnie najlepsze zeszyty mogą zostać ponownie uszeregowane według dalszej oceny jakościowej przeprowadzonej przez sędziów.

Sędziowie powinni przejrzeć notatnik, aby określić poziom zaawansowania prac studentów w odniesieniu do każdego z kryteriów Rubryki Notatnika Inżynieryjnego. Prawdopodobnie nie będzie wystarczająco dużo czasu, aby przeczytać każdy notatnik strona po stronie.

Sędziowie powinni skupić się na wpisach powiązanych z kryteriami Rubryki i poziomem zaawansowania, aby określić punktację dla każdego w pełni rozwiniętego notatnika. Zaleca się, aby co najmniej dwóch sędziów oceniło każdy w pełni rozwinięty notatnik, a także omówienie pierwszych kilku ocen z notatników, aby sędziowie mogli „skalibrować” oceny, aby były spójne w trakcie całego wydarzenia. Jeszcze lepszą kalibrację zapewnią dodatkowe notatniki punktowe sędziów. W celu wsparcia ostatecznej klasyfikacji notatników i wywiadów podczas narady konieczne mogą okazać się dalsze oceny notatników i wywiadów.

Przejdź do następnej sekcji: Przewodnik po ocenianiu: Wywiady z zespołem