Leitfaden zur Beurteilung: Beurteilung technischer Notizbücher

Das Engineering-Notizbuch: Zweck & Akademische Ehrlichkeit

Das Engineering Notebook dient dem Team in der aktuellen Saison als nützliches Werkzeug, als Referenz für zukünftige Teams, die frühere Notebooks möglicherweise als Ressource zur Lösung zukünftiger Design-Herausforderungen verwenden, und als Dokument, das den Weg des Teams im Laufe der Saison veranschaulicht. Ein gut geführtes technisches Notizbuch ist nützlich und für Studenten und externe Beobachter, wie etwa Richter, lesbar. Teams sollten zur Organisation von Inhalten ein Notizbuchformat und -system wählen, das ihren Umständen am besten entspricht. Das Engineering Notebook ist nicht in erster Linie als „Präsentationsunterlage“ für Juroren gedacht.

Das Engineering Notebook sowie die Prozesse, die die Studierenden zu dessen Erstellung befolgen, sollten mit der Student-Centered Policy und dem Verhaltenskodexder REC Foundation in Einklang stehen. Vorlagen für Notizbucheinträge können ein nützliches Hilfsmittel sein, um (insbesondere jüngere) Schüler bei der Dokumentation ihres Prozesses anzuleiten. Das Endziel sollte jedoch darin bestehen, dass die Schüler selbstständig Notizbuchinhalte organisieren und erstellen. Es ist niemals zulässig, dass Erwachsene materielle Beiträge zum Heft eines Schülers leisten. Die Beteiligung von Erwachsenen, einschließlich des Hinzufügens von Inhalten, übermäßiger Anleitung oder Anweisungen, des „Aufräumens“ von Unterlagen (z. B. wenn ein Erwachsener einen Notizbucheintrag für einen Schüler mit schwer leserlicher Handschrift neu schreibt) oder des Organisierens von Notizbuchinhalten, steht nicht im Einklang mit der schülerzentrierten Richtlinie der REC Foundation. Ein wesentlicher Teil des pädagogischen Werts des Engineering Notebooks besteht für die Schüler darin, dass sie die Möglichkeit haben, schriftliche Kommunikationsfähigkeiten zu üben, was die Zusammenarbeit zwischen den Schülern im Team, das Ordnen und Synthetisieren von Ideen und das Zusammenfassen von Aktivitäten und Aktionen umfasst.

Die Teams müssen sich in ihrem Engineering Notebook an die Grundsätze akademischer Ehrlichkeit halten. Dazu gehört auch, dass sie Materialien und Ideen zitieren und angeben, die nicht ihre eigenen sind. Wenn Studierende aus externen Quellen (Website, Buch, Video oder von einer anderen Person/einem anderen Team) Informationen finden, die für die Entwicklung ihres Designs hilfreich sind, sollten sie die Quelle dieser Informationen ordnungsgemäß angeben und erklären, wie sie diese Informationen in ihrem Designprozess verwenden. Sie sollten nicht versuchen, externe Informationen als ihr eigenes Originalwerk auszugeben. Die falsche Darstellung der Arbeit eines Schülers gilt als Verstoß gegen den Verhaltenskodex der REC Foundation sowie gegen das Spielhandbuch.

Wenn Teams aus derselben Organisation Notizbücher mit gemeinsamem Inhalt einreichen, ist es äußerst schwierig zu überprüfen, ob der Inhalt für die Studierenden in den einzelnen Teams repräsentativ ist. Dies kann als falsche Darstellung der Arbeit der Studierenden interpretiert werden. Ebenso sollten Programmierstudenten, die Codebibliotheken verwenden, ihre Quellen zitieren, erklären, was sie geändert und verwendet haben, und sicherstellen, dass sie die von ihnen verwendete Programmierung verstehen. Studierende sollten die Verwendung von Programmen oder Code vermeiden, deren eigenständige Erstellung und Erklärung ihre Fähigkeiten übersteigt.

Die Verwendung von Programmen oder Tools für künstliche Intelligenz (KI) zum Generieren oder Organisieren von Engineering Notebook-Inhalten oder Programmcode verstößt außerdem gegen die studentenzentrierte Richtlinie und den Verhaltenskodex der REC Foundation. Was KI-Tools aus Eingabeaufforderungen oder durch den Aufbau vorhandener Materialien erstellen können, spiegelt nicht wirklich das Qualifikationsniveau des Teams wider, das diese Tools nutzt. Die Programme der REC Foundation bieten die Möglichkeit, vielfältige technische, organisatorische und zwischenmenschliche Fähigkeiten zu erlernen. Nicht alle Studierenden verfügen über das gleiche Kompetenzniveau in diesen Fähigkeiten, aber alle Studierenden profitieren von der Übung und Anwendung dieser Fähigkeiten im Rahmen des technischen Entwurfsprozesses, bei dem das Engineering Notebook einen wichtigen Teil ausmacht. Der Missbrauch von KI-Tools nimmt den Schülern – ähnlich wie die nicht schülerzentrierte Einbindung Erwachsener – die Möglichkeit, Erfahrungen in den Bereichen Kommunikation, Organisation, eigenständiges Forschen und Entscheidungsfindung zu sammeln.

Wenn den Juroren akademische Unredlichkeiten im Notizbuch eines Teams oder Verstöße gegen die schülerzentrierten Richtlinien oder den Verhaltenskodex auffallen, sollten diese Bedenken an den Jurorenberater weitergeleitet werden. Dies kann zum Ausschluss des betreffenden Teams von den Preisverleihungen bei dieser Veranstaltung und möglicherweise zu weiteren Maßnahmen gemäß dem Verhaltenskodex der REC Foundation führen.

Übersicht: Das Engineering Notebook

Die Programme der REC Foundation helfen Schülern dabei, Lebenskompetenzen zu entwickeln, die ihnen in ihrer akademischen und beruflichen Zukunft von Nutzen sein können. Das Dokumentieren von Arbeiten in einem Engineering-Notizbuch ist eine weit verbreitete Praxis in der Ingenieur- und Designbranche. Indem sie den technischen Designprozess verfolgen und diesen in einem technischen Notizbuch dokumentieren, üben die Studierenden Projektmanagement, Zeitmanagement, Brainstorming und effektive zwischenmenschliche und schriftliche Kommunikationsfähigkeiten. Der technische Designprozess ist iterativ: Die Schüler identifizieren und definieren ein Problem, entwickeln Ideen zur Problemlösung, testen ihre Designideen und verfeinern ihren Entwurf weiter, bis eine zufriedenstellende Lösung erreicht ist. Während sie den technischen Designprozess durchlaufen, werden die Studierenden auf Hindernisse, Erfolge und Rückschläge stoßen. All dies sollte von den Studierenden in ihrem Engineering Notebook dokumentieren.

Unten sehen Sie eine Beispielgrafik, die die Schritte eines einfachen technischen Designprozesses darstellt.

Kriterien für das Notizbuch auf Expertenniveau.png

In den Programmen der REC Foundation ist das Engineering Notebook für die Excellence, Design, Innovate, Amaze, Build, Create und Think Awards erforderlich , aber keine Voraussetzung für andere Auszeichnungen. Das Einreichen eines Notizbuchs ist für ein persönliches Interview eines Teams, und allen Teams bei einer Veranstaltung muss die Möglichkeit zu einem Interview gegeben werden.

Teams können das von VEX Robotics erhältliche physische Notizbuch verwenden oder ein anderes physisches Notizbuch erwerben. Teams können außerdem eine der zahlreichen verfügbaren Computeranwendungen oder Cloud-basierten Dienste zum digitalen Erstellen und Verwalten eines Digital Engineering Notebooks nutzen, darunter auch die von VEX Robotics entwickelten Vorlagen. Weitere Informationen zur Einreichung von Digital Engineering Notebooks finden Sie im Abschnitt Remote Judging. Unabhängig vom Format werden alle Notizbücher von der Jury nach denselben Preiskriterien und Rubriken bewertet.

ENGINEERING-NOTEBOOKS SOLLTEN FOLGENDE ELEMENTE ENTHALTEN

Notebook-Formatierung

  • Teamnummer auf dem Deckblatt/Dokumentenanfang
  • Ein Inhaltsverzeichnis mit Einträgen, die für die zukünftige Verwendung geordnet sind
  • Jede Seite/jeder Eintrag ist chronologisch datiert und nummeriert, beginnend mit dem ersten Teamtreffen
  • Jede Seite/jeder Eintrag enthält Informationen zum/zu den studentischen Autor(en).
  • Alle Seiten/Einträge intakt; keine Seiten/Einträge oder Teile von Seiten/Einträgen entfernt oder ausgelassen; Fehler können mit einer einzigen Linie durchgestrichen werden (damit sie sichtbar sind), anstatt sie zu löschen oder zu entfernen.
  • Fest angebrachte Bilder, CAD-Zeichnungen, Dokumente, Codebeispiele oder anderes Material, das für den Designprozess relevant ist (bei physischen Notizbüchern ist Klebeband akzeptabel, Klebstoff wird jedoch bevorzugt)
  • Jede Seite/jeder Eintrag chronologisch nummeriert und datiert
  • Das Notizbuch enthält den Nachweis, dass die Dokumentation im Einklang mit dem individuellen Designprozess des Teams erfolgte.

Notebook-Inhalt

  • Bietet eine vollständige Aufzeichnung der Team- und Projektzuweisungen einschließlich Notizen zu Teambesprechungen, Zielen, Entscheidungen und Bau-/Programmierleistungen
  • Ressourcenbeschränkungen, einschließlich Zeit und Materialien, werden überall vermerkt
  • Beschreibungen, Skizzen und Bilder von Designkonzepten und dem Designprozess
  • Beobachtungen und Gedanken der Teammitglieder zu ihrem Design und ihrem Designprozess
  • Aufzeichnungen von Tests, Testergebnissen und Bewertungen bestimmter Designs oder Designkonzepte
  • Projektmanagementpraktiken einschließlich der Nutzung personeller, finanzieller und zeitlicher Ressourcen
  • Notizen und Beobachtungen aus Wettbewerben, die bei der nächsten Designiteration berücksichtigt werden sollen
  • Beschreibungen von Programmierkonzepten, Programmierverbesserungen oder wesentlichen Programmieränderungen
  • Genug Details, damit eine Person, die mit der Arbeit des Teams nicht vertraut ist, der Logik folgen kann, die das Team zur Entwicklung seines Designs verwendet hat, und das Roboterdesign nachbilden kann

Format für die Notebook-Übermittlung

Die Wahl des Bewertungsformats für die Veranstaltung liegt beim Veranstaltungspartner. Detaillierte Informationen zur Wertung finden Sie auf der Eventseite von RobotEvents. Alle Teams bei der Veranstaltung müssen ihre Notizbücher im gleichen Format einreichen, unabhängig vom nativen Format ihres Notizbuchs. Ein Team mit einem physischen technischen Notizbuch muss möglicherweise einen Link zu einer digitalen Kopie über RobotEvents hochladen, oder umgekehrt wird ein Team mit einem digitalen technischen Notizbuch möglicherweise gebeten, es vor der Veranstaltung auszudrucken.

Unabhängig davon, ob das Notizbuch digital oder persönlich (physisches Notizbuch) eingereicht wird, sind die Teams für die Formatierung und Präsentation ihres Notizbuchs verantwortlich und müssen sicherstellen, dass alle Materialien ordnungsgemäß organisiert sind – einschließlich Nummerierung und/oder Datierungsseiten.

Wenn das Engineering Notebook in einer Sprache verfasst ist, die in der Region nicht gebräuchlich ist, und keine Juroren zur Verfügung stehen, die die Originalsprache fließend beherrschen, liegt es in der Verantwortung des Teams, die Version in der Originalsprache zusammen mit einer übersetzten Kopie bereitzustellen. Der Eventpartner sollte hierauf möglichst frühzeitig aufmerksam gemacht werden, damit er den Judge Advisor informieren kann.

Verschiedene Teams können Notizbücher mit unterschiedlichem Grad an Raffinesse und Verschönerung einreichen. Einige Teams verfügen beispielsweise über kurze Bleistiftskizzen, andere über kolorierte Illustrationen oder CAD-/elektronische Zeichnungen. Die Juroren sollten sich bewusst sein, dass sie den der bewerten und nicht den Grad der Verschönerung. Es ist möglich, über viele verschiedene Arten von Notizbüchern und in verschiedenen Kommunikationsstilen relevante Inhalte zu präsentieren, die den Designprozess erklären.

Teams können unterschiedliche Methoden zum Organisieren ihrer Engineering-Notebooks verwenden. Beispielsweise können einige Notizbücher rein chronologisch organisiert sein, während andere möglicherweise nach Themen in Unterabschnitte gegliedert sind. Je nach Einreichungsformat kann dies die Bewertung der Notizbücher durch die Juroren erschweren. Die Juroren sollten sich nach Kräften bemühen, den Inhalt des Notizbuchs anhand der Engineering Notebook Rubric zu bewerten und sich nicht übermäßig von der vom Team gewählten Organisationsmethode beeinflussen zu lassen, insbesondere dann, wenn die Einreichung nicht im nativen Format des Notizbuchs erfolgt.

Hinweis: Das Vertraulichkeitsprinzip der Beurteilung gilt auch für Engineering Notebooks. Unabhängig davon, ob Notizbücher physisch oder digital weitergegeben werden, dürfen die Juroren die in technischen Notizbüchern enthaltenen Informationen nicht fotografieren, weitergeben oder duplizieren oder anderweitig gegen diesen Grundsatz verstoßen.

Handhabung von technischen Notizbüchern

Notizbücher zur physikalischen Technik werden normalerweise beim Team-Check-in oder der Roboterinspektion bei einer Veranstaltung eingesammelt und dem Schiedsrichterberater übergeben. Links zum Digital Engineering Notebook müssen vor dem Veranstaltungsdatum über RobotEvents übermittelt werden.

Es wird den Richtern nicht empfohlen, technische Notizbücher und Rubriken zu vergleichen, indem sie die Rubriken in das Notizbuch schieben. Diese können leicht vergessen und unbeabsichtigt an die Teams zurückgegeben werden, was einen Verstoß gegen den Vertraulichkeitsgrundsatz der Beurteilung darstellen würde.

Bei einer Veranstaltung eingesammelte Notizbücher sollten den Teams direkt in ihrem Boxenbereich oder über einen anderen kontrollierten Prozess zurückgegeben werden. Es wird nicht empfohlen, Notizbücher unbeaufsichtigt zurückzulassen, damit die Teams sie abholen können. Dies sollte vor den Finalspielen geschehen, da sich manche Teams möglicherweise entscheiden, vor Abschluss der Veranstaltung abzureisen.

Hinweis: Wenn Engineering-Notizbücher digital eingereicht und vor der Veranstaltung ausgewertet werden, MÜSSEN die Juroren bei der Veranstaltung selbst Zugriff auf diese Notizbücher haben. Dies soll den Juroren die Möglichkeit geben, Kandidaten für alle Auszeichnungen zu bewerten, bei denen ein Engineering Notebook als Teil der Bewertungskriterien erforderlich ist. Dies bedeutet nicht unbedingt, dass die Juroren bei der Veranstaltung alle Notizbücher komplett neu bewerten werden.

SCHRITT 1 – SORTIEREN DER NOTIZBÜCHER

Die Juroren führen einen schnellen Scan aller Engineering-Notizbücher durch und teilen sie in zwei Kategorien ein: In Entwicklung“ und Vollständig entwickelt“. Wenn unklar ist, ob ein Notizbuch als „In der Entwicklung“ oder „Voll entwickelt“ kategorisiert werden soll, kann entweder ein anderer Richter bei der Entscheidung behilflich sein, oder dem Notizbuch sollte im Zweifelsfall stattgegeben und es als „Voll entwickelt“ kategorisiert werden.

Entwicklung Technische Notizbücher enthalten wenige Details, wenige Zeichnungen und stellen keine vollständige Aufzeichnung des Designprozesses dar. Um den Juroren Zeit zu sparen, wird die Rubrik „Engineering Notebook“ für diese Teams nicht ausgefüllt. Dennoch sollten alle Engineering Notebooks bis zum Ende der Wertungsberatungen aufbewahrt werden.

Vollständig entwickelte technische Notizbücher enthalten viele Details und umfassen ausführliche Zeichnungen, Tests und Testergebnisse sowie Lösungen für Probleme, auf die das Team gestoßen ist. Vollständig entwickelte Notizbücher enthalten eine vollständige Aufzeichnung des Designprozesses. Die Notebook-Attribute für vollständig entwickelte Notebooks können in der Engineering Notebook-Rubriken als „Aufstrebend“, „Kompetent“ und „Experte“ bewertet werden. Alle Notizbücher mit einer Punktzahl von zwei oder mehr Punkten in den ersten vier Kriterien der Engineering Notebook Rubric sollten als vollständig entwickelt betrachtet werden, da dies eine einzelne Iteration des Engineering Design Process darstellen würde. Nur vollständig entwickelte Notizbücher sollten für die Innovate-, Design- und Excellence Awards berücksichtigt werden. Für alle anderen Auszeichnungen, für die ein Notizbuch erforderlich ist, sollte das Notizbuch Inhalte enthalten, die das Teaminterview und die Auszeichnungskriterien unterstützen.

Hinweis: Teams können in ihrem Notizbuch Links oder QR-Codes zu Quellen wie Webseiten oder Videos bereitstellen. Obwohl diese für das Team nützlich sein können und ihre Einbeziehung nicht entmutigt werden sollte, sollten die Juroren diese NICHT als Teil der Bewertung des Engineering Notebooks untersuchen. Abgesehen von den Sicherheitsrisiken, die das Anklicken eines Links oder QR-Codes zu einer unbekannten Quelle birgt, könnte die Prüfung dieser zusätzlichen Inhalte für Richter unverhältnismäßig viel Zeit in Anspruch nehmen. Daher wird der Inhalt dieser Links/Videos nicht als Teil des Engineering Notebook-Dokuments des Teams betrachtet. Stattdessen werden die Teams ermutigt, den Inhalt des Links zusammenzufassen/beschreiben, damit die Juroren einen Einblick in den Inhalt haben, ohne über das Engineering Notebook-Dokument hinausgehen zu müssen.

SCHRITT 2 – AUSFÜLLEN DER RUBRIK FÜR DAS ENGINEERING-NOTIZBUCH

Wichtig: Die Engineering Notebook Rubric ist ein Tool für erste Team-Notebook-Bewertungen durch quantitativen Vergleich. Die endgültige Bestimmung aller Preiskandidaten und Gewinner erfolgt durch weitere qualitative Beratungen der Jury auf Grundlage der Preisbeschreibungen und -kriterien. Das Erreichen einer bestimmten oder Gesamtpunktzahl in einer Rubrik stellt daher keine automatische Disqualifikation eines Teams dar und bedeutet auch nicht, dass dieses von einer Auszeichnung ausgeschlossen wird.

Hinweis: Es wird empfohlen, dass dieselben Juroren, die eine Gruppe von Teams befragen, auch die Notizbücher dieser Teams auswerten. Das Engineering Notebook und das Team-Interview sollten sich gegenseitig widerspiegeln. Wenn beide von denselben Juroren bewertet werden, können diese das Team besser verstehen und dies kann aufschlussreich sein.

Vollständig entwickelte Notizbücher werden anhand der Engineering Notebook Rubricbewertet und eingestuft. Sie können zunächst nach den Punktzahlen in den Rubriken eingestuft werden. Anschließend können die besten Notizbücher nach einer weiteren qualitativen Bewertung durch die Juroren neu eingestuft werden.

Die Juroren sollten das Notizbuch prüfen, um das Kompetenzniveau der Schülereinträge hinsichtlich der einzelnen Kriterien der Rubrik „Engineering Notebook“ zu ermitteln. Es wird wahrscheinlich nicht genug Zeit geben, jedes Notizbuch Seite für Seite durchzulesen.

Um die Punktzahl für jedes vollständig entwickelte Notizbuch zu bestimmen, sollten sich die Juroren auf die Einträge konzentrieren, die den Rubrikkriterien und dem Kompetenzniveau entsprechen. Es wird empfohlen, dass mindestens zwei Juroren jedes vollständig entwickelte Notizbuch bewerten und die Bewertungen der ersten paar Notizbücher besprechen, damit die Juroren die Bewertungen „kalibrieren“ können, damit sie für die gesamte Veranstaltung einheitlich sind. Durch die Verwendung zusätzlicher Wertungshefte der Richter lässt sich eine noch bessere Kalibrierung erzielen. Zur Unterstützung der endgültigen Rangfolge der Notizbücher und Interviews während der Beratung können weitere Notizbuchauswertungen und Interviews erforderlich sein.

Fahren Sie mit dem nächsten Abschnitt fort, Leitfaden zur Beurteilung: Team-Interviews