Guida alla valutazione: valutazione dei quaderni di ingegneria

Il quaderno di ingegneria, così come i processi seguiti dagli studenti per crearlo, devono essere in linea con la politica incentrata sullo e con il codice di condotta della REC Foundation. I modelli per le voci del quaderno possono essere uno strumento utile per guidare gli studenti (soprattutto quelli più giovani) nella documentazione del loro processo. Tuttavia, l'obiettivo finale dovrebbe essere che gli studenti siano in grado di organizzare e creare autonomamente i contenuti del quaderno. Non è mai accettabile che gli adulti contribuiscano materialmente al quaderno degli studenti. Il coinvolgimento degli adulti, inclusa l'aggiunta di contenuti, una guida o una direzione eccessive, la "pulizia" della documentazione (ad esempio, un adulto che riscrive una voce del quaderno per uno studente con una grafia difficile da leggere) o l'organizzazione del contenuto del quaderno, non è in linea con la politica incentrata sullo studente della REC Foundation. Una parte significativa del valore didattico dell'Engineering Notebook è rappresentata dal fatto che gli studenti hanno l'opportunità di mettere in pratica le capacità di comunicazione scritta, tra cui la collaborazione tra studenti nel team, l'organizzazione e la sintesi di idee e la sintesi di attività e azioni.

È richiesto che i team rispettino i principi di onestà accademica nel loro Engineering Notebook, il che include citare e dare credito a materiali e idee che non sono di loro proprietà. Se gli studenti trovano informazioni utili per lo sviluppo del loro progetto da una fonte esterna, che si tratti di un sito web, un libro, un video o di un altro individuo/team, devono citare correttamente la fonte di tali informazioni e spiegare come le stanno utilizzando nel loro processo di progettazione. Non dovrebbero tentare di spacciare informazioni esterne per opere originali. La falsa rappresentazione del lavoro degli studenti è considerata una violazione del Codice di condotta della REC Foundation e del manuale del gioco.

I team della stessa organizzazione che inviano quaderni con contenuti comuni rendono estremamente difficile la verifica della rappresentatività del contenuto degli studenti di ogni singolo team e potrebbero essere interpretati come una rappresentazione errata del lavoro degli studenti. Allo stesso modo, gli studenti programmatori che utilizzano librerie di codice dovrebbero citare le loro fonti, spiegare cosa hanno cambiato e cosa hanno utilizzato e assicurarsi di aver compreso la programmazione che stanno utilizzando. Gli studenti dovrebbero evitare di utilizzare programmi o codici che non siano in grado di creare e spiegare autonomamente.

Anche l'uso di programmi o strumenti di Intelligenza Artificiale (IA) per generare o organizzare contenuti di Engineering Notebook o codice di programmazione è contrario alla Politica incentrata sullo studente e al Codice di condotta della REC Foundation. Ciò che gli strumenti di intelligenza artificiale possono produrre a partire da prompt o da materiali esistenti non rappresenta realmente il livello di competenza del team che utilizza questi strumenti. I programmi della REC Foundation offrono l'opportunità di apprendere una varietà di competenze tecniche, organizzative e interpersonali. Non tutti gli studenti avranno lo stesso livello di competenza in queste competenze, ma tutti trarranno vantaggio dalla pratica e dall'applicazione di tali competenze come parte del processo di progettazione ingegneristica, di cui l'Engineering Notebook è una parte significativa. L'uso improprio degli strumenti di intelligenza artificiale, analogamente al coinvolgimento degli adulti non incentrato sullo studente, toglie agli studenti l'opportunità di acquisire esperienza nella pratica di competenze fondamentali di comunicazione, organizzazione, ricerca indipendente e processo decisionale.

Se i giudici vengono a conoscenza di disonestà accademica nel quaderno di un team o di violazioni delle politiche incentrate sullo studente o del Codice di condotta, tali preoccupazioni devono essere segnalate al consulente dei giudici. Ciò potrebbe comportare l'esclusione del team inadempiente dai Judged Awards di quell'evento e l'adozione di ulteriori misure in conformità con il Codice di condotta della REC Foundation.

Panoramica: Il quaderno di ingegneria

I programmi della REC Foundation aiutano gli studenti a sviluppare competenze di vita che potranno utilizzare nel loro futuro accademico e professionale. Documentare il lavoro in un quaderno di progettazione è una pratica ampiamente utilizzata nel settore dell'ingegneria e della progettazione. Seguendo il processo di progettazione ingegneristica e documentando tale processo in un quaderno di progettazione, gli studenti mettono in pratica le competenze di gestione dei progetti, di gestione del tempo, di brainstorming e di comunicazione interpersonale e scritta efficaci. Il processo di progettazione ingegneristica è iterativo: gli studenti identificano e definiscono un problema, fanno brainstorming di idee per risolverlo, testano le loro idee progettuali e continuano a perfezionare il progetto fino a raggiungere una soluzione soddisfacente. Gli studenti incontreranno ostacoli, successi e battute d'arresto durante il processo di progettazione ingegneristica. Tutto ciò dovrebbe essere documentato dagli studenti nel loro quaderno di ingegneria.

Di seguito è riportato un esempio grafico che illustra i passaggi di un semplice processo di progettazione ingegneristica.

Nei programmi della REC Foundation, l'Engineering Notebook è per i premi Excellence, Design, Innovate, Amaze, Build, Create e Think, ma non è altri premi. Per sostenere un colloquio di persona, un team deve presentare un notebook non è ; inoltre, a tutti i team presenti a un evento deve essere data l'opportunità di sostenere un colloquio.

I team possono utilizzare il quaderno cartaceo fornito da VEX Robotics oppure possono acquistarne uno diverso. I team possono anche utilizzare una qualsiasi delle varie applicazioni informatiche o servizi basati su cloud disponibili per creare e gestire digitalmente un Digital Engineering Notebook, inclusi i modelli sviluppati da VEX Robotics. Per maggiori informazioni sull'invio dei Digital Engineering Notebook, consultare la sezione Remote Judging. Indipendentemente dal formato, tutti i quaderni vengono valutati dalla giuria secondo gli stessi criteri di aggiudicazione e la stessa rubrica.

I QUADERNI DI INGEGNERIA DOVREBBERO CONTENERE I SEGUENTI ELEMENTI

Formattazione del notebook

• Numero della squadra sulla copertina/inizio del documento
• Un indice con voci organizzate per riferimento futuro
• Ogni pagina/voce è datata e numerata cronologicamente, a partire dal primo incontro della squadra
• Ogni pagina/voce contiene informazioni che indicano gli studenti autori
• Tutte le pagine/voci intatte; nessuna pagina/voce o parte di pagina/voce rimossa o omessa; gli errori possono essere barrati utilizzando una singola riga (in modo che siano visibili) anziché cancellati o rimossi
• Immagini, disegni CAD, documenti, esempi di codice o altro materiale pertinente al processo di progettazione, fissati in modo permanente (nel caso di quaderni fisici, è accettabile il nastro adesivo, ma è preferibile la colla)
• Ogni pagina/voce è numerata e datata in ordine cronologico
• Il notebook contiene la prova che la documentazione è stata realizzata in sequenza con il processo di progettazione individuale del team

Contenuto del quaderno

• Fornisce un record completo di assegnazioni di team e progetti comprese note di riunioni di team, obiettivi, decisioni e risultati di costruzione/programmazione
• I vincoli di risorse, tra cui tempo e materiali, sono annotati in tutto il testo.
• Descrizioni, schizzi e immagini dei concetti di design e del processo di progettazione
• Osservazioni e pensieri dei membri del team sulla loro progettazione e sul loro processo di progettazione
• Registrazioni di test, risultati di test e valutazioni di progetti specifici o concetti di progettazione
• Pratiche di gestione del progetto, incluso l'uso di risorse personali, finanziarie e di tempo
• Appunti e osservazioni dai concorsi da considerare nella prossima iterazione progettuale
• Descrizioni di concetti di programmazione, miglioramenti della programmazione o modifiche significative della programmazione
• Abbastanza dettagliati da consentire a una persona non familiare con il lavoro del team di seguire la logica utilizzata dal team per sviluppare il progetto e ricreare il progetto del robot

Formato di invio del notebook

La scelta del formato di valutazione dell'evento spetta al partner dell'evento. Informazioni dettagliate sulla valutazione sono disponibili sulla pagina dell'evento su RobotEvents. Tutti i team partecipanti all'evento devono inviare i propri taccuini nello stesso formato, indipendentemente dal formato nativo del taccuino. Un team con un quaderno di ingegneria fisico potrebbe dover caricare un collegamento a una copia digitale tramite RobotEvents oppure, al contrario, un team con un quaderno di ingegneria digitale potrebbe dover stamparlo prima dell'evento.

Indipendentemente dal fatto che il quaderno venga consegnato in formato digitale o di persona (quaderno cartaceo), i team sono responsabili della formattazione e della presentazione del proprio quaderno e devono garantire che tutto il materiale sia organizzato correttamente, comprese le pagine numerate e/o datate.

Se l'Engineering Notebook è scritto in una lingua non diffusa nella regione e non sono disponibili giudici fluenti nella lingua originale, è responsabilità del team fornire la versione in lingua originale insieme a una copia tradotta. Ciò dovrebbe essere portato all'attenzione del partner dell'evento il prima possibile, in modo che possa informare il consulente del giudice.

Diversi team possono presentare quaderni con diversi livelli di raffinatezza e abbellimento. Ad esempio, alcuni team potrebbero avere brevi schizzi a penna, altri potrebbero avere illustrazioni colorate o disegni CAD/elettronici. I giudici dovrebbero essere consapevoli di dover valutare il dei , non il loro livello di abbellimento. È possibile utilizzare diversi tipi di quaderni e diversi stili di comunicazione per presentare contenuti pertinenti che spiegano il processo di progettazione.

I team possono utilizzare metodi diversi per organizzare i propri quaderni di progettazione. Ad esempio, alcuni quaderni possono essere organizzati in modo puramente cronologico, mentre altri possono essere organizzati in sottosezioni in base all'argomento. A seconda del formato di invio, ciò potrebbe complicare gli sforzi dei giudici nel valutare i quaderni. I giudici dovranno fare ogni sforzo per valutare il contenuto del notebook in base alla Engineering Notebook Rubric e non farsi indebitamente influenzare dalla metodologia organizzativa scelta dal team, in particolare se l'elaborato non è nel formato nativo del notebook.

Nota: Il principio di riservatezza del giudizio si applica anche ai Quaderni di ingegneria. Indipendentemente dal fatto che i quaderni siano condivisi fisicamente o digitalmente, i giudici non devono fotografare, condividere o duplicare le informazioni presenti nei quaderni di ingegneria o violare in altro modo questo principio.

Gestione del quaderno di ingegneria

I quaderni di ingegneria fisica vengono solitamente ritirati al momento del check-in della squadra o dell'ispezione del robot durante un evento e consegnati al Judge Advisor. I link al Digital Engineering Notebook devono essere inviati tramite RobotEvents prima della data dell'evento.

Si giudici di raccogliere i quaderni di ingegneria e le rubriche inserendo le rubriche nei quaderni. Questi dati possono essere facilmente dimenticati e restituiti involontariamente ai team, violando il principio di riservatezza della valutazione.

I taccuini raccolti durante un evento devono essere restituiti direttamente ai team nella loro area box o tramite un altro processo controllato; si sconsiglia di lasciare i taccuini incustoditi affinché i team possano ritirarli. Questa operazione dovrebbe essere eseguita prima delle partite finali, poiché alcune squadre potrebbero decidere di abbandonare l'evento prima della sua conclusione.

Nota: se i quaderni di progettazione vengono inviati in formato digitale e valutati prima dell'evento, i giudici DEVONO avere accesso a tali quaderni durante l'evento stesso. Ciò consente ai giudici di valutare i candidati per tutti i premi che richiedono un Engineering Notebook come parte dei criteri di valutazione. Ciò non significa necessariamente che i giudici dell'evento rivaluteranno completamente tutti i taccuini.

FASE 1 – ORDINAMENTO DEI QUADERNI

I giudici eseguono una rapida scansione di tutti i quaderni di ingegneria e li dividono in due categorie: In fase di sviluppo e Completamente sviluppati. Se non è chiaro se un quaderno debba essere classificato come In fase di sviluppo o Completamente sviluppato, un altro giudice può aiutare a prendere questa decisione oppure al quaderno dovrebbe essere concesso il beneficio del dubbio e classificato come Completamente sviluppato.

Sviluppo I quaderni di progettazione contengono pochi dettagli, hanno pochi disegni e non costituiscono una registrazione completa del processo di progettazione. Per risparmiare tempo ai giudici, la rubrica del quaderno di progettazione non verrà completata per questi team. Tuttavia, tutti i quaderni di progettazione devono essere conservati fino al termine delle deliberazioni di valutazione.

quaderni di ingegneria completamente sviluppati contengono molti dettagli e includeranno disegni dettagliati, test e risultati di test, nonché soluzioni ai problemi riscontrati dal team. I quaderni completamente sviluppati includono una registrazione completa del processo di progettazione. Gli attributi dei notebook completamente sviluppati possono essere valutati come Emergente, Competente ed Esperto nella rubrica Engineering Notebook. Tutti i notebook con un punteggio di due punti o superiore nei primi quattro criteri della Engineering Notebook Rubric devono essere considerati completamente sviluppati, poiché ciò delineerebbe un'unica iterazione del processo di progettazione ingegneristica. Solo i notebook completamente sviluppati devono essere presi in considerazione per i premi Innovate, Design ed Excellence. Per tutti gli altri premi che richiedono un quaderno, il quaderno deve contenere contenuti a supporto del colloquio di squadra e dei criteri di assegnazione.

Nota: i team possono fornire link o codici QR a fonti come pagine web o video nei loro quaderni. Sebbene possano essere utili per il team e la loro inclusione non debba essere scoraggiata, i giudici NON devono prenderli in considerazione come parte della valutazione dell'Engineering Notebook. Oltre ai rischi per la sicurezza derivanti dal cliccare su un collegamento o un codice QR che rimanda a una fonte sconosciuta, i giudici potrebbero impiegare una quantità di tempo sproporzionata per esaminare tali contenuti aggiuntivi. Pertanto, il contenuto di tali link/video non è considerato parte del documento Engineering Notebook del team. Si incoraggiano invece i team a riassumere/descrivere il contenuto del collegamento in modo che i giudici possano farsi un'idea del contenuto senza dover uscire dal documento Engineering Notebook.

FASE 2 – COMPLETAMENTO DELLA RUBRICA DEL QUADERNO DI INGEGNERIA

Importante: la rubrica Engineering Notebook è uno strumento per le valutazioni iniziali dei notebook dei team attraverso un confronto quantitativo. La determinazione finale di tutti i candidati e vincitori del premio avviene attraverso un'ulteriore deliberazione qualitativa tra i giudici, basata sulle descrizioni e sui criteri del premio. Pertanto, il conseguimento di un punteggio particolare o complessivo in una rubrica da parte di una squadra non costituisce una squalifica automatica o una soglia per alcun premio valutato.

Nota: Si raccomanda che gli stessi giudici che intervistano un gruppo di squadre valutino anche i quaderni di quelle squadre. Il quaderno di progettazione e il colloquio di gruppo dovrebbero rispecchiarsi a vicenda; avere gli stessi giudici che li valutano entrambi aiuterà i giudici a comprendere meglio il team e potrebbe rivelarsi illuminante.

I notebook completamente sviluppati vengono valutati e classificati utilizzando la rubrica Engineering Notebook. Inizialmente possono essere classificati in base ai punteggi della rubrica, per poi essere riclassificati in base a un'ulteriore valutazione qualitativa da parte dei giudici.

I giudici devono esaminare il quaderno per identificare il livello di competenza degli studenti per ciascuno dei criteri della rubrica del quaderno di ingegneria. Probabilmente non ci sarà abbastanza tempo per leggere pagina per pagina ogni quaderno.

Per determinare i punteggi per ciascun quaderno completamente sviluppato, i giudici dovranno concentrarsi sulle voci associate ai criteri della Rubrica e al livello di competenza. Si raccomanda che almeno due giudici valutino ogni notebook completamente sviluppato e che i punteggi dei primi notebook vengano discussi in modo che i giudici possano "calibrare" i punteggi in modo che siano coerenti durante l'evento. Avere a disposizione ulteriori quaderni per i punteggi dei giudici garantirà una calibrazione ancora migliore. Potrebbero essere necessarie ulteriori valutazioni dei quaderni e interviste per supportare la classifica finale dei quaderni e delle interviste durante la deliberazione.

Continua alla sezione successiva, Guida alla valutazione: colloqui di gruppo