Přehled
Určení formátu hodnocení (osobního nebo vzdáleného), které událost nabízí, vyžaduje konverzaci mezi poradcem rozhodčího a partnerem akce. Nakonec rozhodnutí o formátu hodnocení připadá na partnera akce, ale poradce rozhodčího by měl být spokojený s prací ve zvoleném formátu. Posuzování na dálku může pomoci lépe využít zdroje dobrovolníků, které jsou k dispozici pro daný den, ale dobrovolníci rozhodčího musí být spokojeni s jakýmikoli dalšími časovými a/nebo technologickými požadavky, které od nich mohou být požadovány.
Všechny týmy, které jsou hodnoceny pro danou událost, musí být hodnoceny ve stejném formátu , aby byla zajištěna konzistentnost v hodnocení a aby se odstranil potenciál zkreslení založeného na formátu z dopadu na jednání. Pokud jsou například pro některé týmy inženýrské zápisníky odeslány k hodnocení prostřednictvím odkazů na digitální zápisníky před akcí, fyzické zápisníky by neměly být u jiných týmů hodnoceny osobně v den akce. U týmových pohovorů buď všechny týmy absolvují úvodní pohovor na dálku, nebo jsou všechny týmy nejprve pohovory osobně. Týmy, které nejsou dotazovány na dálku, by neměly být zpočátku osobně dotazovány na akci.
Dálkové posuzování by se také mělo konat co nejblíže události, aby týmy a roboti, které rozhodčí pozorují v úvodních rozhovorech, byli co nejblíže tomu, co je přiváděno do soutěže.
Dálkové posuzování se řídí všemi pokyny pro osobní posuzování. Následující část zdůrazňuje klíčové rozdíly v procesu posuzování, pokud jsou některé z úkolů, které se obvykle provádí osobně, prováděny na dálku. Vzdálené posuzování může probíhat ve formě vzdáleného hodnocení v digitálním inženýrském notebooku nebo vzdálených úvodních týmových rozhovorů nebo kombinací obou, a to následovně:
Dálkové hodnocení digitálního inženýrského notebooku
- Digitální inženýrské notebooky jsou před akcí posuzovány na dálku.
- Týmy nahrají odkazy na svůj Engineering Notebook přes RobotEvents.com. Není přípustné, aby týmy byly požádány o odeslání poznámkových bloků pomocí jiné metody, než je odkaz na RobotEvents, nebo jako konkrétní typ souboru, ani nejsou kladeny další požadavky na notebooky, které se v této příručce neobjevují.
- Jakmile je odkaz na Digital Engineering Notebook (DEN) nahrán prostřednictvím RobotEvents, týmy mohou stále aktualizovat své DEN průběžně, a to i v den akce. Očekává se, že obsah notebooku se časem změní, což je součástí procesu inženýrského návrhu.
- Tento seznam odkazů poskytne partner akce poradci rozhodčího.
- Porotci by si měli pomocí odkazu volně prohlížet Zápisníky digitálního inženýrství. Týmy by se měly ujistit, že oprávnění k prohlížení jejich poznámkových bloků jsou nastavena tak, aby je rozhodčí mohli prohlížet.
- Poradce rozhodčího uspořádá porotce do skupin, aby si prohlédli a ohodnotili zápisníky pomocí Engineering Notebook Rubric.
- Za podobných okolností by se s notebooky digitálního inženýrství mělo zacházet na dálku, aby byla zajištěna konzistence.
- Zápisníky digitálního inženýrství by si mělo prohlédnout několik porotců, aby se stanovilo pořadí finalistů.
- Některé události mohou chtít provést variaci tohoto formátu hodnocení. Základní zásadou zůstává, že všechny odevzdané zápisníky mají být hodnoceny pomocí stejného formátu odevzdání a ve stejném časovém rámci, takže žádným příspěvkům není dána žádná skutečná nebo domnělá preference nebo výhoda.
Vzdálené úvodní týmové pohovory
- Počáteční týmové pohovory se provádějí na dálku před akcí pomocí Týmového pohovoru Rubrika a Úvodní hodnocení kandidátů na ocenění.
- Účastníci týmu se mohou ke schůzce přihlásit z jednoho místa, kde sdílejí webovou kameru, nebo z více míst.
- Cílem úvodních týmových rozhovorů na dálku je identifikovat kandidáty na každé ocenění (krok 1 procesu jednání).
- Poradci soudců by měli nastavit způsob, jak shromažďovat poznámky k hodnocení, aby pomohly při závěrečných úvahách.
- Následné pohovory s konečnými kandidáty na ocenění (krok 2 v procesu rozhodování ) musí být provedeny osobně, aby bylo možné zohlednit pozorování týmů a robotů na akci.
- Osobní porotci následných pohovorů by neměli přesouvat týmy z jedné kategorie ocenění do druhé. Pokud tak učiníte, zneplatní se počáteční jednání rozhodčích na dálku a účinně se znovu spustí proces posuzování, aniž by se všem týmům dostalo rovného zacházení.
Poznámka: Dálkové posuzování nenahrazuje osobní následné pohovory a porady v den akce. Jeho účelem je poskytnout partnerům akce a posuzujícím dobrovolníkům flexibilitu při provádění některých úkolů v oblasti posuzování před dnem akce. Dálkové posuzování může umožnit menší skupině rozhodčích využít delší časový rámec tím, že naplánuje posuzování před akcí a umožňuje využití dobrovolníků rozhodčích, kteří se nemusí moci zúčastnit akce osobně.
Protokoly vzdáleného posuzování
- Všechny zásady a pokyny pro posuzování stále platí.
- Ochrana mládeže musí být zachována. Při provádění rozhovorů na dálku by měl mít každý zúčastněný tým jednoho dospělého zástupce (18+ a ne student střední školy), který by se měl přihlásit a být viditelný na kameře po celou dobu rozhovoru. Tento dospělý zástupce by se měl zúčastnit pohovoru před příchodem studentů. Dospělý může být ve stejné místnosti jako studenti nebo se může ke vzdálenému hovoru přihlásit samostatně. Tato dospělá osoba se nesmí žádným způsobem účastnit ani přispívat k obsahu týmového rozhovoru. Jejich přítomnost zajišťuje, že se do videokonference zapojí více dospělých osob.
- Rozhodčí by nikdy neměl být při dálkovém rozhovoru s týmem sám, ale měl by pracovat jako součást skupiny dvou nebo více rozhodčích. S zahrnutím dospělého zástupce týmu to znamená minimální počet dospělých v dálkovém rozhovoru na tři.
- Stejně jako osobní rozhovory neumožňují nahrávání, ani rozhovory na dálku by nikdy neměla nahrávat žádná strana
Je přijatelné, aby dálkoví porotci pořádali samostatné online porady nebo sdíleli tabulky, které jim pomohou při shromažďování informací o hodnocení, jako jsou skóre rubriky týmového rozhovoru, skóre rubriky Engineering Notebook a žebříček kandidátů na počáteční ocenění . Jakékoli poznámky ze schůze nebo datové tabulky by měly být pod kontrolou poradce rozhodčího a informace v nich obsažené by měly být na konci závodu zničeny.
Plánování vzdáleného posuzování
DIGITÁLNÍ INŽENÝRSKÉ NOTEBOOKY
Odkazy na Digital Engineering Notebook nahraje primární týmový trenér na svůj účet Robotevents.com. Partner akce a poradce rozhodčího by měli určit termín, do kterého musí mít všechny týmy nahrány své odkazy, a rozhodčím tak poskytnou dostatek času na to, aby mohli začít prohlížet Zápisníky digitálního inženýrství. Partner akce sdílí tento seznam odkazů s poradcem rozhodčího, který přiděluje rozhodčím, aby přezkoumali každý zápisník digitálního inženýrství podle procesu hodnocení zápisníku inženýrství (viz Část 5). Všechny sešity digitálního inženýrství by měly být hodnoceny za podobných podmínek a časových omezení.
ÚVODNÍ ROZHOVORY S TÝMEM NA DÁLKU
Plánování dobrovolníků vzdáleného posuzování – Plánování pohovoru vyžaduje koordinaci mezi partnerem akce, poradcem rozhodčího, vzdálenými rozhodčími a týmy. Doporučuje se nejprve vytvořit plán časů pohovorů a poté zajistit, aby byli pro tyto časy k dispozici vzdálení soudci a poradce soudce. I když se poradce soudce nemusí pohovoru účastnit, důrazně se doporučuje, aby byl po ruce a pomohl vyřešit jakékoli problémy, které mohou nastat. Navíc, pokud se vzdálený soudce nebude moci zúčastnit nebo má problém s technologií, může zasáhnout poradce soudce a sloužit jako vzdálený soudce, takže týmy mohou být vyslechnuty v naplánovaný čas.
Plánování týmů – Vzdálené počáteční časy přihlášení k týmovému pohovoru může partner události naplánovat ručně, ale jednodušší způsob může být pro týmy, aby si naplánovaly samy sebe prostřednictvím systému registrace kdo dřív přijde, ten je dřív na řadě. Doporučuje se, aby rozhovory na dálku byly dokončeny několik dní před akcí pro případ, že by bylo potřeba více času kvůli dobrovolníkovi nebo technickému problému, který narušil plán.
Pokud je dostatek dobrovolníků Remote Judge, kteří to podporují, lze paralelně vést více rozhovorů. Účastníci se například mohli přihlásit do jediného odkazu pro vzdálené posuzování s hlavní místností pro příchozí týmy a oddělenými místnostmi pro každý tým vzdálených rozhodčích. Každý tým byl přemístěn z hlavní místnosti do oddělovací místnosti pro rozhovor. Může být užitečné, když dva dospělí (poradce rozhodčího a další člen personálu akce) přivítají týmy v hlavní místnosti při jejich příchodu a zajistí, aby jejich dospělý zástupce byl vidět na kameře a že je to správný tým pro daný časový úsek před přesunout týmy, aby viděli své vzdálené soudce. Mít tuto „čekárnu“ také brání týmům v neúmyslném přerušení rozhovoru jiného týmu.
Poznámka: Minulé zkušenosti ukázaly, že půlhodinový cyklus rozhovorů funguje dobře: Třicet minut poskytuje týmům dostatek času, aby vstoupily do prostředí vzdáleného posuzování, aby vzdálení soudci provedli 10–15 minutový rozhovor a vzdálení soudci diskutovali , ohodnoťte rozhovor a vyplňte první žebříček kandidátů na ocenění , než dorazí další tým.