Geplaatst op

Stand van zaken IO 2: protocollen voor wetgeving op het gebied van veiligheid en fraudebestrijding

De werkzaamheden aan de universiteit van Hertfordshire zijn voortgezet op basis van de activiteiten die zijn beschreven in het jaarverslag voor 2016-17 voor IO2, met de nadruk op het ontwikkelen en verfijnen van een risicobeoordelingsdocument voor online proctoring.
Op dit moment doet het team onderzoek met een groep on-campus en getrainde proctors die in dienst zijn van de universiteit met het doel een reeks richtlijnen te ontwikkelen voor de opleiding van online proctors. Het team heeft een verscheidenheid aan methoden ontworpen voor het onderzoeken van proctoring van online examens. Dit zijn dit:
1. Het tonen van een Record and Review scenario aan een groep huidige proctors, gevolgd door een focusgroep om de punten te bespreken die zij als mogelijk verdacht gedrag van studenten aan de orde zouden stellen. Dit was een grotendeels reflecterende en kwalitatieve studie die in augustus/september 2017 is uitgevoerd.
2. Voor begin 2018 is een gemengde aanpak gepland waarbij gebruik wordt gemaakt van een op de campus aangeboden module met een online-evaluatie. Hierbij zal gebruik worden gemaakt van een live authenticatie voor studenten gevolgd door een Record and Review voor de beoordeling, waarbij dezelfde groep van proctors het proces retrospectief evalueert en potentiële pijnpunten identificeert.
3. Ten derde zal een complete Live proctored sessie worden beoordeeld door onze groep campus getrainde proctors, dit is gepland voor later in 2018.
Het gebruik van opgenomen’ live scenario’ s’ helpt ons om beter te begrijpen wat de opgeleide en ervaren surveillanten/proctors in een campus-situatie zoeken bij de surveillantie en dus waar de bedreigingen voor een veilige online evaluatie kunnen liggen.

Geplaatst op

LERU 2017, Milaan

Van 7-10 november 2017 woonde Sabine Bottin-Rousseau de werkgroep e-learning van de LERU-conferentie bij. Ze gaf een presentatie over het project en ervaringen bij UPMC met online proctoring.

Geplaatst op

Nieuwsbrief 6 – 6 november 2017

Op 2 oktober 2017 organiseerden we onze 2e transnationale bijeenkomst aan de Hogeschool Wilhelm Büchner (Darmstadt, Duitsland). Het was een constructieve bijeenkomst waarop we het afgelopen projectjaar en ons plan voor volgend jaar bespraken. In het bijzonder hebben we vastgesteld dat de eerste experimenten met online proctoring met wisselend succes zijn verlopen en dat deze resultaten ons in staat stellen om in de komende 2 jaar meer grootschalige experimenten op te zetten.

Enkele projectleden gingen naar conferenties om het OP4RE-project te presenteren. Silvester Draaijer presenteerde op 9 oktober op de TEA 2017-conferentie in Barcelona het document “Online Proctoring for Remote Examen: A state of Play in Higher Education in the EU”. Sabine Rousseau en Pierre Beust gingen van 16-19 oktober naar ICDE in Toronto om hun paper over “Online Proctoring: Experimentation of Remote Examination in E-learning programma’s” te presenteren. Ze publiceerden ook een artikel over Frankrijk en het afleggen van examen in pyama. Silvester Draaijer presenteert de eerste bevindingen van het OP4RE-project op 7 en 8 november aanstaande Nederlandse SURF Onderwijsdagen. Voor meer informatie over deze papers verwijzen we naar de website van OP4RE.

Na de presentatie op de TEA-conferentie had Silvester Draaijer, samen met vertegenwoordigers van het Erasmus TeSLA-project en Smowltech een rondetafelgesprek aan. In het bijzonder werden thema’s besproken over de vraag of online proctoring veiliger zou moeten zijn dan face-to-face proctoring. Hoe veilig is face-to-face proctoring? De conferentiebezoekers waren het eens met de geïdentificeerde doelgroepen van kandidaten (uitwisselingsstudenten, sportstudenten, studenten met een handicap, toekomstige internationale studenten) in lijn zijn met de op lange termijn beoogde resultaten van het Erasmus-programma om de toegang tot hoger onderwijs te verbeteren.

Ook zijn onderwerpen aan de orde geweest over integratietechnologieën en hoe TeSLA functionaliteiten es in combinatie met online proctoring zou kunnen inbouwen. Ook werd de discussie toegespitst op de verschillen in culturen in Zuid-Amerika en de Verenigde Staten in tegenstelling tot Europa. Met name in Zuid-Amerika lijken digitale identificatiemechanismen zoals gezichtsherkenning en het opslaan van videobeelden in Zuid-Amerika veel gemakkelijker te kunnen worden toegepast, omdat de studentenpopulatie zich in een grotere geografische spreiding bevindt en omdat de vereisten inzake gegevensbescherming en privacy minder streng zijn.

Stap voor stap voegen we artikelen toe aan onze website. Onlangs hebben we een aantal artikelen toegevoegd over proctoring. Een eerste artikel geeft ons een blik achter de schermen van het ProctorU team. Een tweede interessant artikel geeft een aantal tips en trucs, een aantal ideeën met betrekking tot online proctoring, zoals technologieën, procedures, voor- en nadelen en dergelijke. Kijk op onze website voor meer informatie.

Op dit moment zijn we een datum aan het plannen voor een 2e Reach out sessie. Wij houden u op de hoogte.

Geplaatst op

OP4RE @ ECEL 2017

Op de 16e European Conference on e-learning (ECEL 2017), in Portugal op 26-27 oktober 2017, presenteerden onze partners van de University of Hertfordshire een paper over “Trialling Online Proctoring for e-Assessments: Early Outcomes From the Erasmus+ OP4RE Project”.

Paper: Jefferies, A., Barton, K., Meere, J., Peramungama, S., Pyper, A., & Yip, A. (2017) ‘Trialling Online Proctoring for E-assessments: Early Outcomes from the Erasmus+ OP4RE Project’ in Peres, P. and Mesquita,  A. (eds)  Proceedings of 16th European Conference for E-Learning (ECEL), Porto, ACPI pp. 221-228

Geplaatst op

Reflectie op TEA Conferentie 2017

Sessie van Silvester Draaijer, Amanda Jefferies en Gwendoline Somers

Online Proctoring for Remote Examination: A State of Play in Higher Education in the EU

Silvester Draaijer, project leider van het OP4RE project, heeft tijdens de International Technology Enhanced Assesment conferentie van 8 en 9 oktober 2017 het paper ‘Online Proctoring for Remote Examination: A State of Play in Higher Education in the EU’ gepresenteerd.

Na de presentatie heeft Silvester Draaijer samen met de vertegenwoordigers van het Erasmus TeSLA project en Smowltech een round-table discussie gevoerd. De discussies werden gevoerd in een aantal kleinere groepen en besloegen meerdere thema’s rondom online proctoring. Één van de belangrijkste vragen waarover gediscussieerd werd is hoe veilig face-to-face procotoring nu eigenlijk is, en of online proctoring niet veiliger is. Verder waren de conferentiebezoekers het zeer eens met de geïdentificeerde doelgroepen die in lijn zijn met de op lange termijn beoogde resultaten van het Erasmus-programma om de toegang tot hoger onderwijs te verbeteren.

Verder werden er problemen besproken rondom technologiën voor integratie en hoe functionaliteiten van het TeSLA project samen zouden kunnen werken met online proctoring. Ook zijn er discussies gewijd aan de verschillen in culturen van zuid-Europese landen en de Verenigde Staten in contrast met Europa.

– Silvester Draaijer

De pre-conference proceedings met het bijgevoegde paper zijn hier te vinden: http://www.teaconference.org/en/contributions-submissions/pre-conference-proceedings/

De Powerpoint presentatie is hier te vinden: https://drive.google.com/file/d/0B0rrO_BjDmhjbXFmMUZEdDZ5b1E/view?usp=sharing

Geplaatst op

Online proctoring – Caen University

Op 18 oktober waren Isabelle Duchatelle, Pierre Beust und Valérie Cauchard aanwezig op de Journée thématique Examens et Certifications en ligne et/ou à distance, in CNAM in Parijs. Zij deelden hun ervaringen met online proctoring aan de universiteit van Caen. Klik hier voor het programma.

In juni woorden zijn ook het Colloque Questions de Pédagogie dans l’ Enseignement Supérieur (QPES), in Grenoble bij over ditzelfde thema.

  • Isabelle DUCHATELLE – VP Déléguée aux Transformations Pédagogiques et Numériques à l’Université de CAEN
  • Pierre BEUST – Directeur du CEMU (Centre d’Enseignement Multimédia Universitaire) Détaché auprès de la MiPNES sur les missions d’Enseignement à distance
  • Valérie CAUCHARD – Ingénieure de Recherche au CEMU (Centre d’Enseignement Multimédia Universitaire)
Geplaatst op

OP4RE @ ICDE, Toronto

Van 16-19 oktober 2017 zijn Sabine Rousseau en Pierre Beust aanwezig op ICDE, World Conference on online learning. Teaching in digital age. Re-thinking teaching & learning. Zij presenteren er een paper omtrent de uitgevoerde experimenten met online proctoring.

Online Proctoring : Experimentation of Remote Examination in E-learning programs

Our paper will deal with the change in examination conditions for students registered in remote learning courses. The remote learning evaluation on e-learning platforms (LMS) can carry out individual and collective activities but these activities aren’t supervised. For exams, examination conditions and identity verification must be as reliable as if the examination were taking place at the institution. Today, in most of the cases, students registered in remote learning course must always travel to the university to sit their exams. In some cases, the universities have foreign partners who can organize for the exams to take place near the student’s location (which can still be costly in terms of the workload for the organizations and not being able to offer it to a larger number of students, and also in terms of fees for the students). Students can’t understand no longer the incoherence between educational activities and home support on the online platforms and the exams that must be sat at the institution. We observed that many remote students only chose to sit their exams in the end of the second semester in the “second chance” exams session which, consequently, ends up being their only exam period, breaks the rules of fairness for the students. This is easy to understand for students who live far from the university and particularly for foreign students and/or students who work. To have to travel to an institute can be expensive (taking leave from work, transport, hotel costs, accommodation…). For some students, this constraint can even be the reason why they don’t register for the course, even when it is offered online. This problem makes remote learning unattractive to potential students.

Different ways of providing remote exams are now available and can solve this problem with educational alignment. These methods must be tested and evaluated in terms of their cost, their security, their resistance to fraud, the induced stress for the students and the conditions that are put in place. We must explore alternative methods for carrying out exams remotely. We are currently experimenting with examination conditions supervised by a webcam at the student’s house and screen sharing for students studying in two universities, members of the French Association of E-learning (Fédération Interuniversitaire de l’Enseignement à Distance – FIED). These are : – The Caen University in Normandy. – The Pierre & Marie Curie University of Paris The Caen’s experiment deals with students in a master degree in a health management program. The Paris’s experiment deals with all distant programs, in mathematics and physics, from bachelor to master, for specific categories of students only for this first year of experiment.

These experiments take place in the Erasmus+ European Project “Online Proctoring For Remote Examination” (OP4RE). We will give in the paper the first results obtained from our experiments and their outcomes. We will present the results of survey that were done before and after taking the exams to evaluate the impact of the stress, and the encountered difficulties. We will then discuss about how succeed in generalizing our experiments.

Geplaatst op

OP4RE @ International Technology Enhanced Assessment (TEA) Conferentie 2017

Het OP4RE team heeft een paper ingediend voor het International Technology Enhanced Assessment Conference in Barcelona genaamd Online Proctoring for Remote Examination: A State of Play in Higher Education in the EU. Silvester Draaijer zal dit paper presenteren op 6 oktober 2017.

Op 6 oktober zal Silvester Draaijer presenteren van 10:00-11:00 samen met een presentator van het TeSLA project. Van 11:30-13:00 zal er een round-table sessie gehouden worden waarin leden van het OP4RE team en het H2020 TeSLA project en anderen huidige problemen in Online Proctoring zullen bespreken.

Voor meer informatie: http://www.teaconference.org/en/programme/