Mes: Març de 2016

Calendari de treball del MOOC

Aquest és el calendari dels propers mesos del MOOC:
1. 29 de març, és a dir, el primer dia en tornar de Setmana Santa: gran llançament de promoció del curs, anunciat per al juliol (només en podrem donar una data exacta quan tinguem tots els materials mínims: vídeos amb subtítols demanats, tests, bibliografia i fórmula d’avaluació a punt al campus de Coursera per a la REVISIÓ UB-COURSERA. Quan això estigui, seguim tenint molta feina per deixar subtítols en tres llengües, materials didàctics d’autoaprenentatge, plataforma de Coursera atractiva per a l’usuari i tot automatitzat, tests i cartes inclosos.
QUÈ NECESSITEM, PER TANT, PER A ABANS DE SETMANA SANTA:
a) vídeo introductori acabat (perquè es pengi a pàgina principal del nostre curs a Coursera i a totes les xarxes socials), CONTRACTAT. N’hem fet dues revisions i en calculem una o dues més.
b) els dos vídeos regravats de cap i de nou editats i al servidor perquè els pugui penjar a Coursera, com està fent amb la resta. CONTRACTAT
c) tots els vídeos que tenim penjats a Coursera amb els subtítols en anglès + les bibliografies de cada unitat.
2. Durant tot el mes d’abril:
a) TÈCNIC AUDIOVISUAL: Tenir editat tot el mòdul 5 i penjat al servidor.
b) Comprovar que ja tenim els subtítols de Coursera en anglès, afegir-hi la resta de subtítols i els tests i deixar enllestida la plataforma de Coursera (no hi incloc els materials autodidàctics ni tampoc carregament i subtítols de cap vídeo del mòdul 5).
c) PANGURBAN/empresa de traducció: Rebre a primers d’abril els subtítols en català i castellà del mòdul 5.
Estic en contacte amb la UCL i he demanat que em confirmin que a l’abril enviaran editats els dos vídeos del mòdul 5. SÍ.
Així, el maig seria per penjar tots els materials del mòdul 5 a Coursera, tests, subtítols i preparació de materials autodidàctics. Sense això enllestit, ja haurem mirat d’enviar el curs perquè el revisin Coursera i la UB, que trigaran un mes.
JUNY: Rebem la revisió i tenim el curs a punt. Revisió de vincles , detalls que quedin.
Per part de l’organització:
MARÇ: resultats reunió amb vicerectorat / mitjans de comunicació.
ABRIL: sistema d’avaluació acabat, inclosos els P2P.
MAIG: sistema de cartes enllestit.
JUNY: revisió final i acordar si volem organitzar un hangout cada sis mesos o un any o si no ho volem fer.
Hem rebut la notificació d’acceptació per al: http://www.cidui2016.cidui.org/ca. Hi participem (en directe o no) tots els organitzadors de la primera edició.

Revisió del sistema d’avaluació

Com sabeu, Delfi i jo estem revisant el sistema d’avaluació del MOOC. Ens vam reunir el mes passat per fer-hi canvis. Coursera té una eina molt útil que permet veure com han funcionat les activitats d’avaluació una per una: quantes persones van fallar el primer intent del test i quina opció havien marcat en aquest cas, què va passar amb el segon intent… D’aquesta manera, t’adones fàcilment que hi ha preguntes que, si tothom encerta, pot ser fins i tot redundant preguntar, per innecessari i obvi. En altres casos, si més de la meitat dels estudiants han fallat el primer intent (i tens repartides el 50% de respostes entre dues opcions), pot ser que no quedi clara la diferència entre les dues respostes, ni per què és correcta o incorrecta. Aquí, cal: a) revisar que la pregunta estigui ben formulada, b) revisar que estigui ben explicat al vídeo i als tests, c) si això està ben fet i, precisament, interessa aquesta pregunta perquè és vegi la diferència subtil entre les dues opcions que els estudiants trien, és bo afegir una pista o un raonament de per què és incorrecta aquella opció un cop l’alumne l’ha triada. També seria convenient justificar, de la mateixa manera, la resposta correcta. Això és el que hem mirat. Jo he participat en la presa de decisions i he supervisat el procés, però a qui he d’agrair la tasca de reformulació i de revisió de les preguntes és a la Delfi.

Així, no només ens hem limitat a afegir les preguntes del mòdul 5 nou al MOOC, sinó que estem fent una revisió a fons de la de la resta de mòduls i ho fa Delfi com a organitzadora. Així també hi ha una certa homogeneïtat quant al tipus i al funcionament de les preguntes, que si deixàvem en mans dels diferents docents es perdia. Segons la nostra experiència, les preguntes obertes no van funcionar bé (les que demanen a l’estudiant que escrigui una paraula) i durant la primera edició en vam haver de suprimir dues, que no van comptar per a la nota final. Ara són tot preguntes tancades.

Sabeu que també es pot optar per preguntes a mitjan vídeo o al final. Les vam situar totes al final i l’experiència ha estat positiva. De fet, no hi va haver problemes destacables amb els tests més enllà de la pregunta que féiem a cada mòdul: has participat a l’activitat obligatòria del fòrum? Si l’alumne no hi entrava des de la barra en què es veu el seguiment del curs, podia saltar-se-la i, malgrat que vam posar un avís a la pàgina d’entrada a la plataforma i ho recordàvem al correu setmanal, hi seguia havent persones que no es recordaven de contestar a temps aquesta pregunta malgrat que afirmaven haver participat al fòrum. De totes maneres, a partir de la segona edició, participar al fòrum no és obligatori i no hi ha activitats que hi hagin de fer perquè, després que 21.000 estudiants haguessin contestat el mateix, el debat s’encallava i, en canvi, no hi va haver problemes de manca de participació, precisament.

L’any passat teníem entre 5 i 6 vídeos obligatoris per mòdul, més els optatius. Cada vídeo, uns 7 minuts. Total: 6 mòduls (enguany 5, un és nou, els altres dos estem fent consultes per si podem penjar-los al dipòsit de la UB en obert, perquè eren d’història de l’art i de literatura i, com sabeu, hem fet canvis en la concepció del MOOC). Cada vídeo obligatori, una pregunta d’avaluació i una setmana per contestar-la (en vam deixar un, l’inicial, sense). Hi havia 5 activitats obligatòries als fòrums (ara suprimides): una per mòdul, tret del mòdul de literatura, que comptava amb un exercici de redacció (P2P).

Enguany triplicarem el nombre de preguntes preparades per als tests. El curs passat, l’alumne tenia tres oportunitats per contestar correctament el test, sense que restés a la nota final per intent. La pregunta era la mateixa per a tothom (teníem una pregunta preparada per vídeo) i, encara que fallés, seguia apareixent-hi la mateixa pregunta. Tres intents. A la segona edició, no només hem revisat les preguntes, sinó que en lloc d’haver-ne una de preparada per vídeo, n’hi ha tres. Havíem pensat que, cada vegada que fallés, sortiria marcada la resposta correcta i l’oportunitat nova comportaria contestar una pregunta nova (cadascuna, quatre respostes possibles). Els intents, fins a tres, no resten. Després, no n’hi ha més. Aquestes preguntes estan pensades sobretot per aprendre, encara que comptin per a l’avaluació. Les preguntes apareixen de forma aleatòria: no les veu en el mateix ordre l’estudiant A que l’estudiant B. Si la resposta correcta és la primera, ja no veurien la pregunta 2 i 3 preparades per al mateix vídeo. Totes són sobre conceptes clau i per reforçar l’enfocament històric i acadèmic del curs, basat en la documentació i amb la voluntat de deslliurar-nos de prejudicis sobre l’època medieval, l’astronomia i fins i tot els inquisidors. Hi ha aclariments per a respostes incorrectes que poden suscitar dubtes. Aquesta era la nostra idea, ara us explicaré més avall què estem debatent sobre aquest tema.

A més de les preguntes-test, la segona edició constarà de dos P2P, un comentari sobre una imatge i un sobre documentació història. L’un al mòdul 3, l’altre al 6. Les preguntes-test es poden contestar sense un termini setmanal, durant aquella edició i abans que comenci la següent. Després de cada activitat de redacció (el curs passat els alumnes en van demanar més), que compta per fer (i per revisar), enviarem una de les cartes-fita (milestones), que substitueixen les cartes setmanals. Volem veure si un alumne que fa dues setmanes que no hi entra pot rebre algun avís que el torni a motivar, de totes maneres. És un tema que hem de remenar.

Enguany el curs representarà una millora substancial quant a pedagogia, aspectes tècnics i organització/enfocament. Hem estat polint tots aquests aspectes. A més, per al canvi de modalitat: hi afegirem materials pedagògics per a l’autoaprenentatge, sobretot als mòduls que presentaven un repte per a l’estudiant perquè no en coneixien els conceptes de base (el mòdul 4, per exemple, sobre alquímia al món islàmic): cronologies, vocabulari wiki, esquemes, apunts… Encara hi hem de treballar. Recursos en línia complementaris per a cada mòdul. Encara està verd. Hem contractat una persona per als materials. Es tracta de millorar l’autoaprenentatge, mentre que en un curs ininterromput (pensat perquè duri uns quants anys) no podem mantenir altres serveis presencials: l’any passat hi havia 7 xats setmanals amb un especialista (català/castellà/anglès), dues tutories en anglès com a Hangout amb vídeo al Youtube (igual, pel mateix motiu, tot i que no descartem fer-ne una cada sis mesos). Els vídeos setmanals contestant als dubtes dels fòrums seran els del curs passat, basats en els 21.000 estudiants que hi teníem matriculats.

Evidentment, fer-se càrrec d’un MOOC requereix estar al dia i el panorama canvia molt i ràpid, així que ens podeu fer arribar suggeriments sobre els darrers congressos, les últimes publicacions… Hem enviat una proposta per participar al congrés sobre el tema a la UAB.

Us deia que estàvem parlant amb la Delfi sobre més canvis quant al sistema d’avaluació a través dels tests. Us copio el correu que li he escrit amb pocs canvis.

Hola, Delfi,

Incloc al C. al correu perquè no comenci a penjar els tests fins que arribem a una decisió sobre com distribuir-los.
Quant a la funció pedagògica dels tests, que completa la formació que reben els alumnes al curs: les persones que encerten la pregunta a la primera, tenen en realitat menys possibilitats d’aprendre que els que no. Això fa que també em plantegi aprofitar totes les preguntes i que tots els alumnes hagin de contestar-ne tres per vídeo, però, si en un mòdul estàndard hi ha cinc o sis vídeos obligatoris (que són els que porten preguntes associades), significa que si els fem contestar tres preguntes per vídeo, són 18 preguntes a la setmana. Em sembla una mica excessiu.
Una altra cosa és que, preguntar immediatament després que hagin vist el vídeo d’uns sis minuts, no sé si facilita que realment l’interioritzin.
Et faig una proposta per seguir-ne parlant a veure què et sembla:
Es fa una bossa de preguntes per mòdul, que inclou les de tots els vídeos del mòdul.
L’estudiant, quan acaba de mirar tot el mòdul, contesta 10 preguntes de la bossa, com si fos un examen, en què li poden sortir les de tot el mòdul. Haurien de sortir de forma aleatòria (el C. hauria de fer proves en aquest sentit perquè no ho hem fet mai i no sabem com va).
Això significa que tenim més preguntes de les que en realitat es veuen, però a l’estudiant A n’hi sortiran 10 que no tenen per què ser totes les mateixes deu que les de l’estudiant B.
En aquest cas, l’estudiant hauria de tenir dues possibilitats (C. hauria de comprovar que es pugui fer):
Que li surtin les deu pregunte visibles al final del mòdul (hi accedeix directament després dels vídeos del mòdul, també pel menú de l’esquerra del campus on l’alumne veu l’índex del curs, com a entrada a part TEST MODULE 1, per exemple. L’estudiant sap que ha de contestar (fins que tanqui l’edició del curs i sense altres terminis), 5 tests + lliurar dos P2P/essays breus al final del mòdul 3 i del mòdul 6 (que són les milestones a les quals anirà associat un correu electrònic, en parlarem).
2 possibilitats que voldria que tingués:
L’estudiant les pot contestar una per una i comprovar una per una si és correcta la resposta.
L’estudiant pot contestar-les totes i no enviar les respostes fins que ho tingui tot.
En els dos casos, li surt si és correcta o no la resposta.
En els dos casos, l’estudiant té dos intents. És a dir, pot arribar a contestar dos cops LA MATEIXA PREGUNTA. Així n’aprèn. A més, en el cas del mòdul d’astrologia havíem parlat d’incloure-hi alguna pista si fallava en algunes preguntes més complicades (ho dic de memòria).
Per tant, pot tornar a intentar (sense efectes negatius en la nota) contestar les preguntes que ha fallat. Després d’intentar-ho dos cops (hem de tenir en compte que només hi ha 4 possibilitats), si no ho ha fet bé, se li mostra la resposta correcta (al mòdul 5 em sembla recordar que en algun cas justfiquem per què és la correcta per si no estava clar). En la resta de tests que he vist fins ara és innecessari.
Així l’estudiant també s’ho pren de forma més seriosa, això dels tests i està tot més ordenat i pot recuperar i accedir fàcilment a les preguntes. Com ho veus?
Estem esperant el nou vídeo introductori/promocional. Hem començat a carregar els vídeos millorats tècnicament a la plataforma nova. Reactivat les xarxes socials. Concertat reunions per entendre qüestions del nou format. Hem gravat el vídeo 5 nou. Si tot va bé, al juliol comencem la segona edició. Els vídeos nous, gravats amb un especialista, han donat uns resultats excel·lents. La inversió econòmica ha valgut la pena i, si podeu, feu-ho abans.
Avís: per sol·licitar subtítols des de la plataforma nova (on demand) no hi ha un botó en què hi diu “sol·licitar subtítols en anglès”, sinó que has de convertir l’esborrany del vídeo carregat en una publicació (“publica”) i aleshores diuen que triga una setmana a generar subtítols, que recordeu que s’han de revisar.