INFORME D’AVALUACIÓ DEL CANVI METODOLÒGIC.
II ANY D’ADAPTACIÓ A l’EEES A LA UPF.
CURS 2006-2007.
Programa per la Qualitat Educativa (PQE)
octubre de 2007
INTRODUCCIÓ
Aquest informe presenta els resultats obtinguts
a l’avaluació de la implantació del model
metodològic Bolonya durant el curs 2006-2007,
a les titulacions adaptades a l’EEES: Economia i
Administració i Direcció d’Empreses, Dret,
enginyeria en Informàtica, enginyeria tècnica de
Telecomunicacions, Humanitats, Publicitat i
Relacions Públiques, Traducció i Interpretació.
En algun cas es mostren les comparatives amb
el curs 2005-2006, en el benentès que a cada
titulació, les assignatures d’enguany poden no
ser les mateixes que el curs anterior. En tot, a
manca de més dades, ens serveixen de
referents i d’indicadors suggerents.
L’informe dóna
següents:
resposta
a
les
qüestions
I. Quines variacions hi ha en el rendiment
acadèmic dels estudiants de les titulacions
que han implementat Bolonya?
II.Quina és la satisfacció dels estudiants amb
la nova metodologia?
III. Com valoren els estudiants els diferents
elements pedagògics del nou mètode?
IV. Quins factors intervenen o expliquen la
satisfacció dels estudiants amb l’experiència i
amb el mètode?
Finalment, s’explica la metodologia de recollida i
anàlisi de les dades (V) i es presenten els
gràfics i taules amb les dades corresponents
(VI).
I. RESULTATS DE RENDIMENT ACADÈMIC
Es manté força estable en totes les
titulacions. En un periode comparatiu de 4
cursos acadèmics, no s’han detectat grans
variacions.
La qualificació mitjana obtinguda es manté
entre 6 i 7 tal i com passava al curs anterior
2005-2006 quan es va iniciar la prova pilot.
La proporció d’estudiants suspesos disminueix
en totes les titulacions excepte en dues:
Traducció i Interpretació i enginyeria en
Informàtica; que en ambdós casos s’incrementa
lleugerament.
Finalment,
el
nombre
d’estudiants que no es presenten a examen
es redueix, excepte en el cas de Traducció i
Interpretació,
enginyeria
tècnica
en
Telecomunicació i Publicitat i Relacions
Públiques. En aquests tres casos, es mostra un
lleuger increment.
Gràfiques per titulacions
- Figura 1. Evolució de la nota mitjana per
titulacions, curs 06-07
- Figura 1.1. Evolució de la nota mitjana per
titulacions, curs 05-06.
-Figura 2. Evolució en la proporció de
suspesos, curs 06-07.
-Figura 3. Evolució en la proporció de no
presentats a examen, curs 06-07.
II. RESULTATS DE SATISFACCIÓ
En relació a la valoració global que fan els
estudiants de l’experiència, la mitjana
obtinguda és de 5.87 sobre 10. El passat curs
05-06 el 70% dels estudiants de les titulacions
analitzades manifestava que la valoració de
l’experiència era gens bona o no molt bona.
Pel que fa a la satisfacció amb els seminaris la
puntuació és de 5.71. El curs passat prop del
50% dels estudiants mostraven gens o poca
satisfacció amb els
seminaris, amb poques diferències entre
titulacions. Per tant sembla que la tendència és
a cert manteniment de la satisfacció.
Gràfiques per titulacions
- Figura 4. Valoració global de l’experiència, curs
06-07.
- Figura 5. Valoració global de l’experiència, curs
05-06.
III.RESULTATS DELS ELEMENTS PEDAGÒGICS DEL MÈTODE
NOTA: Aquests elements són valorats pels estudiants
en una escala que va del 0 (puntuació mínima) al 10
(puntuació màxima)1.
La valoració que fan els estudiants dels
elements pedagògics que intervenen en el
desenvolupament
de
l’actual
mètode
pedagògic, es situa en tots els casos entre
una puntuació mínima del 5.5 i màxima del
6.38.
Gràfiques per titulacions
La utilitat del Pla Docent com a eina
d’orientació i de planificació: 5.87
- Figura 5. Valoració del Pla Docent, curs 06-07
L’avaluació continuada, com a mecanisme
que permet veure els seus progressos durant
l’assingatura la valoren en 5.59. El curs passat
al voltant del 50% dels estudiants creien que
l’avaluació continuada no els havia ofert cap o
poca informació del seu progrés d’aprenentatge.
- Figura 6. Valoració de l’avaluació contínua,
curs 06-07
- Figura 6.1. Valoració de l’avaluació contínua,
curs 05-06
- Figura 7. Valoració dels materials per al treball
La
utilitat dels materials, recursos i
indicadors rebuts per a fer les activitats de
manera autònoma fora de l’aula, la valoració és
de 5.87. El curs passat, al voltant del 40% dels
estudiants feien una valoració gens bona o no
molt bona dels materials disponibles per al
treball fora de l’aula.
fora de l’aula, curs 06-07
- Figura 7.1. Valoració dels materials per al
treball fora de l’aula, curs 05-06
- Figura 8. Satisfacció amb els seminaris, curs
06-07
La
satisfacció amb els seminaris: Ho
valoren amb un 5.71. El curs passat,
pràcticament el 50% dels estudiants mostraven
cap o poca satisfacció amb els seminaris.
- Figura 8.1. Satisfacció amb els seminaris, curs
Valoració
sobre la possibilitat de
participació i interacció amb els professors i
companys al seminari: 6.38. Les activitats que
es fan de manera més freqüent als seminaris
són: exercicis pràctics i escoltar la lliçó. Les que
menys, presentacions orals i tests d’avaluació.
seminaris, curs 06-07
Dedicació a l’estudi fora de l’aula: 4.49
- Figura 12. Freqüència d’activitats fora de l’aula
05-06
- Figura 9. Valoració de la participació als
- Figura 10. Valoració de la coordinació entre
sessions plenàries i sessions en grup reduït,
curs 06-07
- Figura 11. Hores d’estudi setmanals
hores setmanals. Els hàbits d’estudi fora de
l’aula se centren en els exercicis pràctics i la
consulta d’informació. Les activitats que menys
fan són preparar exposicions i passar els apunts
a nèt.
Figura 13. Freqüència d’activitats en els
seminaris
Coordinació entre les sessions plenàries i els
seminaris, els estudiants li donen una nota de:
6.25.
1
Cal destacar que al curs 2005-2006
s’utilitzaven uns criteris de resposta qualitatius,
diferents als del curs 2006-2007.
3
octubre del 2007
IV. MODEL EXPLICATIU DE LA SATISFACCIÓ
1. Quins són els factors que més incideixen
en la valoració de l’experiència?
4. I quines són les activitats, dins del
seminari, que fan que el valorin millor i
n’estiguin més satisfets?
1r. La satisfacció amb els seminaris.
2n. Les sessions de gran grup per assentar els
fonaments de l’assignatura.
3r. Els materials per al treball autònom fora de
l’aula de l’estudiant.
1r. Les activitats de debat i de discussió.
2n Els exercicis pràctics.
3r. Els treballs en grup.
D’altra banda, l’activitat que menys els satisfà
són les presentacions orals.
2. Quin és el factor que més incidència té en
la satisfacció amb els seminaris?
Finalment, cal assenyalar que si considerem un
model explicatiu, on els factors que s’han tingut
en compte per explicar la satisfacció amb
l’experiencia siguin els següents:
•
Pla Docent,
•
Avaluació,
•
Materials,
•
Seminaris,
•
Treball fora de l’aula i,
•
Coordinació gran grup-petit grup
La possibilitat de participació. És a dir, quan
poden participar activament i interaccionar amb
el professor i els companys, és quan es mostren
més satisfets amb la nova modalitat de
seminaris.
3. Quines activitats els fan participar més
activament?
Podem dir que la consideració d’aquests
elements, ens permeten entendre la valoració
global de l’experiència en un 76%. Per tant
aproximadament el 20% restant es deu a
factors que no contemplem en la nostra anàlisi.
1r. Les activitats de debat i de discussió.
2n. Els exercicis pràctics.
3r. i amb força diferència amb els altres dos, el
treball sobre lectures.
L’activitat que fomenta menys la participació, és,
òbviament, escoltar la lliçó del professor.
4
octubre del 2007
V. RESSENYA METODOLÒGICA I PARTICIPACIÓ
El present informe s’ha elaborat a partir dels
informes d’avaluació realitzats trimestralment.
Les dades han estat obtingudes a través de 2
fonts: qualificacions acadèmiques i qüestionari
d’opinió elaborat pel PQE que es publica
trimestralment dues setmanes abans de l’inici
del període d’exàmens, al Campus Global.
La participació mitjana en el qüestionari d’opinió
en el curs 2006-2007 ha estat del 18.73%.
Matriculats Participants % resposta
Pel que fa al tipus de tècniques d’anàlisi de les
dades duta a terme, s’han combinat diferents
nivells d’anàlisi estadística:
•
•
•
1r trimestre
Anàlisi descriptiva: inclou la mitjana de
resposta per a cada pregunta.
Anàlisi de correlacions no paramètrica:
permet veure l’ existència o no de relacions
entre variables, i la força d’aquestes
relacions.
Anàlisi de regressió categòrica: permet
construir un model a partir de diverses
variables explicatives i, observar la seva
contribució, d’una en una i en conjunt, en
l’explicació del comportament de la variable
depenent (en aquest cas, de la satisfacció).
2080
401
19,28
2196
433
19,72
1274
219
17,19
2on trimestre
3er trimestre
5
octubre del 2007
VI. ANNEX
1. Rendiment acadèmic:
Figura 1: Evolució de la nota mitjana de les assignatures, curs 2006-2007.
10
8
6
4
2
r
0
2003-2004
2004-2005
2005-2006
2006-2007
Economia i Ade
5,79
6,13
6,39
6,67
Dret
5,15
5,83
5,88
6,19
Humanidades
6,16
6,21
6,20
6,44
Traducció i Interpretació
6,92
6,78
6,97
6,80
enginyeria Informàtica
5,42
5,33
5,03
4,84
enginyeria tècnica en Telecomunicació
5,43
4,75
5,32
5,30
6,56
6,81
Publicitat i RP
Figura 1.1: Evolució de la nota mitjana de les assignatures, curs 2005-2006
Traducción e Interpretación
Economia y ADE
Humanidades
Publicidad y Relaciones Públicas
10
8
6
7 6,4 6,8
6,7
6,2 6,4
6,6
6,2
6,7
7,2
7,0
6,3 6,2
4
2
0
2002-2003
2003-2004
2004-2005
6
2005-2006
octubre del 2007
Figura 2: Proporció d’estudiants que suspenen les assignatures.
Evolució en la proporció de suspesos, per titulacions.
50
45
40
35
30
25
20
15
10
5
0
2003-2004
2004-2005
2005-2006
2006-2007
Economia i Ade
23,75
16,88
12,83
9,56
Dret
31,53
22,56
21,20
15,59
Humanitats
17,08
16,38
14,23
11,25
Traducció i Interpretació
8,04
9,98
6,57
9,00
enginyeria Informàtica
29,89
31,57
31,72
34,85
enginyeria tècnica en
Telecomunicació
27,22
26,66
22,37
18,34
9,47
8,41
Publicitat i RP
7
octubre del 2007
Figura 3: Proporció d’estudiants que no es presenten a examen.
Evolució en la proporció d'estudiants que no es presenten a examen, per
titulacions.
50
45
40
35
30
25
20
15
10
5
0
2003-2004
2004-2005
2005-2006
2006-2007
Economia i Ade
8,19
7,91
9,37
7,26
Dret
20,16
13,16
11,63
9,43
Humanitats
19,74
19,72
25,78
23,32
Traducció i Interpretació
10,48
12,10
7,80
14,54
enginyeria Informàtica
15,88
23,79
29,62
23,80
enginyeria tècnica en
Telecomunicació
14,06
37,74
40,51
49,90
3,98
8,98
Publicitat i RP
8
octubre del 2007
2. Satisfacció
Figura 4: Valoració global de l’experiència, curs 2006-2007.
Valoració global de l'experiència
10
8
6
4
2
0
Economia i
Ade
Dret
Humanitats
Publicitat i RP Traducció i
Interpretació
enginyeria
Informàtica
enginyeria
Telecomunica
ció
Mitjana: 5.87
Figura 4.1: Valoració global de l’experiència, curs 2005-2006.
Valoración global de
la experiéncia
100%
nada buena
no muy buena
buena
muy buena
80%
60%
40%
20%
0%
Economía y
ADE
Humanidades
Publicidad y RP
Traducción e
Interpretación
9
octubre del 2007
3. Valoració dels elements pedagògics del mètode Bolonya
Figura 5: El Pla Docent d’assignatura m’ha permès saber què s’espera de mi en aquesta
assignatura i m’ha ajudat a orientar-me i planificar-me millor.
Pla Docent m'ha ajudat a orientar-me
10
8
6
4
3.499
2
3.528
2.469
2.739
559
0
Economia
Dret
Humanitats
Publicitat
Traducció i
Interpretació
enginyeria
Informàtica
enginyeria de
Telecomunica
ció
Titulació
Mitjana: 5.87
10
octubre del 2007
Figura 6: L’avaluació d’aquesta assignatura, ha fet que m’adonés dels meus progressos al
llarg del trimestre i reconduir la meva activitat en cas necessari, curs 2006-2007.
Avaluació contínua i percepció d'aprenentatge
10
8
6
4
2
0
Economia i
Ade
Dret
Humanitats
Publicitat i RP Traducció i
Interpretació
enginyeria
Informàtica
enginyeria
Telecomunica
ció
Mitjana: 5.59
Figura 6.1: L’avaluació d’aquesta assignatura, ha fet que m’adonés dels meus progressos
al llarg del trimestre i reconduir la meva activitat en cas necessari, curs 2005-2006.
Evaluación continua
y percepción del
autoaprendizaje
100%
ninguna
poca
80%
bastante
mucha
60%
40%
20%
0%
Economía y ADE
Humanidades
Publicidad y RP
Traducción e
Interpretación
11
octubre del 2007
Figura 7: Les indicacions, materials i/o recursos per poder fer les activitats previstes fora
de l’aula pel meu compte, han estat útils, curs 2006-2007.
Valoració dels materials per al treball autònom
10
8
6
4
2
0
Economia i
Ade
Dret
Humanitats
Publicitat i RP Traducció i
Interpretació
enginyeria
Informàtica
enginyeria
Telecomunica
ció
Mitjana: 5.87
Figura 7.1: Les indicacions, materials i/o recursos per poder fer les activitats previstes fora
de l’aula pel meu compte, han estat útils, curs 2005-2006.
Valoración de los
materiales para el
trabajo autónomo
100%
nada buena
no muy buena
80%
buena
muy buena
60%
40%
20%
0%
Economía y ADE
Humanidades
Publicidad y RP
Traducción e
Interpretación
12
octubre del 2007
Figura 8: Satisfacció amb els seminaris, curs 2006-2007.
10
Satisfacció amb els seminaris
8
6
4
2
0
Economia i
Ade
Dret
Humanitats
Publicitat i RP Traducció i
Interpretació
enginyeria
Informàtica
enginyeria
Telecomunica
ció
Mitjana: 5.71
Figura 8.1: Satisfacció amb els seminaris, curs 2005-2006.
Satisfacción con los
seminarios
100%
ninguna
poca
bastante
80%
mucha
60%
40%
20%
0%
Economía y ADE
Humanidades
Publicidad y RP
Traducción e
Interpretación
13
octubre del 2007
Figura 9: Els seminaris en grups reduïts m’han permès participar amb el professor i amb els
companys, curs 2006-2007.
Seminaris han permès participar
10
8
6
4
3.531
2
3.250
2.453
3.277
0
Economia i
Ade
Dret
Humanitats
Publicitat i RP Traducció i enginyeria en enginyeria de
Interpretacio Informàtica Telecomunica
ció
Titulació
Mitjana: 6.38
14
octubre del 2007
Coordinació entre les activitats de seminari i les de
gran grup
Figura 10: Hi ha hagut coordinació entre les activitats fetes al grup gran i als seminaris (i a
les classes pràctiques, si n’has fet)?
10
8
6
4
2
2.524
2.848
0
Economia i
Ade
Dret
Humanitats Publicitat i RP Traducció i
Interpretacio
enginyeria
en
Informàtica
enginyeria
de
Telecomunic
ació
Titulació
Mitjana: 6.25
15
octubre del 2007
Figura 11: Quantes hores d’estudi setmanals de mitjana dediques a l’assignatura fora de
l’aula?
3.450
Hores setmanals d'estudi
40
3.192
30
2.772
2.562
2.569
20
2.030
497
2.644
1.385
1.448
1.281
2.791
567
2.511
322
1.350
1.285
3.142
1.415
2.549
2.793
1.374
3.166
3.254
1.347
10
3.512
558
1.533
546
1.408
0
Economia i
Ade
Dret
Humanitats
Publicitat i RP Traducció i enginyeria en enginyeria de
Interpretacio Informàtica Telecomunica
cio
Titulació
Mitjana: 4.49
Figura 12: Ordena les set activitats següents, en funció de la freqüència amb que les has fet
als seminaris d’aquesta assignatura, numerant-les de més a menys (de 7 a 1) sense repetir
Assignatura
Total
Activitats realitzades als seminaris
1a
Exercicis pràctics
2a
Escoltar la lliçó
3a
Treballs sobre lectures
4rta
Activitats de debat i discussió
5ena
Treball en grup
6ena
Tests d’avaluació
7ena
Presentacions orals
16
octubre del 2007
Figura 13: Ordena les set activitats següents, en funció de la freqüència amb que les has fet
fora de l’aula al llarg del trimestre, numerant-les de més a menys (de 7 a 1) sense repetir:
Assignatura
Total
Activitats realitzades fora de l’aula
1a
Exercicis pràctics
2a
Consulta d’informació
3a
Lectura de textos
4rta
Treballs en grup
5ena
Memoritzar
6ena
Preparar exposicions
7ena
Passar els apunts a net
17
octubre del 2007
CORRELACIONS entre
VARIABLES (curs 2006-2007)
Pla Docent
ha facilitat
orientació
Avaluació
continua i
percepció
d’aprenentatge
Materials
per al
treball
autònom
Seminari
s han
permès
participa
Satisfacci
ó amb els
seminaris
Coordinació
sessiones
plenàries i
grup reduït
Valoració
global de
l’experie.
Rho de
Sperman
Coeficiente de
correlación
1,000
,727(**)
,671(*
*)
,550(*
*)
,622(**
)
,542(**)
,693(**
)
Sig. (bilateral)
.
,000
,000
,000
,000
,000
,000
N
3023
2848
3023
3021
3021
3017
3017
Coeficiente de
correlación
,727(**)
1,000
,675(**
,641(**
)
,541(**)
)
,568(*
*)
,707(**
)
Sig. (bilateral)
,000
.
,000
,000
,000
,000
,000
N
2848
3207
3207
3205
3205
3201
3201
Coeficiente de
correlación
,671(**)
,675(**)
1,000
,572(*
*)
,646(**
)
,544(**)
,710(**
)
Sig. (bilateral)
,000
,000
.
,000
,000
,000
,000
N
3023
3207
3536
3534
3534
3530
3530
Coeficiente de
correlación
,550(**)
,568(**)
,572(*
*)
1,000
,748(**
)
,516(**)
,666(**
)
Sig. (bilateral)
,000
,000
,000
.
,000
,000
,000
N
3021
3205
3534
3534
3533
3530
3530
Coeficiente de
correlación
,622(**)
,641(**)
,646(*
*)
,748(*
*)
1,000
,596(**)
,804(**
)
Sig. (bilateral)
,000
,000
,000
,000
.
,000
,000
N
3021
3205
3534
3533
3534
3530
3530
Coeficiente de
correlación
,542(**)
,541(**)
,544(*
*)
,516(*
*)
,596(**
)
1,000
,670(**
)
Sig. (bilateral)
,000
,000
,000
,000
,000
.
,000
N
3017
3201
3530
3530
3530
3530
3530
Pla Docent ha
facilitat
orientació
Avaluació
continua i
percepció
d’prenentatge
Materials per
al treball
autònom
Seminaris
han permès
participar
Satisfacció
amb els
seminaris
Coordinació
sessions
plenàries i
grup reduït
18
octubre del 2007
19
octubre del 2007
Qüestionari
Opinió dels estudiants
Valoració de la prova pilot “metodologia Bolonya”
Codi i nom de l’assignatura
Les respostes es valoren en una escala del 0 al 10
1. El Pla Docent d’assignatura m’ha permès saber què s’espera de mi en aquesta
assignatura i m’ha ajudat a orientar-me i planificar-me millor.
0
1
2
3
4
5
6
7
8
9
10
no he consultat el Pla Docent
2. L’avaluació d’aquesta assignatura, ha fet que m’adonés dels meus progressos al
llarg del trimestre i reconduir la meva activitat en cas necessari.
0
1
2
3
4
5
6
7
8
9
10
no he fet avaluació continuada
3. Les indicacions, materials i/o recursos per poder fer les activitats previstes fora de
l’aula pel meu compte, han estat útils.
0
1
2
3
4
5
6
7
8
9
10
4. Les sessions de gran grup m’han permès assolir els fonaments de l’assignatura.
0
1
2
3
4
5
6
7
8
9
10
5. Els seminaris en grups reduïts m’han permès participar amb el professor i amb els
companys.
0
1
2
3
4
5
6
7
8
9
10
6. Ordena les set activitats següents, en funció de la freqüència amb que les has fet als
seminaris d’aquesta assignatura, numerant-les de més a menys (de 7 a 1) sense
repetir:
Discussions i debats
Presentacions o exposició oral de treballs
Treball a partir de lectures i/o notícies
20
octubre del 2007
Elaboració de treballs en petits grups
Resoldre o corregir exercicis pràctics
Escoltar la lliçó del professor
Tests o exercicis d’avaluació
7. Estic satisfet amb el plantejament i el funcionament dels seminaris.
0
1
2
3
4
5
6
7
8
9
10
8. Les sessions de pràctiques m’han servit per aplicar els coneixements.
0
1
2
3
4
5
6
7
8
9
10
no es fan classes pràctiques a la meva titulació.
9. Ordena les set activitats següents, en funció de la freqüència amb que les has fet fora
de l’aula al llarg del trimestre, numerant-les de més a menys (de 7 a 1) sense repetir:
Passar els apunts a net
Treballs en grup
Exercicis pràctics
Consulta de recursos d’informació (bibliografia, Internet, etc.)
Lectures d’articles, textos, llibres
Preparar exposicions de treballs
Memoritzar
10. Quantes hores d’estudi setmanals de mitjana dediques a l’assignatura fora de l’aula?
.......... hores.
11. Hi ha hagut coordinació entre les activitats fetes al grup gran i als seminaris (i a les
classes pràctiques, si n’has fet)?
0
1
2
3
4
5
6
7
8
9
10
8
9
10
12. Valoració global de l’experiència en aquesta assignatura.
0
1
2
3
4
5
6
7
13. Vols fer algun altre comentari respecte l’experiència en aquesta assignatura?
........................................................................................................................................
21
octubre del 2007