Het "multiple-choice" tentamen "Trillingen en balancering" januari 1968: een objectieve studietoets contra een mondeling examen

Het "multiple-choice" tentamen "Trillingen en balancering"

januari 1968

Citation for published version (APA):

Janssen, J. D. (1968). Het "multiple-choice" tentamen "Trillingen en balancering" januari 1968: een objectieve studietoets contra een mondeling examen. (DCT rapporten; Vol. 1968.001). Technische Hogeschool Eindhoven.

Document status and date: Gepubliceerd: 01/01/1968

Document Version:

Uitgevers PDF, ook bekend als Version of Record

Please check the document version of this publication:

• A submitted manuscript is the version of the article upon submission and before peer-review. There can be important differences between the submitted version and the official published version of record. People interested in the research are advised to contact the author for the final version of the publication, or visit the DOI to the publisher's website.

• The final author version and the galley proof are versions of the publication after peer review.

• The final published version features the final layout of the paper including the volume, issue and page numbers.

Link to publication

General rights

Copyright and moral rights for the publications made accessible in the public portal are retained by the authors and/or other copyright owners and it is a condition of accessing publications that users recognise and abide by the legal requirements associated with these rights. • Users may download and print one copy of any publication from the public portal for the purpose of private study or research. • You may not further distribute the material or use it for any profit-making activity or commercial gain

• You may freely distribute the URL identifying the publication in the public portal.

If the publication is distributed under the terms of Article 25fa of the Dutch Copyright Act, indicated by the “Taverne” license above, please follow below link for the End User Agreement:

www.tue.nl/taverne

Take down policy

If you believe that this document breaches copyright please contact us at: openaccess@tue.nl

providing details and we will investigate your claim.

H e t ffX4ultiple -Choic e it

-

tentamen

$ ' T r i l l i n g e n en B a l a n c e r i n g " j a n u a r i

'1968;

e e n o b j e c t i e v e s t u d i e t o e t s c o n t r a een mondeling examen

1.

Inleiding

2. De test: algemene gegevens en resultaten

3 .

De grens voldoende

-

onvoldoende

4,

Het vaststellen van de cijfers in een tien-puntsschaal

S e Rog enige gegevens van de test en de items

6,

Is

vooraf een schatting te geven van de ?'moeilijkheidt9 van een item?

7 . Xet mondeling examen

8.

Vergelijking van de resultaten van de M.C.-test en het mondeling onderzoek

9 *

De reacties van de studenten op de Hi.C.-test I O . Conclusies en voorstellen Blz o 1

-

4

15

18

7 9

23

25

30

41

43

Bijlage

I

Vragenlijst bij het tentamen "Trillingen en Balanc erin&* o

- 3 -

P r o p o r t i e

8, Was d e i n s t r u c t i e v a n Ir.

F.E.

Veldpaus

goed o f s l e c h t afgestemd op d i t type tentamen ? a. z e e r goed b e goed c o h e t g i n g w e l d , s l e c h t e, z e e r s l e c h t f. n i e t g e v o l g d

9.

Hoe vond U i n h e t algemeen de formu- l e r i n g d e r vragen? a, zeer goed b. goed c . matig d. s l e c h t e, z e e r s l e c h t

IO.

V o e l d e U z i c h b i j deze t e s t r u s t i g e r o f n e r v e u z e r dan b i j klassieke s c h r i f - t e l i j k e tentamens i n de mechanica? a. v e e l r u s t i g e r b e r u s t i g e r c . even. r u s t i g d. e v e n n e r v e u s e , n e r v e u z e r Î. v e e l n e r v e u z e r 0,00

o.

12

0.31

0e23

o.

15

O,

19

0,04

0.39

0,43

0 * 1 1 0.04 Opmerkingen:

Propor t i e

4,

Hoe z o u d t U de aard v a n de v r a g e n i n h e t algemeen t y p e r e n ? a. v e e l t e v e e l t h e o r i e b. t e v e e l t h e o r i e c e e e n goed e v e n w i c h t t u s s e n t h e o r i e e n t o e p a s s i n g d. t e v e e l t o e p a s s i n g e. v e e l t e v e e l t o e p a s s i n g

5. Denkt U d a t Urn p r e s t a t i e s met deze t e s t e e r l i j k e r o f minder e e r l i j k b e o o r d e e l d worden dan met een k l a s s i e k s c h r i f t e l i j k ‘centamen (b,v. met 3 v r a a g s t u k k e n ) ? a, v e e l e e r l i j k e r b. e e r l i j k e r c . h e t maakt geen v e r s c h i l d. minder e e r l i j k e. v e e l minder e e r l i j k 6. Vond U d e z e t e s t p r e t t i g e r o f v e r v e l e n d e r dan Uw v r o e g e r e mechanica t e n t m e n s ? a, v e e l p r e t t i g e r b e p r e t t i g e r c o h e t maakt geen v e r s c h i l d v e r v e l e n d e r e , v e e l v e r v e l e n d e r

7 .

Bias h e t c o l l e g e v a n Dr.Ire

J-D.

Janssen goed o f s l e c h t afgestemd op d i t tyge tentamen? a. zeer goed b. goed c I h e t g i n g w e l d. s l e c h t e, z e e r s l e c h t f. n i e t v a n t o e p a s s i n g

0.03

0.28

0652

0.17

0-00 0,07 0.25 0.11

0 ~ 3 6

0,21 0,00

0.28

0,00

O

.34

0.38

0 6 0 0

0.38

0-08

0.08

0.42

0-04

- 3 -

T.H.Z.

WE

-

68/1 Het lWul

t

i p l e - C h o i c e''

-

t e n t amen

" T r i l l i n g e n en B a l a n c e r i n g " j a n u a r i 1968 ;

een o b j e c t i e v e s t u d i e t o e t s c o n t r a een mondeling examen

I n l e i d i n g

Het vak r r T r i l l i n g e n en B a l a n c e r i n g "

(4.500)

wordt i n h e t V-semester g e d o c e e r d gedurende twee uur p e r week door de s c h r i j v e r v a n deze no- t i t i e s . H e t werd i n h e t najaarssernekte

gegeven. I n voorgaande j a r e n maakten t r i l l i n g e n en b a l a n c e r i n g d e e l u i t v a n h e t door Prof. E s m e i j e r gedoceerde

-

en t h a n s verdwenen

-

c o l l e g e : tïTechnische Dynamica". Aan h e t c o l l e g e i s een i n s t r u c t i e t o e g e v o e g d v a n

2

uur p e r v e e r t i e n dagen.

De inhoud v a n h e t c o l l e g e stemt z e e r goed o v e r e e n met de inhoud v a n h e t corresponderende d e e l v a n h e t v r o e g e r e c o l l e g e I1Technische Dyna- mica", I n h e t b e g i n v a n h e t semester w e r d nog n i e t gedacht a a n een o b j e c t i e v e s t u d i e t o e t s , N e l w e r d ~ eg aar g e s t r e e f d h e t g e b i e d d o e l - matig i n k l e i n e p a r t j e s t e s p l i t s e n , D e t h e o r i e werd a f g e l e i d aaa

de hand v a n e n i g e zogenaamde standaard-systemen,

Bovendien werd v r i j v e e l t i j d besteed om de t h e o r i e t o e t e p a s s e n i n a n d e r e v e r s c h i j n i n g rmen v a n een probleem, D i t waren s t e e d s een- v o u d i g e v o o r b e e l d e n . G e t r a c h t w e r d z o goed en d u i d e l i j k m o g e l i j k o n d e r s c h e i d t e maken t u s s e n hypothesen en c o n c l u s i e s e Z o v e e l werd verraeden om een b e p a a l d e stap i n h e t mathematisch model

t e maken met mechanica overwegingen, V e e l l i e v e r b a s e e r d e n w i j ons d a a r b i j op wiskundige g e g e v e n s en eigenschappen, @aar m o g e l i j k pro- beerden w i j a c h t e r a f de v e r s c h i l y e n d e ( d e e l ) - r e s u l t a t e n u i t de m a - t h e m a t i s c h e beschouwing p h y s i s c h t e i n t e r p r e t e r e n ,

Het l e e k ons d o e l m a t i g de e e r s t e c o l l e g e - u r e n t e b e s t e d e n a a n

-

r e e d s bekende

-

wiskunde en mechanica, l i d i j h e r h a a l d e n d e f i n i t i e s e n karak- t e r i s t i e k e eigenschappen, Soms l e v e r d e n w i j h e t b e w i j s i n a n d e r e g e v a l l e n verwezen w i j s l e c h t s n a a r de c o l l e g e d i c t a t e n .

Op deze manier t r a c h t t e n w i j t e b e r e i k e n d a t ons b e t o o g n i e t t e l k e n s onderbroken hoefde t e worden v o o r h e r h a l i n g e n v a n inoudei* st o f , W i j menen d a t deze v p z e t gelilkt ise

Het c o l l e g e werd g e v o l g d door 25 à 35 personen. I n j a n u a r i 1968 deden

30

k a n d i d a t e n mee aan h e t tentamen (examen). Het merendeel v a n d e

t e n t a m i n a n d i v o l g d e regelmatig h e t c o l l e g e . H i e r b i j moet aangetekend worden d a t e r geen c o l l e g e d i c t a a t aanwezig is.

maal

*

I n d i t r a p p o r t z i j n de b e g r i p p e n 'Itentamen" en "examen" synoniem,

E i n d novegbes

1967

werd b e s l o t e n een o b j e c t i e v e s t u d i e t o e t s t o e t e

passen, Op a d v i e s v a n D r . PIeuwese, g r o e p o n d e r w i j s r e s e a r c h , werd gekozen v o o r de multiple-choice-vorm met v i e r a l t e r n a t i e v e n en met een f t z e k e r h e i d s t o e t s F t , D i t w i l zeggen d a t i e d e r item bestaat u i t een vraag, o p d r a c h t o f o n v o l l e d i g e bewering en v i e r antwoorden o f a a n v u l l i n g e n . Een v a n deze v i e r a l t e r n a t i e v e n i s j u i s t ; a l l e andere z i j n o n j u i s t , B e h a l v e h e t k i e z e n van h e t n a a r z i j n mening j u i s t e al- t e r n a t i e f moet de k a n d i d a a t bovendien vermelden o f h i j zeker is v a n z i j n antwoord o f n i e t , Een z e k e r antwoord d a t j u i s t is l e v e r t de kan-

d i d a a t

2

punten, een zeker antwoord d a t o n j u i s t is

-1

punt, Een goed antwoord waar de k a n d i d a a t n i e t z e k e r v a n w a s l e v e r t hem

1

p u n t ; een f o u t antwoord zonder zekerheid i n g e v u l d en e e n o v e r g e s l a g e n vraag l e v e r e n O punten. E n i g e t i j d v ó ó r h e t examen werden de k a n d i d a t e n

t i j d e n s h e t c o l l e g e d u i d e l i j k g e a t t e n d e e r d op de b e s t e e x a m e n s t r a t e g i e , Z i j werd bovendien e x p l i c i e t verrmield b i j de t e s t .

B e h a l v e o v e r de F ? m ~ l t i y l e = c h 0 i v u 9 f vma ( a f g e k o r t a l s M,C, is nog e v e n gedacht o v e r e e n "multiple-true-false" vorm, Ilet b e l a n g r i j k s t e v e r s c h i l met de M.C, vorm is d a t i e d e r der a l t e r n a t i e v e n j u i s t

%

z i j n , Ons bezwaar h i e r t e g e n i s d a t de formuleringen o n g e l o o f l i j k p r e c i e s moeten z i j n , I n h e t o n d e r h a v i g e vak r e s u l t e e r t d i t in h e t al- gemeen i n zeer u i t v o e r i g e a l t e r n a t i e v e n .

B e s l o t e n werd een experiment u i t t e v o e r e n om de r e s u l t a t e n v a n een o b j e c t i e v e t e s t t e v e r g e l i j k e n met de r e s u l t a t e n v a n e e n mondeling onderzoek, Er werd voor gezorgd d a t de

2

examinatoren v o o r c?e mon- d e l i n g e tentamens op geen e n k e l e manier op de h o o g t e kwamen v a n de

H.Ce v r a g e n en de r e s u l t a t e n v a n de t e s t , D i t b e t e k e n d e d a t twee l e d e n v a n de g r o e p n i e t konden meewerken a a n de c o n s t r u c t i e v a n de

t e s t . Van d r i e a n d e r e kon n i e t worden aangenomen d a t z i j voldoende op de hoogte waren v a n c o l l e g e s t o f , Het g e v o l g is d a t d r i e mensen

beschikbaar waren om e e n gedeelte v a n hun t i j d t e b e s t e d e n a a n deze t e s t : de d o c e n t , d e i n s t r u c t e u r en een w e t . medewerker,

Gedurende de e e r s t e v e e r t i e n dagen v a n december

I 9 6 7

c o n s t r u e e r d e de

d o c e n t

70

items, g e b r u i k makend v a n d e taxonomie v a n Bloom. Deze items werden v e r v o l g e n s met de i n s t r u c t e u r en d e wet, medewerker be-

d i s c u s s i e e r d en g e c o r r i g e e r d . B e s l o t e n werd om

65

items i n d e t e s t op t e nernen e n wel 47 o v e r t r i l l i n g e n en 1 8 o v e r b a l a n c e r i n g . De ver- houding t u s s e n ' P t r i l l i n g e n f l en "balancering?' werd nagenoeg g e l i j k

~

- 3 -

gekozen a a n de verhouding t u s s e n d e c o l l e g e - u r e n d i e a a n h e t ene en a a n h e t a n d e r e o n d e r d e e l werden b e s t e e d .

Een k l e i n a a n t a l d e r items w e r d besproken met D r , Meuwese om t e ont- dekken o f t y p i s c h e c o n s t r u c t i e f o u t e n werden gemaakt. D i t b l e e k n i e t

h e t g e v a l t e z i j n .

Het c o n s t r u e r e n v a n d e items w a s v o o r s c h r i j v e r d e z e s een Tascine- r e n d e taak. E e t moeten v a s t s t e l l e n v a n de o n d e r d e l e n d i e v o o r een item i n aanmerking komen, h e t c o n s t r u e r e n en formuleren v a n a a n t r e k - k e l i j k e a l t e r n a t i e v e n en h e t werken met de Bloom-categorieën w a s l e e r z a a m en uitdagend, Zwakke p l e k k e n i n h e t c o l l e g e en o n d e r d e l e n d i e o n b e l a n g r i j k l i j k e n kwamen aan h e t l i c h t . Bovendien moest voor- komen worden d a t h e t v e r w i j t gemaakt zou kunnen worden d a t alleeza t h e o r i e en "weet jest' onderzocht werden.

G r o t e m o e i l i j k h e d e n hadden w i j met h e t v a s t s t e l l e n v a n d e t i j d d i e de s t u d e n t e n gemiddeld n o d i g zouden hebben om de t e s t t e beantwoorden. Genoemd werd de t i j d v a n

1

à.

l , 5

minuut p e r item door iemand d i e r e e d s e n i g e malen een M,C, t e s t g e b r u i k t had, Deze t i j d l e e k a a n z i e n l i j k t e k o r t door de m o e i l i j k h e i d v a n de v r a g e n en de f t l e e s t i j d " v a n h e t item. t v i j b e s l o t e n

65

i t e m t e k i e z e n voor de

3

uur d i e de k a n d i d a t e n t e r

b e s c h i k k i n g werden g e s t e l d . Nemen w i j aan d a t de ffgemiddeldec' s t u d e n t dan n a o n g e v e e r 2,s uur a l l e items beantwoord moet hebben dan b e t e k e n t

d a t v o o r de ftgemiddelde" s t u d e n t een t i j d v a n ongeveer 2,5 minuut p e r

i t e m b e s c h i k b a a r is.

T i j d e n s h e t l a a t s t e c o l l e g e werd h e t a a n t a l items bekend gemaakt. 6r

werd t e v e n s op gewezen d a t de t e s t een z e e r d i k pak p a p i e r

(40

pag.!) zou z i j n . D i t om een s c h r i k r e a t e voorkomen b i j h e t b e g i n v a n h e t teritamea, Tevens we26 aan de s t u d e c t e c gevraagd om hun onedewer- k i n g t e v e r l e n e n a a n een k o r t e enquête na a f l o o p v a n de M.C. t e s t om hun o p i n i e o v e r e n i g e zaken t e p e i l e n .

2,

De t e s t : algemene g e g e v e n s en r e s n l t a t e n

De t e s t b e s t o n d u i t 6 5 vragen:

47

over t r i l l i n g e n

i 1

t/m 47) en 1 8 o v e r b a l a n c e r i n g (48 t/m

65)

o

Aan de t e s t werd deelgenomen door

30

k a n d i d a t e n , aan w i e een rang- nummer v a n

1

t o t en met 30 werd toegekend. A l l e a n a l y s e s w a a r b i j de k a n d i d a t e n b e t r o k k e n waren werden anoniem u i t g e v o e r d . De k o p p e l i n g v a n de naam v a n een k a n d i d a a t aan e e n nr, gebeurde i n een z o laat m o g e l i j k stadium om t e voorkomen d a t s t o r e n d e i n v l o e d e n v a n naam- a s s o c i a t i e s een rol zouden s p e l e n .

Het u i t w e r k e n v a n d e t e s t - r e s u l t a t e n gebeurde-door d e g r o e p "Onder- w i j s r e s e a r c h ! ! met behulp v a n d e EL

-

X-8,

Gebruik werd h i e r b i j ge- maakt v a n programma

A

02061603~ J e v a n L i e s h o u t N u l t i p l e - C h o i c e

met z e k e r h e i d s a a n d u i d i n g . Eet o n d e r d e e l " T r i l l i n g e n " h e t o n d e r d e e l p l B a l a n c e r i n g t ? en de t o t a l e t e s t werden na elkaar bewerkt en geana-

<_-.

r j s e e r d o

D e t e s t f o r m u l i e r e n werden d i n s d a g

9

J a n u a r i 1968 om ongeveer 1 ï 8 5 0 uttr

b i j de g r o e p "Onderwijs researchfP in g e l e v e r d , Donderdagmiddag 11 jan- u a r i 1968 naren a l l e r e s u l t a t e n bekend,

Wanneer h e t experiment met h e t mondeling examen n i e t w a s u i t g e v o e r d zou a a n de k a n d i d a t e n nog vóór h e t week-end h e t r e s u l t a a t z i j n meegedeeld! Er kan dus gesproken worden v a n e e n s n e l l e a f h a n d e l i n g

en een eminente s e r v i c e v a n de g r o e p "Onderwijs research",

T i j d e n s h e t maken v a n de t e s t w a s schr5.jver d e z e s s u r v e i l l a n t , IXén

uur v6Ór h e t v e r s t r i j k e n v a n de t e r b e s c h i k k i n g g e s t e l d e t i j d v a n

3

uur b l e e k hem d a t een g r o o t g e d e e l t e v a n de g r o e p i n t i j d n o o d d r e i g d e t e r a k e n , N e t goedvinden v a n de k a n d i d a t e n w e r d de b e s c h i k -

b a r e t i j d met een h a l f uur v e r l e n g d ,

In t a b e l

I

is v o o r i e d e r e p r o e f p e r s o o n de s c o r e vermeld v o o r :

T r i l l i n g e n ( T i ? * ) , B a l a n c e r i n g (Ba.) en d e t o t a l e t e s t ( T o . ) . Zowel d e s c o r i n g zonder z e k e r h e i d s a a n d u i d i n g (aangeduid met ZZ), a l s d i e

-

met z e k e r h e i d s a a n d u i d i n g

(MZ)

z i j n opgenomen,

T a b e l 11 bevat de f r e q u e n t i e v e r d e l i n g voor de v e r s c h i l l e n d e ondes- d e l e n , In T a b e l IV z i j n opgenomen de g e m i d d e l d e - s b o r i n g , h e t ge-

middelde met zekerheid beantwoorde items, de s t a n d a a r d d e v i a t i e s en

de s p r e i d i n g s g e b i e d e n .

I n T a b e l I11 i s de c o r r e l a t i e m a t r i x opgenomen v o o r de s c o r e s b i j

_

- 5 -

Tr

-

Z.Z9 Ba

-

ZZ,

To

-

ZZ, T r

-

MZ,

Ba

-

MZ

en

To

-

MZ.

\Vi j constateren dat de gemiddelde score door de zekerheidsaanduiding betrekkelijk weinig toeneemt, De differentiatie tussen de kandidaten wordt echter aanmerkelijk groter.

Dit

volgt uit de relatief grote toename van de standaarddeviatie wanneer de zekerheidsaanduiding wordt me e ger ekend o

Wij moeten dus concluderen dat de zekerheidstoets van grote beteke- nis is om een grote differentiatie tussen de kandidaten te verkrijgen,

~

( V o o r vervolg tek& zie pag.

9)

T a b e l I R e s u l t a t e n p e r p r o e f p e r s o o n

Pr

oe f p e r soon I, 2.

3 .

4.

59

1

6,

I

7.

8.

9.

IO,

11,

I 12. 6

14,

15.

169

17.

18.

19.

20 * 21 o 22 o

?3

0

2.4.

2 K -/ *

26.

27 6

28.

29

0 l e b i e d

zz

21

27

28

25

26

23

21 20

34

18

25

25

30

33

22

27

30

25

26

26

28

33

23

30

21

30

28

23

23

27

1-47

-

-

r i l l i a

MZ

+ I 3

39

34

32

38

24

23

29

56

14

35

32

44

47

21

42

44

31

34

45

51 26

42

42

22

40

41

26

28

41

-47-+9L

?p1 r a n t a l seker e intw e

32

30

21

39

30

41

22

25

44

28

36

29

40

28

25

21

28

30

35

20

31

34

22

24

23

24

41

29

32

34

3-47

ZZ

3

5

10

5

12

5

5

6

11

6

9

7

9

10

7

8

12 0 10 I O

6

10

7

6

? O 10

9

7 2

8

3-1

8

l a n c e r i MZ

---s

+ 6

13

5

21 O

7

4

18 2 10

4

10

13

10

8

17

O

16

15

5

12 10

9

12

14

10

6

O 12 .I

8-+36

>_ tan

t

a l ;eker e tntw

.

12

7

11 I O

13

13

4

10

15

12

13

13

5

I 1 9 10

9

O

14

9

9

12

5

7

?6

12 11

9

2 10 1-1

8

zz

24

32

38

30

38

28

26

25

45

24

34

32

39

43

29

35

42

25

36

36

34

43

30

35

3?

40

37

30

25

35

0-65

-

T o t a a I4Z 10

45

47

37

59

24

30

33

74

45

36

54

60

31

50

61

31

50

57

50

63

36

48

34

54

51

32

28

53

16

-65-+13C

t a n t a l :ekere m t w .

44

37

32

49

43

54

26

35

59

40

49

45

39

34

31

37

30

50 29

40

46

27

31

39

36

52

38

34

44

1-65

42

- 7 -

- 7 -

F r e q u e n t i e v e r d e l i n g s c o r e s T a b e l I1 T r i l l i n g e n s c o r e 1 8 20 21 22

23

25

26

27

28

55

30

34

f r e q . 1 1

3

1

4

4

3

3

3

4

2 1 s c o r e +

13

14

21 22

23

24

26

28

29

31

32

34

35

38

39

40

41

42

44

45

47

51

56

f r e q I 1 1 1 1 1 2 1 1 1 2 2 I 1 1 I 2 3 , 2 1 1 1 1 B a l a n c e r i n g ZZ s c o r e O 2

3

5

6

7

8

9

10 11 12 f r e q e 7 I I

4

4

4

2

3

7

.I 2 s c o r e

- 3

- 0 + 2

4

5

6

7

8

9

I O 12

13

14

15

16

17

18 21 f r e q o I 3 i 2 2 2 I I 1

5

3

2 1 1 1 1 1 1 Totaal ZZ s c o r e

24

25

26 28

29

30

37

32

34

35

36

37

38

39

40

42

43

45

f r e q , 2 2 2 1 1

3

1 2 2

3

2 1 2 1 1 1 2 1

M:

s c o r e I O

16

24

28

30

31

32

33

34

35

37

45

47

48

50 51

53

54

57

59

60

63

74

61

f r e q o 1 1 1 1 1 2 1 1 1 2 1 2 1 1

3

1 1 2 1 1 1 1 1 1

- 8 -

T a b e l I11

Gemiddelde s c o r i n g enz. v a n de PI.C.-test

Gemiddelde sc o r i n g S t a n d a a r d - d e v i a t i e S p r e i d i n g s - g e b i e d s c o r i n g gemiddeld z a n t a l zekere antwoorden S t a n d a a r d - d e v i a t i e zekere antwe S p r e i d i n g s - g e b i e d zekere antwo or den

30.0

20 t o t 44 O t o t 16 T o t a a l TO-ZZ 3344 6,O 24 t o t

45

TO-MZ 43.31.

:/

1 4 . 5 10 t o t 7’ 8.2

26

t o t 59 T a b e l I V C o r r e l a t i e m a t r l x v o o r o n d e r d e l e n v a n de t e s t

- 9 -

De gemiddelde s c o r e w a s lager dan w i j vermacht hadden, Met name v i e l ons t e g e n de toename v a n de s c o r e door de e x t r a winstpunten d i e t e b e h a l e n waren met de z e k e r h e i d s a a n d u i d i n g .

D e v r e e s zou kunnen b e s t a a n d a t h e t i n v o e r e n van d e z e k e r h e i d s t o e t s a a r z l e i d i n g zou kunnen z i j n v o o r een v e r k e e r d e meting, H e t i s w e l r e d e l i j k om een met zekerheid gegeven antwoord meer t e honoreren dan een onzeker goed gegeven antwoord, m a a r vermeden moet worden d a t h e t z e k e r o f n i e t z e k e r z i j n v a n de k a n d i d a a t o v e r z i j n antwoord belang- r i j k e r wordt dan h e t b e g r i j p e n v a n en h e t o p e r e r e n met de c o l l e g e s t o f , Anders gezegd: w i j w i l l e n primair d e k e n n i s v a n en v a a r d i g h e i d i n t r i l -

l i n g e n en b a l a n c e r i n g t o s e n en

-

n i e t h e t z e l f v e r t r o u w e n of de z e l f - o v e r s c h a t t i n g v a n de k a n d i d a a t , B l i j k e n s t a b e l IV z i j n w e h i e r i n ge- slaagd, Voor i e d e r d e r d e l e n is de c o r r e l a t i e t u s s e c de s c o r e , b e h a a l d

zonder z e k e r h e i d s a a n d u i d i n g en d i e met z e k e r h e i d s a a n d u i d i n g zeer hoog; v o o r de t o t a l e t e s t is de c o r r e l a t i e f a c t o r 0,94,

D i t r e s u l t a a t i s i n overeenstemming .met de u i t de l i t e r a t u u r bekende g e g e v e n s

U i t t a b e l I11 v o l g t d a t h e t a a n t a l met z e r h e i d gegeven antwoorden gemiddeld v o o r a l l e k a n d i d a t e n v r i j g r o o t is. B i j b a l a n c e r i n g i s d i t

a a n t a l b e t r o k k e n op h e t t o t a l e a a n t a l v r a g e n i e t s lager dan b i j t r i l - l i n g e n . Gemiddeld

met zekerheid beantwoord, t e r w i j l

54%

v a n de b a l a n c e r i n g s p r o b l e m e n met zekerheid werden beantwoord, W i j c o n s t a t e r e n v e r d e r uit, d e z e t a b e l d a t gemiddeld 55% van de t r i l l i n g s v r a g e n en

42%

van de b a l a n c e r i n g s v r a g e n goed z i j n beantwoord, Voor d e h e l e t e s t werd gemiddeld 51% v a n de v r a g e n goed, t e r w i j l

61%

met z e k e r h e i d - werd beantwoord. H i e r u i t moet gecon-

door de k a n d i d a t e n

64%

van d e v r a g e n o v e r t r i l l i n g e n

c l u d e e r d worden d a t v o o r deze g r o e p s t u d e n t e n de v r a g e n a a n de m o e i l i j k e k a n t waren, t e r w i j l de g r o e p bovendien r e d e l i j k v e e l m o e i t e had met de z e k e r h e i d s t o e t s ,

W i j hadden r e e d s g e c o n s t a t e e r d d a t de i n v o e r i n g van d e z e k e r h e i d s t o e t s z o r g d r o e g voor een g r o t e r e s p r e i d i n g van de s c o r e s zonder d a t a f b r e u k werd gedaan a a n h e t d o e l v a n de t e s t : h e t onderzoek n a a r h e t b e g r i p v o o r t r i l l i n g e n en b a l a n c e r i n g , Het is i n t e r e s s a n t OM n a t e g a a n i n h o e v e r r e h e t a a n t a l door een k a n d i d a a t met zekerheid beantwoorde items c o r r e s p o n d e e r t met h e t a a n t a l door hem g o e d beantwoorde items.

Per k a n d i d a a t i e deze I n f o r m a t i e u i t t a b e l I t e v e r k r i j g e n , Een over- z i c h t v o o r de h e l e g r o e p v o l g t u i t de c o r r e l a t i e f a c t o r e n t u s s e n h e t

a a n t a l z e k e r e antwoorden en de b e h a a l d e s c o r e (met z e k e r h e i d s a a n d u i d i n g ) z o a l s i n t a b e l V i s vermeld, De i n deze t a b e l voorkomende a f k o r t i n g e n betekenen: ZA-Tr: a a n t a l -- zekere antwoorden v o o r T r i l l i n g e n ; ZA-Br: aan-

t a l z e k e r e antwoorden v o o r B a l a n c e r i n g ; ZA-To: t o t a a l a a n t a l z e k e r e

a n t wo o r den e

T a b e l V

@or r e l a

t

iematr i x : a a n t a l z e k e r e a n t vroor den/scor e met z e k e r h e i d

W i j c o n s t a t e r e n u i t t a b e l V d a t e r een c o r r e l a t i e i s t u s s e n h e t a a n t a l met zekerheid gegeven antwoorden en de b e h a a l d e s c o r i n g S , Voor de t o t a l e t e s t is de c o r r e l a t i e f a c t o r 0 , 2 2 ; v o o r de twee o n d e r d e l e n

8, V i j moeten v a s t s t e l l e n d a t h e t "weten?9 en de "zekerheid h e t

t e weten" v r i j o n a f h a n k e l i j k e grootheden z i j n , Er i s n o g a l vaak een

--- ~ - - 1 - ~ - - - ~ zeker a n t x o n r d g e g e v e n d a t F is, Na deze c e n c l u s i e i s h e t d e s t e p r e t t i g e r t e weten d a t de z e k e r h e i d s - t o e t s de waarde der t e s t n i e t h e e f t a a n g e t a s t . De c o r r e l a t i e f a c t o r t u s s e n de s c o r i n g v o o r h e t o n d e r d e e l t r i l l i n g e n en h e t o n d e r d e e l b a l a n c e r i n g is 0,60, Gezien de n i e t volmaakte betrouw-

b a a r h e i d v a n b e i d e o n d e r d e l e n en h e t r e d e l i j k g r o t e v e r s c h i l i n onder- werp moet deze c o r r e l a t i e a l s v r i j hoog worden aangemerkt. De c o r r e h a - t i e f a c t o r t u s s e n h e t a a n t a l z e k e r e antwoorden b i j t r i l l r i n g e n en balan- c e r i n g i s laag

(0.21).

De hypothese a l s zou door de z e k e r h e i d s t o e t s a l l e e n of v o o r n a m e l i j k iemand's z e l f v e r t r o u w e n worden gemeten l i j k t

n i e t houdbaar, Deze c o n c l u s i e i s i n s t r i j d met de s u g g e s t i e v a n Roskam,

-

12

-

I n d i t verband moeten w i j w e l nog opmerken d a t m o g e l i j k e t i j d n o o d

b i j h e t o n d e r d e e l b a l a n c e r i n g v a n i n v l o e d geweest kan z i j n op h e t door ons gevonden r e s u l t a a t o

b e

c o r r e l a t i e f a c t o r t u s s e n h e t p e r c e n t a g e kan-

d i d a t e n d a t een i t e m goed beantwoordde en h e t p e r c e n t a g e met z e k e r h e i d g e g e v e n antwoorden v o o r d a t i t e m , bedraagt O,S2 en i s a a n m e r k e l i j k la- ger dan d a t door v a n N a e r s s e n w e r d gevonden.

Een b e l a n g r i j k e vraag v o o r i e d e r e t e s t i s z i j n betrouwbaarheid. D i t w i l zeggen de vraag i n h o e v e r r e t o e v a l l i g e f a c t o r e n z o a l s pech, o n d u i d e l i j k e v r a g e n en "gemene" v r a g e n h e t p u n t e n - t o t a a l van een k a n d i d a a t b e i n v l o e d kunnen hebben, De betrouwbaarheid k a n worden u i t g e d r u k t met behulp v a n de zogenaanide i n t e r n e c o n s i s t e n t i e van. de t e s t i n de vorm v a n de co- e f f i c i g n t CY (Kuder-Richardson formule

20)

d i e g e d e f i n i e e r d i s a l s : m ~ m o CY = - m- 1 var

t

w a a r b i j 13 : a a n t a l i t e m s v a r t : v a r i a n t i e v a n d e

var[i. : v a r i a n t i e v a n ide item

Deze betrouwbaarheidscoëfficient is

-

z i e l i t e r a t u u r

-

een beneden-

g r e n s v o o r de w e r k e l i j k e betrouwbaarheid, E i j i t a gebaseerd op de hypo- these d a t a l l e i t e m s v a n g e l i j k e waarde z i j n om &én hoedanigheid t e

meten, Een homogene t e s t met w e i n i g t c s l e c h t e ï i v r a g e n z a l e e n i i i t e r n e c o n s i s t e n t i e i n de b u u r t v a n

1

b e z i t t e n . Door van Naerssen werd i n een a a n t a l c o n c r e t e g e v a l l e n v a s t g e s t e l d d a t CY een v r i j goede b e n a d e r i n g

i s voor d e twee-helftenbetrouwbaarheid. H i e r b i j wordt d e s c o r i n g v a n een k a n d i d a a t v o o r de ene h e l f t v a n de t e s t v e r g e l e k e n net de s c o r i n g v o o r de a n d e r e h e l f t . D e i n t e r n e c o n s i s t e n t i e is eveneens ongeveer g e l i j k a a n de c o r r e l a t i e f a c t o r t u s s e n de s c o r i n g v a n de k a n d i d a t e n wanneer z i j twee maal de t e s t zouden maken, onder d e v e r o n d e r s t e l l i n g

d a t h e r i n n e n i n g s e f f e c t e n geen rol s p e l e n ,

I n t a b e l V I is v o o r i e d e r der o n d e r d e l e n de i n t e r n e c o n s i s t e n t i e weer-

~~

gegeven *

T a b e l V I I n t e r n e C o n s i s t e n t i e

I n t e r n e C o n s i s t e n t i e

D e i n t e r n e c o n s i s t e n t i e i s

-

n a a r de mening v a n D r , Meuwrese

-

v o l - doende g r o o t om de t e s t a l s betrouwbaar c r i t e r i u m

-

u i t e r a a r d afge- z i e n van de inhoud

-

t e hanteren, D i t is o v e r i g e n s geen r e d e n om geen pogingen i n h e t werk t e s t e l l e n de t e s t nog betrouwbaarder t e doen z i j n ,

Door v a n N a e r s s e n werd gevonden d a t de b e t r o u w b a a r h e i d v a n de t e s t door de z e k e r h e i d s a a n d u i d i n g toenam, D i t e f f e c t c o n s t a t e r e n w i j ook

b i j h e t o n d e r d e e l t r i l l i n g e n ; b i j b a l a n c e r i n g d a a r e n t e g e n neemt de betrBQv!baarheid

-

a f , i N e l l i c h t is d i t t e v e r k l a r e n door t i j d g e b r e k b i j

de k a n d i d a t e n , Een z e l f d e v e r k l a r i n g zou gegeven kunrzen worden v o o r h e t onveranderd b l i j % e n van Ue i n t e r n e c o n s i s t e n t i e v o o r d e t o t a l e t e s t . Met behulp v a n de formule

waar b i j

rgl o betrouwbaarheid v a n de t e s t

r p l

*

: g e s c h a t t e betrouwbaarheid v a n de t e s t wanneer de t e s t K raaal z o v e e l items zou b e v a t t e n

K : de v e r h o u d i n g t u s s e n h e t a a n t a l items b i j ver- a n d e r i n g v a n de l e n g t e d e r t e s t en h e t z a n t 2 1 items v a n de g e b r u i k t e t e s t

kan

-

i n a n a l o g i e met v a n Naerssen

-

worden nagegaan met h o e v e e l p r i c e n t de t e s t zonder z e k e r h e i d s a a n d u i d i n g - _ v e r l e n g d zou moeten z i j n

-

14

-

om e e n z e l f d e betrouwbaarheid t e v e r k r i j g e n a l s b i j de t e s t met zeker- h e i d s a a n d u i d i n g , W i j p a s s e n d i t t o e op h e t o n d e r d e e l t r i l l i n g e n en c o c o n c l u d e r e n d a t een v e r l e n g i n g v a n

32%

n o o d z a k e l i j k g e w e e s t zou z i j n

( v a n N a e r s s e n

21%,

r e s p , 31%).

I n p l a a t s v a n

47

v r a g e n over t r i l l i n g e n zouden er dan dus 62 v r a g e n o v e r t r i l l i n g e n g e s t e l d moeten z i j n .

3. De g r e n s v o l d o e n d e

-

onvoldoende

Er

werd op v i e r manieren g e t r a c h t de g r e n s voldoende

-

onvoldoende

v a s t t e s t e l l e n . a. Kernitemmekhode

Er

werden 8 items v a n t r i l l i n g e n en

4

v a n b a l a n c e r i n g aangewezen

a l s zogenaamde kernikems. D i t w i l zeggen d a t de d o c e n t v a n mening

w a s d a t k a n d i d a t e n d i e d e s t o f j u i s t voldoende b e s t u d e e r d hadden deze items zeker-goed zouden beantwoorden t e r w i j l de onvoldoende- k a n d i d a t e n d i t n i e t zouden doen. Het gemiddelde p e r c e n t a g e zeker- goed beankwoords kern-items zou een r e d e l i j k e p e r c e n t a g e voldoende- k a n d i d a t e n op l e v e r e n , I n t a b e l V I I z i j n de r e s u l t a t e n v a n d i t onderzoek opgenomene T a b e l V I 1 p r o p o r t i e gemiddelde zeker-goed zeker-goed I i

-

16

-

-

16

-

De r e s u l t a t e n maken ons i n z i e n s de kernitemmethode o n b r u i k b a a r . De s p r e i d i n g i n de p r o p o r t i e s i s z e e r g r o o t ,

Er

zouden s l e c h t s

3'7% v a n de k a n d i d a t e n s l a g e n . De gemiddelde m o e i l i j k h e i d van de k e r n i t e m s is g r o t e r dan h e t gemiddelde van de t e s t ,

b o B e s t u d e r i n g v a n h e t r e s u l t a a t van de k a n d i d a t e n n a b i j de s c h e i d i n g v o l d o e n d e

-

onvoldoende,

H i e r b i j w o r d t u i t g e g a a n v a n een b e p a a l d lpercentage onvoldoendes, De g e l e v e r d e p r e s t a t i e s van een a a n t a l k a n d i d a t e n aai? w e e r s z i j d e n v a n deze

-

h y p o t h e t i s c h e

-

g r e n s w o r d t g e a n a l y s e e r d om t e b e s l i s s e n o f d e g r e n s op d e j u i s t e p l a a t s gelegd is, V a l t deze b e s l i s s i n g n e g a t i e f u i t dan wordt d e g r e n s v e r l e g d en d e z e l f d e p r o c e d u r e her-

h a a l d o

Ook d e z e methode w a s v o o r ons onbruikbaar: d e e l s omdat n a u w e l i j k s een t o t a a l i n d r u k w a s .te v e r k r i j g e n , d e e l s omdat de t e s t a a n d e

m o e i l i j k e k a n t WELS, w a t r e s u l t e e r t i n een v r i j g r o o t a a n t a l f o u t i e v e antwoorden. Ook k a n d i d a t e n met een r e l a t i e f hoge s c o r e mäken zodoende een zwakke indruk,

W i j b e s e f f e n d a t de o n b r u i k b a a r h e i d v a n d e z e methode z o w e l h e t g e v o l g is v a n h e t nieuw z i j n van de vraagmethode a l s v a n een o n d u i d e l i j k en n i e t a a n g e p a s t b e e l d van de d o e l s t e l l i n g e n v a n h e t onder

6. Q

Vóór

de t e s t wordt v a s t g e s t e l d h o e v e e l p r o c e n t v a n d e k a n d i d a t e n moeten worden afgewezen, D i t k a n b i j y o o r b e e ï d gebeuren door de be-

s t u d e r i n g v a n h e t a a n t a l afgewezen k a n d i d a t e n b i j v o r i g e examens i n h e t b e t r e f f e n d e vak. B e t f e i t d a t d i t vak d e e e r s t e maal geëxamineerd werd b e l e t t e deze w e r k w i j z e ,

I n plaats d a a r v a n s t e l d e n w i j arbitrair een p e r c e n t a g e v a n

20%

afge- wezen k a n d i d a t e n v a s t o U i t '$?psychologische overwegingen" v e r l a a g d e n w i j d i t getal t o t

13%*

Deze norm werd doorgevoerd, De k a n d i d a t e n

1 ,

6, 10 en 29 werden af- gewezen,

Een v a r i a n t van deze werkwijze, nu a l l e k a n d i d a t e n bovendien mon- d e l i n g geëxamineerd werden, is h e t p e r c e n t a g e afgewezen k a n d i d a t e n g e l i j k t e s t e l l e n aan d a t b i j h e t mondeling.

Er

werden b i j h e t mon- d e l i n g examen 8 k a n d i d a t e n , d e i . 27% v a n h e t t o t a a l afgewezen, W i j z u l l e n nog terugkomen op de redenen om deze norm n i e t t e han- t e r e n .

d, Het v a s t s t e l l e n van de minimale s c o r e

Vóór de t e s t werd v a s t g e s t e l d d a t v o o r h e t h a l e n v a n een voldoende c i j f e r minimaal 33 punten (met z e k e r h e i d ) g e s c o o r d moesten worden. D i t a a n t a l w e r d v e r k r e g e n door de

-

n i e t g e m o t i v e e r d e

-

werkwijze h e t h e l e s c o r e g e b i e ü

(-67

t o t

+I301

t e t r a n s f o r m e r e n n a a r een t i e n - p u n t s s c h a a l

(-65+

O 9 + 1 3 O - r 1 0 ) en een v i j f o f minder af t e w i j z e n .

B i j deze g r o e p b e t e k e n t d i t d a t 8 k a n d i d a t e n , dus 27% v a n de g r o e p , wordt afgewezen, W i j w i j z e n op de overeenkomst v a n d i t r e s u l t a a t met de r e s u l t a t e n v a n h e t mondeling examen,

-

18

-

4,

B e t v a s t s t e l l e n v a n de c i j f e r s i n een t i e n - p u n t s s c h a a l ,

Nu de s c h e i d i n g voldoende

-

onvoldoende gemaakt is, is de b e l a n g r i j k s t e b e s l i s s i n g genomen, D e d o o r o n s gekozen g r e n s c o r r e s p o n d e e r t met h e t nog j u i s t s l a g e n v a n de k a n d i d a a t d i e 30 punten b e h a a l d h e e f t . W i j w i l l e n d e z e k a n d i d a a t een 6 geven i n de g e b r u i k e l i j k e p u n t e n s c h a a l ,

De b e s t e k a n d i d a a t s c o o r d e

74

punten. W i j 1 waarderen d i t met "uitmuntend"

(IO) <1 mede omdat de examinatoren b i j h e t mondeling r e s p e c t i e v e l i j k

59

De s n a l y s e v a n de f r e q u e n t i e v e r d e l i n g d e r s c o r e s ( z i e t a b e l

11)

maakt de v o l g e n d e l i n e a i r e t r a n s f o r m a t i e r e d e l i j k ( z i e t a b e l

VIII),

T a b e l

VI11

s c o r e c i j f e r 6

7

8

9

10 f r e q u e n t i e

3

1

-

19

-

5 .

Nog e n i g e gegevens v a n d e t e s t en de i t e m s

I n h e t voorgaande ( h o o f d s t u k 2 ) z i j n r e e d s een a a n t a l g e g e v e n s vermeld v a n de.M.C. t e s t , W i j w i l l e n h i e r nog een a a n t a l a n d e r e r e s u l t a t e n vermelden, i n h e t b i j z o n d e r o v e r de items, Voor i e d e r i t e m z i j n d e v o l g e n d e

-

s t a t i s t i s c h e

-

g r o o t h e d e n berekend. a. b. C . d. e e f , a a n t r e k k e l i j k h e i d der a l t e r n a t i e v e n ; d,w,z, h e t p e r c e n t a g e der k a n d i d a t e n d a t i e d e r d e r v i e s a l t e r n a t i e v e n gekozen h e e f t als h e t j u i s t e antwoord a a n t r e k k e l i j k h e i d der a l t e r n a t i e v e n met z e k e r h e i d s a a n d u i d i n g ; z i e a. Het v e r s c h i l met a is d a t v o o r i e d e r a l t e r n a t i e f boven- d i e n o n d e r s c h e i d wordt gemaakt t u s s e n met en zonder zekerheid beantwoorden

h e t p e r c e n t a g e k a n d i d a t e n d a t h e t item o v e r s l o e g

h e t p e r c e n t a g e k a n d i d a t e n d a t h e t item met zekerheid beantwoord h e e f t ; d i t p e r c e n t a g e wordt i n de l i t e r a t u u r ( z i e v a n Naerssen)

d e " s u b j e c t i e v e gemakkelijkheid" genoemd

de i t e m - t o t a a l c o r r e l a t i e ; h e t a a n t a l punten d a t de k a n d i d a t e n v o o r h e t b e t r e f f e n d e item behaalden ( O o f

1 )

wordt g e c o r r e l e e r d met de s c o r e (zonder z e k e r h e i d s a a n d u i d i n g ) v a n d e k a n d i d a a t , De i t e m - t o t a a l c o r r e l a t i e s geven een i n d r u k o v e r de homogeniteit v a n de t e s t ( t e s t homogeen wanneer e r geen g r o t e o n d e r l i n g e v e r - s c h i l l e n t u s s e n de i t e m - t o t a a l c o r r e l a t i e s b e s t a a n ) . Verder be- v a t de i t e m - t o t a a l c o r r e l a t i e i n f o r m a t i e o v e r de nate w a a r i n h e t item de u i t e i n d e l i j k e v o l g o r d e d e r k a n d i d a t e n v o o r s p e l d e .

Uitgaande v a n de hypothese d a t de t e s t &én-dimensionaal moet meten, is een e i s h e t r e d e l i j k g r o o t z i j n v a n h e t g r o o t s t e ge- d e e l t e v a n d e i t e m - t o t a a l c o r r e l a t i e s ,

Een hoge i t e m - t o t a a l c o r r e l a t i e w i l zeggen d a t d e

-

gekeken n a a r de h e l e t e s t

-

goede k a n d i d a t e n de vraag goed beantwoorden t e r - w i j l de s l e c h t e k a n d i d a t e n de vraag f o u t beantwoorden

de i t e m - t o t a a l c o r r e l a t i e met z e k e r h e i d s a a n d u i d i n g

deze g r o o t h e i d h e e f t d e z e l f d e b e t e k e n i s a l s de onder e. vermelde, a l l e e n moet nu a l l e i n f o r m a t i e b e t r o k k e n worden op a l l e gegetrens me

t

zeker h e i d s a a n d u i d i n g

p h i goed

-

zeker

d e z e g r o o t h e i d i s e e n maat voor de c o r r e l a t i e t u s s e n h e t goed

beantwoorden en h e t zeker beantwoorden e n e r z i j d s en h e t f o u t be- antwoorden gecombineerd met een onzeker antwoord a n d e r z i j d s ,

~~

-

20

-

De d e f i n i t i e v a n l u i d t :

zg*Of

-

zf*Og

Y =

d ( z g + z f

1

(zgi-og) ( z f 9 O f ) ( O f + O g )

met zg : a a n t a l zeker-goed gegeven antwoorden

zf : a a n t a l z e k e r - f o u t gegeven antwoorden Og : a a n t a l onzeker-goed g e g e v e n antwoorden O f : a a n t a l onzeker-fout gegeven antwoorden

Wanneer zg

>>

zf en O f »Og, dus wanneer h e t merendeel der k a n d i d a t e n d i e een zeker antwoord gaven t e v e n s een goed antwoord g a v e n , t e r w i j l

h e t g r o o t s t e g e d e e l t e van de onzekere an

Y' i n de b u u r t v a n

91,

Wanneer zf >>zg en

as, dan li

= O wanneer h e t zeker b e ntwoorden en h e t goed beantwoorden onaf-

i j k z i j n , dus b i j v o o r b e e l d wanneer zg = zf = O g = O f ,

r een v a n de grootheden zg, z f , O g o f O f meer dan b i j v o o r b e e l d

80%

v a n h e t t o t a l e a a n t a l b e d r a a g t i s de waarde k l e i n e o n d e r l i n g e w i j z i g i n g e n i n de a r e a a n t a l l e n g r o t e i n v l o e d op Lp u i t o e f e n e n , V o o r b e e l d , S t e l z g =

80

a l s z g

+

zf

+

02

+

Of = 100 dan g e l d t b i j O f = 10 o n b r u i k b a a r omdat =

Oo7S

en b i j zf = 10

V =

-0,l Of = O t Y7

og

= 10 zf = og = 1 0

Door

10%

v a n d e k a n d i d a t e n v a n onzeker-fout over t e h e v e l e n n a a r zeker- f o u t v e r a n d e r t

y

v a n 90.75 t o t -0-1,

U i t de onder a, en b o vermelde g r o o t h e d e n kan i n f o r a a t i e v e r k r worden o v e r de v e r s c h i l l e n d e a l t e r n a t i e v e n b i j een item,

Soms z a l dan g e c o n c l u d e e r d worden d a t b e p a a l d e a l t e r n a t i e v e n d o o r hun f o r m u l e r i n g m i s l e i d e n d gewerkt hebben; soms kan de h y p o t h e s e gemaakt worden d a t h e t o n d e r w i j s ( b , v , een e v e n t u e l e s y l l a b u s ) op e e n b e p a a l d o n d e r d e e l n i e t i n overeenstemming w a s met de g e s t e l d e (tentamen) e i s e n , B i j de o n d e r h a v i g e t e s t hebben w i j h e r h a a l d e l i j k v e r r a s s e n d e i n f o r m a t L e v e r k r e g e n . De i n d r u k d i e men b i j een k l a s s i e k tentamen w e l overhoudt

d a t v a n bepaalde d e l e n v a n h e t vak door s t u d e n t e n n i e t s i s be- grepenf2 k a n b i j g e b r u i k v a n een o b j e c t i e v e t e s t worden omgezet i n een op de p r e s t a t i e s van e e n h e l e g r o e p gefundeerde u i t s p r a a k ,

Bovenaien k r i j g e n w i j i n f o r m a t i e i n welke r i c h t i n g een c o r r e c t i e i n

h e t o n d e r w i j s g e z o c h t moet worden.

U i t c o volgt d a t b i j h e t o n d e r d e e l t r i l l i n g e n b i j n a s t e e d s door a l l e k a n d i d a t e n de j u i s t e tentamen-techniek i s g e v o l g d : g66n vraag o v e r -

s l a a n , D e l a a t s t e items v a n b a l a n e e r i n g worden door een a a n m e r k e l i j k p e r c e n t a g e d e r k a n d i d a t e n ( t o t

23%)

o v e r g e s l a g e n . D i t w i j s t op t i j d -

nood e

W i j c o n s t a t e r e n v e r d e r d a t items d i e een v r i j u i t g e b r e i d e b e c i j f e r i n g v e r e i s t e n , nog a l e e n s worden o v e r g e s l a g e n

I n t a b e l I11 z i j n e n i g e a l g e a e n e gegevens v o o r de i t e m - t o t a a l c o r r e l a - t i e s , de phi-waarden en h e t p e r c e n t a g e met z e k e r h e i d gegeven antwoordenl opgenomen, T a b e l X'bevat de c o r r e l a t i e - f a c t o r e n t u s s e n deze grootheden,

_ ~ . .

T a b e l I X p e r c e n t a g e zeker

T a b e l X p C o r r e l a t i e m a t r i x

T o t a a l ,

-

22

-

De g r o t e s t a n d a a r d - d e v i a t i e s tonen a a n d a t e r een g r o t e s p r e i d i n g i s t u s s e n de gegevens v o o r de v e r s c h i l l e n d e v r a g e n , De gemiddelde waarde v o o r d e i t e m - t o t a a l c o r r e l a t i e s l i j k e n a a n de l a g e k a n t ( v g l , v a n N a e r s s e n , d i e gemiddelde waarden v a n 0.23 en

0.24

vond).

Voor

een

v e r d e r g a a n d e i n t e r p r e t a t i e v a n de h i e r vermelde r e s u l t a t e n z a l de

s t e u n v a n de g r o e p onderwi j s r e s e a r c h worden ingeroepen,

-

23

-

6. Is v o o r a f een s c h a t t i n g t e geven v a n de "moeilijkheid" v a n e e n item? Om twee redenen is een onderzoek n a a r de v o o r s p e l b a a r h e i d v a n de m o e i l i j k h e i d va.n een vraag b e l a n g r i j k . Op de e e r s t e plaats om vast t e s t e l l e n i n h o e v e r r e a p r i o r i de m o e i l i j k h e i d van een item k a n worden v a s t g e s t e l d . Op de tweede plaats i s i n t e r e s s a n t om t e onder- zoeken i n h o e v e r r e de meningen v a n v e r s c h i l l e n d e personen h i e r i n overeenstemmen, B i j de klassieke tentamineer-methoden en zeker b i j

h e t mondeling examen i s voor de b e o o r d e l i n g v a n de p r e s t a t i e s v a n een k a n d i d a a t v a n b e l a n g hoe f 9 m o e i l i jk" of hoe "gemakkelijks' de examintor de door hem g e s t e l d e vraag v i n d t

-

- 1 ' _ _ _

W i j v o e r d e n h e t v o l g e n d e experiment u i t .

De d r i e mensen d i e meewerkten aan de c o n s t r u c t i e van de t e s t ( t e weten: de d o c e n t , de i n s t r u c t e u r en een w e t . med.) gaven v Ó Ó r h e t examen v o o r i e d e r i t e m aan h o e v e e l p r o c e n t v a n de k a n d i d a t e n een b e p a a l d i t e m goed zou beantwoorden. Daarna werd door d i t team samen nogmaals d i t p e r c e n t a g e v a s t g e s t e l d .

N a d a t d e mondelinge examens waren afgenomen en de examinatoren v a n h e t mondeling de t e s t gemaakt hadden, gaven ook z i j een s c h a t t i n g

~ VEK h e t p e r c e n t a g e goede antwoorden p e r item. De examinatoren z u l l e n

worden aangeduid als- Ex.11 en Ex.

11.

De z e s a l d u s v e r k r e g e n s c h a t t i n g e n werden o n d e r l i n g en met d e u i t de

t e s t berekende m o e i l i j k h e i d s g r a a d v e r g e l e k e n ( z i e t a b e l

XI.

Tevens E e r 6 de gemiddelde n o e i l i j k h e i d en de s t a n d a a r d d e v i a t i e berekend ( z i e t a b e l

XI).

T a b e l X doc e n t i n s t r u c t e u r wet. rned. team ex. I e x .

I1

t e s t C o r r e l a t i e m a t r i x m o e i l i j k h e i d s g r a a d d o c e n t

-

0.47

0.36

0.82 0.53

0.36

0.36

i n s t r u c - wet.

-

0.49

-

0.71

0.69

tearr =

-

0.60

0.47 0.40 ex. I _r

-

0.58

0.62

ex.

I1

-

0.36

t e s t (zonder zekerheid)

-

24

-

-

24

-

T a b e l X I M o e i l i j k h e i d s g r a a d

%ij c o n s t a t e r e n u i t t a b e l

X

d a t d e c o r r e l a t i e t u s s e n g e s c h a t t e moei- l i j k h e i d en de w e r k e l i j k e i u o e i l i j k h e i d v r i j laag is, Door examinator I werd de b e s t e v o o r s p e l l i n g gedaan, D i t kan w e l l i c h t v e r k l a a r d worden u i t de algemene examen-ervaring d i e deze examinator b e z i t , M o g e l i j k i s ook h e t f e i t d a t d e s c h a t t i n g e n gemaakt werden n a d a t de h e l e g r o e p

h e t mondeling tentamen g e p a s s e r d w a s van i n v l o e d .

De c o r r e l a t i e t u s s e n d e s c h a t t i n g e n van de deelnemers z i j n eveneens laag. D i t w i l zeggen d a t p e r vraag de S c h a t t i n g e n van d e v e r s c h i l l e n d e mensen n o g a l e e n s f l i n k v a n elkaar v e r s c h i l l e n , W i j v r a g e n o n s af of deze c o n c l u s i e n i e t t o t g e v o l g h e e f t d a t b i j v o o r b e e l d b i j een monde- l i n g examen een v r i j g r o t e k a n s b e s t a a t d a t twee examinatoren een

t o t a a l v e r s c h i l l e n d e o p v a t t i n g hebben o v e r de m o e i l i j k h e i d v a n g e s t e l d e v r a g e n en dus o v e r d e w i j z e waarop de b e o o r d e l i n g moet worden gerna&t* Bovendien l i j k t d i t f e i t n a d e l i g t e werken b i j h e t v a s t s t e l l e n v a n kern- items,

U i t t a b e l X I v o l g t d a t de t e s t m o e i l i j k e r was d a n v e r w a c h t werd, Een g l o b a l e i n d r u k o v e r de m o e i l i j k h e i d w a s e c h t e r w e l t e v e r k r i j g e n . De d o c e n t en exo I b l i j k e n goed de s t a n d a a r d d e v i a t i e t e v o o r s p e l l e n , D i t gegeven i s een b e l a n g r i j k t e s t g e g e v e n i n verband met de d i s c r i m i n a t i e

d i e de t e s t t o t s t a n d moet brengen.

Het door Roskam g e s i g n a l e e r d e v e r s c h i j n s e l d a t raaar z e l d e n e e n vraag gemakkelijker w a s dan verwacht werd kan zeker n i e t v o o r i e d e r d e r

deelnemers a a n d i t experiment worden gehandhaafd.

7 *

Het mondeling examen

Door a l l e 30 k a n d i d a t e n werd n a d e m u l t i p l e - c h o i c e t e s t o v e r " T r i l - l i n g e n en B a l a n c e r i n g " een mondeling onderzoek v a n nominaal

45

min, afgenomen door twee examinatoren,

Z i j waren g e d e t a i l l e e r d o p de hoogte v a n de op h e t c o l l e g e behandelde

s t o f , d o o r d a t z i j de b e s c h i k k i n g hadden o v e r u i t g e b r e i d e n o t i t i e s van de d o c e n t en v a n de i n s t r u c t e u r , d i e a l l e c o l l e g e s g e v o l g d h e e f t , Z i j konden bovendien b e s c h i k k e n o v e r een geluidsopnanie v a n p r a c t i s c h de g e h e l e c o l l e g e s t o f , Van deze l a a t s t e f a c i l i t e i t w e r d geen g e b r u i k ge- maakt.

De examinatoren waren n i e t op de h o o g t e v a n d e M,C. items, Evenmin b e s c h i k t e n z i j o v e r r e s u l t a t e n v a n deze t e s t ,

Het mondeling onderzoek gebeurde op de i n d e g r o e p t e c h n i s c h e mecha- n i c a g e b r u i k e l i j k e manier. D i t w i l zeggen d a t een b e p a a l d e k a n d i d a a t door &én examinator aan de tand wordt g e v o e l d , De a n d e r e examinator b e p e r k t z i c h t o t h e t p l e g e n v a n k l e i n e i n g r e p e n i n de vorm v a n d e t a i l - v r a g e n en h i n t s ,

I n h e t algemeen worden twee opeenvolgende k a n d i d a t e n n i e t door d e z e l f d e examinator onderzocht,

De examinatoren hebben v o o r i e d e r e k a n d i d a a t de b e s c h i k k i n g o v e r e e n kaart waarop een a a n t a l gegevens vermeld s t a a n , D e b e l a n g r i j k s t e z i j n :

a, v o o r o p l e i d l n g

(HeBeS.,

Gymnasium, H.a.S.>

b. eindexamen c i j f e r s v o o r wiskunde, natuurkunde en scheikunde c s jaar v a n 'ìe i n s c h r i j v i n g

d. een a a n t a l c i j f e r s voor de afgelegde examens; i n d i t g e v a l i n h e t algemeen h e t P-examen en h e t Kl-exauzen. Ook examens

d i e e i n d i g e n i n een v e r l e n g i n g , nader onderzoek o f a f w i j z i n g z i j n vermeld-

e , t i j d s t i p v a n s l a g e n v o o r d e z e examens

f , de b e h a a l d e c i j f e r s voor de door de g r o e p v e r z o r g d e vakken, I n h e t algemeen z i j n d i t i n d i t stadium v a n d e s t u d i e i n - l e i d i n g t e c h n i s c h e mechan I, I1 en

I11

g. o v e r de k a n d i d a a t gemaakte "karakteristieke?' opmerkingen door examencommissies i n een eerder s t a d i u m v a n de s t u d i e Het g e b r u i k v a n de kaart l i j k t m i j z e e r v e e l n a d e l e n t e b e z i t t e n , H e t examen wordt begonnen met een f f v o o r o o r d e e l f ' o v e r d.e k a n d i d a a t opge- bouwd u i t c i j f e r s i n een e e r d e r s t a d i u m b e h a a l d en u i t e n i g e opmerkingen

d i e door v o r i g e examencommissies gemaakt z i j n , Deze opmerkingen hebben

-

26

-

d e e l s b e t r e k k i n g op h e t beheersen v a n de s t o f , d e e l s op p e r s o o n l i j k - hzidskenmerken, S i j d e z e l a a t s t e c a t e g o r i e moet n i e t u i t h e t oog ver- l o r e n worden d a t z i j gemaakt z i j n door leken-psychologen!

B i j h e t v a s t s t e l l e n v a n d e v o l g o r d e w a a r i n de k a n d i d a t e n geëxamineerd werden moest r e k e n i n g worden gehouden met e x a m e n z i t t i n g e n v a n andere vakken, O v e r i g e n s werd de i n d e l i n g w i l l e k e u r i g gemaakt.

De d o c e n t ( t e v e n s c o n s t r u c t e u r v a n de M.C. t e s t ) k r e e g toestemming a l s '?toehoorder" b i j h e t mondeling examen aanwezig t e z i j n , Om b i j

d e s t u d e n t e n m i s v e r s t a n d e n t e voorkomen werd medegedeeld d a t d e docent op geen e n k e l e manier d e e l zou nemen a a n de d i s c u s s i e o f de b e o o r d e l i n g , B i j 10 v a n de

30

k a n d i d a t e n v o l g d e de a u t e u r van d i t r a p p o r t h e t mon- d e l i n g onderzoek. H i j kreeg bovendien de b e s c h i k k i n g o v e r a l l e t i j d e n s h e t n o n d e l i n g gemaakte n o t i t i e s . H i j w a s d a a r b i j n i e t op de h o o g t e v a n

de door de k a n d i d a a t b e h a a l d e s c o r e b i j de t e s t , Vragen

I n h e t algemeen wordt e e n v r a a g s t u k g e s c h e t s t waarvoor e e n o p l o s s i n g gevraagd wordt Meestal wordt een f i g u u r getekend waardoor h e t probleem min o f meer gekarakteriseerd i s t e r w i j l mondeling een a a n t a l hypothesen worden meegedeeld en

-

i n e n k e l e g e v a l l e n

-

een b e s c h r i j v i n g wordt ge- g e v e n v a n de c o n s t r u c t i e waarvan h e t v r a a g s t u k een s c h e m a t i s e r i n g is, De v a r i a t i e i n de v r a a g s t u k k e n i s n i e t buitengewoon g r o o t , I n h e t a l - gemeen k r i j g t i e d e r e k a n d i d a a t s l e c h t s twee v r a a g s t u k k e n onder ogen,

De meeste h i e r v a n komen

-

e v e n t n e e l met een k l e i n e variatie

-

m h s t e n s

tweemaal v o o r - Het is mijn mening d a t v r a a g s t u k k e n d i e s l e c h t s eenmaal t e r s p r a k e komen meestal door d e commissie b i j nader i n z i e n a l s minder g e s c h i k t werden beschouwd.

Een a a n t a l problemen komen buitengewoon vaak t e r s p r a k e , U i j noeme

de 3 - c i l i n d e r l i j n m o t o r

(5x1

een 2 - c i l i n d e r motor i n e n i g e v a r i a t i e s

(16x1,

k r i t i s c h e t o e r e n t a l v a n een as met één puntmassa

(4x1.

D e door de examinatoren g e s c h e t s t e f i g u r e n kunnen n o g a l e e n s gekwali- f i c e e r d worden als o n v o l l e d i g . Z i j b e v a t t e n vaak s l e c h t s een g e d e e l t e

v a n de i n f o r m a t i e .

Het komt v o o r d a t d e k a n d i d a a t een vraag g e s t e l d wordt t e r w i j l n i e t voldoende gegevens z i j n meegedeeld. Naderhand g e e f t de e x a m i n a t o r dan de ontbrekende i n f o r m a t i e e E i j een a a n t a l k a n d i d a t e n kunnen h i e r d o o r

-

j u i s t a a n h e t b e g i n v a n h e t tentamen

-

w e l l i c h t m i s v e r s t a n d e n worden gewekt.

Ondanks h e t f e i t d a t een b e p a a l d v r a a g s t u k a a n meerdere k a n d i d a t e n wordt v o o r g e l e g d , staat i n h e t g e h e e l n i e t vast hoe h e t "gesprekrf

z i c h verder o n t w i k k e l t . Wanneer door een k a n d i d a a t een onvolle,@ge o f o n j u i s t e bewering wordt gedaan wordt h i e r o p door d e examinator meestal o n m i d d e l l i j k i n g e h a a k t met een vraag o f een o p d r a c h t , Op d i t

k l e i n e g e b i e d w o r d t dan v e r d e r g e v r a a g d t o t h e t moment d a t de kandi- d a a t h e e f t aangetoond d a t h i j e l e m e n t a i r e b e g r i p p e n , g e d o c e e r d i n a n d e r e c o l l e g e s o f op d e middelbare s c h o o l , op d i t o g e n b l i k n i e t kan u i t l e g g e n o f t o t h e t moment d a t de examinator h e t vermoeden h e e f t d a t

h i j de basis w e l b e h e e r s t . Het i s n o o d z a k e l i j k af t e s p r e k e n welke b e t e k e n i s a a n e e n examen o v e r een d e e l der t e c h n i s c h e mechanica t o e - gekend w o r d t : onderzoeken w i j de k e n n i s o v e r h e t b e t r e f f e n d e d e e l of

onderzoeken w i j de k e n n i s o v e r h e t b e t r e f f e n d e d e e l p l u s de h e l e of g e d e e l t e l i j k e k e n n i s v a n a l l e voorgaande o n d e r d e l e n i n c k s i e f wiskunde a s p e c t e n ? Wanneer d i t l a a t s t e a l t e r n a t i e f wordt gekozen moet d i t a a n

de s t u d e n t e n bekend worden gemaakt en moeten a l l e k a n d i d a t e n o p h e t a s p e c t v a n de V r o e g e r e kennis" worden g e t e s t , M i j n s i n z i e n s zou hier-

door een o n t z a g l i j k e v e r z w a r i n g van de mechanica-vakken i n h e t derde-

jaar b e w e r k s t e l l i g d worden,

De examinatoren s t e l l e n erg p r i j s op h e t nauwkeurig formuleren van de antwoorden, Een o n g e l u k k i g e manier v a n u i t d r u k k e n r o e p t t e l k e n s , i n t e r - r u p t i e s op. D i t b e t e k e n t d a t de k a n d i d a a t i n z i j n gedachtengang wordt onderbroken t e r w i j l h i j bovendien h e t r i s i c o l o o p t n a a r a a n l e i d i n g van een gebrekkige f o r m u l e r i n g 'Fmoeili jke" v r a g e n t e moeten beantwoorden. De examinatoren dwingen een k a n d i d a a t soms e e n weg t e v o l g e n , . d i e af-

w i j k t v a n degene d i e op c o l l e g e is behandeld, Deze werkwijze i s onder

omstandigheden zeker g e o o r l o o f d wanneer men z i c h voldoende r e a l i s e e r t

d a t d i t e e n m o e i l i j k e opgave i s e

De g e g e v e n h i n t s of als h i n t b e d o e l d e t u s s e n v r a g e n waren m i j n s i n z i e n s

soms m o e i l i j k t e verwerken. Bovendien l i j k t m i j h e t opvangen v a n een h i n t een hoog g e k w a l i f i c e e r d e v a a r d i g h e i d ,

De b e o o r d e l i n g

I n de meeste g e v a l l e n v i n d t e r w e i n i g d i s c u s s i e p l a a t s t u s s e n d e exa- minatoren o v e r de b e o o r d e l i n g .

A f en t o e wordt b i j de b e o o r d e l i n g een k a n d i d a a t v e r g e l e k e n met z i j n v o o r g a n g e r , maar d i t g e b e u r t i n z e e r algemene bewoordingen,

Het is mijn mening d a t de t o t a a l i n d r u k v a n de k a n d i d a a t v a n d o o r s l a g - gevende b e t e k e n i s i s , w a a r b i j r e a c t i e s n e l h e i d , uitdrukkingsvermogen,

-

28

-

k e n n i s v a n v r o e g e r behandelde s t o f tesamen met k e n n i s en i n t e l l e c t u e l e v a a r d i g h e d e n op h e t b e t r e f f e n d e vakgebied 'in de beschouwing worden betrokken:

De r e s u l t a t e n

I n t a b e l X I 1 geven w i j d e f r e q u e n t i e v e r d e l i n g , h e t gemiddelde en d e

s t a n d a a r d a f w i j k i n g v o o r de c i j f e r s v o o r d e onderdelen t r i l l i n g e n I b a l a n c e r i n g en h e t t o t a a l

T a b e l X I 1 F r e q u e n t i e v e r d e l i n g , enz, mondeling exameri,

Balanc e r i n T o t a a l

I n t a b e l

X I 1 1

z i j n d e c o r r e l a t i e f a c t o r e n vermeld d i e b l i j k e n t e be-

s t a a n t u s s e n de r e s u l t a t e n v o o r

t

l i n g e n , b a l a n c e r i n g en h e t t o t a a l

z o d s g e s c o o r d t i j d e n 5 he% mondeling exanera-

De d i f f e r e n t i a t i e d i e d e mondelinge t e s t teweeg b r e n g t is n i e t e r g g r o o t z o a l s b l i j k t u i t de g r o o t t e d e r s t a n d a a r d d e v i a t i e s , V o o r h e t t o t a a l i s de s p r e i d i n g k l e i n e r dan v o o r d e a f z o n d e r l i j k e d e l e n z o a l s v e r w a c h t kon worden u i t h e t f e i t d a t de examinatoren h e t e i n d c i j f e r v a s t s t e l d e n u i t de d e e l c i j f e r s . H e t c i j f e r v o o r t r i l l i n g e n b l i j k t

i e t s hoger t e c o r r e l e r e n met h e t e i n d c i j f e r dan h e t c i j f e r v o o r ba-

l a n c e r i n g ,

De v e r g e l i j k i n g v a n d e z e r e s u l t a t e n met d i e v a n de o b j e c t i e v e t e s t

z u l l e n w i j nog nader bespreken,