"Multiple-choice" tentamens in de Technische Mechanica in juni 1968

"Multiple-choice" tentamens in de Technische Mechanica in

juni 1968

Citation for published version (APA):

Janssen, J. D. (1968). "Multiple-choice" tentamens in de Technische Mechanica in juni 1968. (DCT rapporten; Vol. 1968.031). Technische Hogeschool Eindhoven.

Document status and date: Gepubliceerd: 01/01/1968 Document Version:

Uitgevers PDF, ook bekend als Version of Record Please check the document version of this publication:

• A submitted manuscript is the version of the article upon submission and before peer-review. There can be important differences between the submitted version and the official published version of record. People interested in the research are advised to contact the author for the final version of the publication, or visit the DOI to the publisher's website.

• The final author version and the galley proof are versions of the publication after peer review.

• The final published version features the final layout of the paper including the volume, issue and page numbers.

Link to publication

General rights

Copyright and moral rights for the publications made accessible in the public portal are retained by the authors and/or other copyright owners and it is a condition of accessing publications that users recognise and abide by the legal requirements associated with these rights. • Users may download and print one copy of any publication from the public portal for the purpose of private study or research. • You may not further distribute the material or use it for any profit-making activity or commercial gain

• You may freely distribute the URL identifying the publication in the public portal.

If the publication is distributed under the terms of Article 25fa of the Dutch Copyright Act, indicated by the “Taverne” license above, please follow below link for the End User Agreement:

www.tue.nl/taverne

Take down policy

If you believe that this document breaches copyright please contact us at:

openaccess@tue.nl

providing details and we will investigate your claim.

"Multiple-Choice's tentamens in de Technische Mechanica in juni

1968,

Inhoudsopgave

Pag 0

1, Inleiding 1

2

2. Algemene gegevens van de N.C.-tentamens

3.

Enige resultaten van het M,C.-tentamen

6

o or t g e ze t; t e S ter k t e 1 e er

*'

4.

Enige resultaten van het M.C.-tentamen

"Trillingen en balancering"

15

28

5.

Reacties van de studenten

6.

Enige resultaten vanuit de groep Technische

W u l t i p l e - C h o i c e " tentamens i n de Technische N e c h a n i c a i n j u n i

1968

1 , I n l e i d i n g

I n j a n u a r i 1968 werd de e e r s t e maal i n de g r o e p Technische Mechanica e e n m u l t i p l e - c h o i c e (M.C.) tentamen afgenomen o v e r h e t o n d e r d e e l F r T r i l l i n g e n en balancering8'.

De d a a r b i j opgedane e r v a r i n g e n z i j n v r i j u i t g e b r e i d v a s t g e l e g d i n r a p p o r t

@E

68/1*

I n d i t z e l f d e r a p p o r t i s eveneens melding gemaakt v a n e e n u i t g e v o e r d experiment om de r e s u l t a t e n v a n een mondeling e n een

M,C.

t e s t t e v e r g e l i j k e n , Er b l e e k een zeer s l e c h t e c o r r e l a t i e t e b e s t a a n , De r e s u l t a t e n v a n d i t experiment, de k r i t i s c h e a n a l y s e v a n e n i g e mondelinge en s c h r i f t e l i j k e examens, de c o n t a c t e n met de g r o e p onder- w i j s r e s e a r c h en de s c h a t v a n g e g e v e n s d i e een M,C. tentamen t e n

behoeve v a n h e t o n d e r w i j s l e v e r t , hebben a l l e betrokkenen u i t de g r o e p Technische Mechanica zonder voorbehoud de o v e r t u i g i n g g e l e v e r d d a t een M.C, tentamen i n de v6Ór-kandidaatsstudie t e p r e f e r e r e n is boven k l a s s i e k e mondelinge o f s c h r i f t e l i j k e onderzoeken.

H i e r u i t v o l g t u i t e r a a r d de b e s l i s s i n g o v e r t e gaan n a a r een

M.C.

tentamen v o o r a l l e mechanica-vakken,

Bet i n h o o f d s t u k 10 v a n I;TE

68/1

gesuggereerde t i j d s c h e m a z a l g e v o l g d

worden, M o g e l i j k is een v e r s n e l l i n g r e a l i s e e r b a a r ,

I n de g r o e p Mechanica i s een d i s c u s s i e g r o e p o v e r d e d o e l s t e l l i n g e n geformeerd, B i e r a a n wordt t e v e n s deelgenomen door e n i g e l e d e n v a n h e t Werktuigkundig p r a c t i c u m en door e e n l i d v a n o n d e r w i j s r e s e a r c h . A l s r e s u l t a a t v a n deze d i s c u s s i e s is i n e l k g e v a l a l komen vast t e s t a a n d a t i n g r i j p e n d e w i j z i g i n g e n i n h e t o n d e r w i j s n o o d z a k e l i j k l i j k e n . H e t l i j k t n u t t i g i n deze o v e r g a n g s t i j d de e r v a r i n g e n met 14.C- tentamens v a s t t e l e g g e n ,

In

d i t r a p p o r t z u l l e n de juni-examens v a n t t T r i l l i n g e n en b a l a n c e r i n g " en v a n V o o r t g e z e t t e S t e r k t e l e e r " t e r s p r a k e komen, Bovendien z u l l e n w i j de r e s u l t a t e n v a n e e n enquete vermelden d i e n a h e t tentamen door

de deelnemers beantwoord is.

- 2 -

2,

Algemene g e g e v e n s v a n de

M.C,

tentamens

G e l e i d door de e r v a r i n g met h e t v o r i g e

N.C.

tentamen werd v o o r beide

tentamens u i t g e g a a n v a n

40

items. D i t a a n t a l i s v o o r V o o r t g e z e t t e S t e r k t e l e e r goed; b i j T r i l l i n g e n e n b a l a n c e r i n g is h e t a a n t a l w e l l i c h t l e t s t e g r o o t geweest, Deze d i s c r e p a n t i e kan v e r k l a a r d worden u i t de mening v a n de l e d e n v a n de groep Technische Mechanica d a t h e t tentamen T r i l l i n g e n en b a l a n c e r i n g m o e i l i j k e r w a s dan V o o r t g e z e t t e S t e r k t e l e e r . Aannemend d a t de begaafdheden d e r groepen n i e t a l t e z e e r v e r s c h i l l e n v o l g t d i t eveneens u i t de door d e s t u d e n t e n e r v a r e n m o e i l i j k h e i d s g r a a d , Gemiddeld werd b i j V o o r t g e z e t t e S t e r k t e l e e r

72,5%

van d e vragen goed beantwoord ( d . i . 29 vragen) en b i j T r i l l i n g e n en B a l a n c e r i n g

54%

( d e i ,

21,5 v r a g e n ) e

B e t a a n t a l a l t e r n a t i e v e n b l e e f

4,

D e z e k e r h e i d s t o e t s had z i j n g r o t e v o o r d e l e n getoond en werd behouden.

De k e r n i t e m e t h o d e werd b i j b e i d e tentamens t o e g e p a s t - Deze keer werd door een a a n t a l l e d e n van d e g r o e p een s l e u t e l o p g e s t e l d .

Het a a n t a l kerniterns werd arbitrair op 7 g e s t e l d .

B i j T r i l l i n g e n en b a l a n c e r i n g werd g e b r u i k gemaakt v a n de e q u a t i n g p r o c e d u r e o s de i n j a u u a ï i gebr-aiktr norruen t e t r e r t d e n n a a r d i t t e n - tamen en deze groep studenten,

I n h o o f d s t u k

4

z u l l e n w i j op de a c h t e r g r o n d v a n de e q u a t i n g p r o c e d u r e terugkomen,

B i j d e c o n s t r u c t i e v a n de M,C.-items v o o r V o o r t g e z e t t e S t e r k t e l e e r werd de v o l g e n d e p r o c e d u i e gevolgd,

V a k t e c h n i s c h werd een i n d e l i n g gemaakt i n :

1,

r o t e r e n d e s c h i j v e n

(13

i t e m s )

2,

l o o d r e c h t op hun vlak b e l a s t e p l a t e n e n r o t a t o r i c c h

(13

items)

symmetrisch b e l a s t e c i l i n d e r s

3 .

k o k e r s

(13

i t e m s )

4,

a l l e r h a n d ( 7 i t e m )

V o o r l o p i g a l t h a n s k e n t de docent een e v e n g r o o t gewicht t o e aan d e

onder

1 . 2

en

3

genoemde onderdelen,

De d o c e n t , z i j n i n s t r u c t e u r en een medewerker d i e h e t c o l l e g e g e v o l g d h e e f t , c o n s t r u e e r d e n o n a f h a n k e l i j k o v e r i e d e r d e r onderwerpen e n i g e items,

- 3 -

Een v i j f t a l ochtenden, v e r d e e l d o v e r de tweede h e l f t v a n h e t semester, werd o v e r deze i t e m s g e d i s c u s s i e e e r d t u s s e n de d r i e t e s t c o n s t r u c t e u r s en de t e s t c o n s t r u c t e u r v a n T r i l l i n g e n en b a l a n c e r i n g .

Het b l e e k v o o r de t e s t c o n s t r u c t e u r s m o e i l i j k u i t t e gaan v a n de

Bloom-taxonomie b i j h e t bedenken v a n de items. Z i j z o c h t e n m i j n s i n z i e n s t e v e e l v r a g e n b i j ieder p a r t v a n de behandelde s t o f , K e t g e v o l g h i e r v a n w a s naar m i j n o v e r t u i g i n g onder a n d e r e d a t de aange- boden a l t e r n a t i e v e n w e i n i g homogeen waren, d i t w i l zeggen n i e t zochten naar een goed g e d e f i n i e e r d gedrag v a n de s t u d e n t .

A c h t e r a f v a s t s t e l l e n v a n d e 3loom c a t e g o r i e w a s haast onmogelijk, K i j k e n d naar h e t ene of h e t a n d e r e a l t e r n a t i e f d a c h t j e aan een h e e l andere c a t e g o r i e , O f a n d e r s gezegd: de a l t e r n a t i e v e n hadden vak- t e c h n i s c h w e l verbazd met e l k a a r , m a a r g e z i e n v a n u i t h e t verwachte g e d r a g v a n de s t u d e n t w a s e r w e i n i g overeenkomst,

Y l j n vermoeden is d a t de vragenmakers t e e e n z i j d i g d a c h t e n v a n u i t de opbouw v a n h e t vak Technische Mechanica.

Reeds na d e e e r s t e b e s p r e k i n g werd b e s l o t e n v o o r d a t e e n vraag b e d a c h t werd aan t e geven w a t p r e c i e s de b e d o e l i n g v a n de vraag w a s p Ook a l gebeurde d i t nog vaak i n v a g e termen, t o c h l e e k deze o p z e t een homo- genere (en daardoor v a a k ook a a n t r e k k e l i j k e r ) s e t a l t e r n a t i e v e n op t e

l e v e r en *

Het g e v o l g w a s ook d a t n i e t meer $'abbes t e g e l i j k F P in

66n

item t e r sprake kwam,

O v e r i g e n s meen i l l nog s t e e d s d a t de Bioom-taxonomie c e n t r a ä 1 , g e s t c l d moet worden en d a t b i j '*iedere** c a t e g o r i e een v a k t e c h n i s c h element gekozen moet worden om de i n aanmerking komende k e n n i s o f v a a r d i g h e i d t e t e s t e n .

X i j w i l l e n waarschuwen voor h e t g e v a a r de h e l e c o l l e g t e l a t e n passeren.

De v e e l g r o t e r e mogelijkheden d i e e e n N.C. tentamen t e n o p z i c h t e v a n een k l a s s i e k s c h r i f t e l i j k examen b i e d t , moeten n i e t o v e r s c h a t worden, Het tentamen i s een s t e e k p r o e f u i t a l l e v r a g e n d i e g e s t e l d zouden kunnen worden. Deze s t e e k p r o e f moet v o o r a l ook r e p r e s e n t a t i e f z i j n v a n u i t h e t g e z i c h t s p u n t v a n de Bloom-taxonomie,

De s e l e c t i e v a n

40

items gebeurde door d e docent v a n V o o r t g e z e t t e S t e r k t e l e e r . Een a a n t a l n i e t gekozen i t e m s werden t i j d e n s een i n - s t r u c t i e besproken,

- 4 -

D i t i s v o l g e n s m i j n mening een z e e r g e v a a r l i j k e p r o c e d u r e , Er kunnen

immers s l e c h t s een k l e i n a a n t a l items de r e v u e p a s s e r e n ,

Is d i t a a n t a l n i e t z o r g v u l d i g g e s e l e c t e e r d , dan kunnen de s t u d e n t e n geheel verkeerde c o n c l u s i e s t r e k k e n . Z i j kunnen b i j v o o r b e e l d conclu- d e r e n d a t h e t u i t j e hoofd l e r e n v a n een a a n t a l f o r m u l e s e e n geschikte s t r a t e g i e i s of z i j kunnen vinden d a t er v a n d i e "gemenetr v r a g e n b i j

z i j n ,

Liever dan e n i g e " a f g e v a l l e n " items moet een h e l e t e s t gegeven worden, Ook dan b l i j f t h e t onze taak z o m o g e l i j k aan t e geven op welke w i j z e een g e s c h i k t v o l d o e n a a n de e i s e n t e r e a l i s e r e n is,

I n d i t v e r b a n d i s h e t n u t t i g n a t e denken o v e r de v r a a g s t u k k e n v e r - zamelingen, Een s t u d e n t k a n de i n d r u k k r i j g e n d a t h e t maken v a n vraag- s t u k k e n g e e n nut h e e f t , "Er kunnen immers t o c h geen v r a a g s t u k k e n ge- vraagd worden" is een bewering d i e i k e n i g e malen hoorde,

U i t e r a a r d kunnen v r a a g s t u k k e n i n z i j n geheel g e s t e l d worden, Nutte- l o o s rekenwerk en i r r e l e v a n t e c o m p l i c a t i e s moeten dan worden vermeden, Maar b e l a n g r i j k e r i s nog d a t i e d e r d e r a f z o n d e r l i j k e elementen, w a a r een v r a a g s t u k u i t bestaat a f z o n d e r l i j k g e t e s t kunnen worden, Bovendien kan a f z o n d e r l i j k g e t e s t worden o f de s t u d e n t d e v e r s c h i l l e n d e elementen kan k o p p e l e n

X i j menen d a t antwoord kunnen g e v e n op een a a n t a l d e e l v r a g e n i n h e t algemeen goed wordt g e t r a i n d door v e e l complete vraagstu-kken t e maken. De s t r a t e g i e is dan n i e t rrop de een o f andere maaier de goede s l t k o z î s t krijgen", maar h e t t e l k e n s overwegen welke handelingen en p r o c e s s e n i n welke v o l g o r d e a c h t e r elkaar g e p l a a t s t moeten worden,

De c o n s t r u c t i e v a n een g e d e e l t e l i j k nie-awe I\-;*C,-test T r i l l i n g e n ea b a l a n c e r i n g werd v o o r n a m e l i j k door d e d o c e n t v a n d i t vak v e r z o r g d , Een b e t r e k k e l i j k g r o o t gedeelte v a n d e j a n u a r i - t e s t werd min o f meer g e c o r r i g e e r d , i n d i e z i n d a t de f o r m u l e r i n g en de l a y - o u t werd opge- p o e t s t , Een v r i j g r o o t a a n t a l nieuwe items werd g e c o n s t r u e e r d ,

De j u n i - t e s t bestond u i t

'I6

items d i e ook i n de j a n u a r i - t e s t waren op- genomen, Deze items werden g e b r u i k t b i j d e e q u a t i n g . Een p a a r a n d e r e items d i e i n j a n u a r i b i j z o n d e r merkwaardige r e s u l t a t e n o p l e v e r a e n , werden ook nu weer opgenomen o~zi na t e gaan o f ook nu h e t z e l f d e zon v e r s c h i j n e n , B i j de c o n s t r u c t i e v a n d e i t e m s en de c a e n s t e l l i n g v a n d e t e s t o v e r T r i l l i n g e n e n b a l a n c e r i n g werd s t e e d s gewerkt met d e Bloom-taxonomie, Het onbehagen bestaat d a t w i j t o c h s l e c h t s zeer i n t u x t i e f de inhoud

- 5 -

v a n d e v e r s c h i l l e n d e c a t e g o r i e ë n i n t e r p r e t e r e n . Het z a l n o o d z a k e l i j k z i j n h i e r i n v e r b e t e r i n g e n a a n t e brengen. Overwogen noet worden of v o o r g e b r u i k i n de g r o e p Technische Mechanica n i e t een l i j s t kan worden a a n g e l e g d v a n v o o r b e e l d e n (op h e t g e b i e d v a n de Technische 1'4echanica)

b i j i e d e r e Bloom-categorie.

- 6 -

3 *

E n i g e r e s u l t a t e n v a n h e t 14.C. tentamen W o o r g e z e t t e S t e r k t e l e e r # ' ; j u n i I968 Aan h e t tentamen W o o r t g e z e t t e S t e r k t e l e e r t 9 in j u n i 1968 werd door

110 s t u d e n t e n deelgenomen. Ten g e v o l g e v a n w i j z i g i n g e n i n h e t s t a d i e - programma b e h o o r t d i t vzk voor een a a n t a l s t u d e n t e n t o t h e t K2-examen;

v o o r een a a n t a l t o t h e t I1-examen. Op een e n k e l e u i t z o n d e r i n g n a v o l g e n a l l e s t u d e n t e n de o p l e i d i n g v o o r werktuigkundig i n g e n i e u r .

H e t c o l l e g e o v e r d i t vak wordt gegeven i n h e t v o o r j a a r s s e m e s t e r , Het wordt b e g e l e i d door een i n s t r u c t i e v a n

2

uur p e r week,

De b e l a n g r i j k s t e gegevens v a n de groep z i j n : A a n t a l v r a g e n d i e be antwoord zonder z e k e r h e i d T o t a a l - s c c r e De o b j e c t i e v e gemakkelijkheid v a n de t e s t , g e d e f i n i e e r d als de p r o p o r t i e v a n a l l e v r a g e n d i e goed z i j n beantwoord ( a f g e k o r t als de p-waarde),

b e d r a a g t :

0,73.

De s u b j e c t i e v e gemakkelijkheid, d i t i s d e p r o p o r t i e v a n de antwoorden,

_L

d i e met zekerheid gegeven is, bedraagt: 0.70.

I n g r a f i e k

3.1

i s de c u m u l a t i e v e p r o p o r t i e v o o r de s c o r i n g

zonder z e k e r h e i d s a a n d u i d i n g getekend als f u n c t i e v a n de s c o r e (eveneens zonder z e k e r h e i d s a a n d u i d i n g ) .

-

-~

Wanneer b i j v o o r b e e l d b i j een s c o r e v a n 29 punteen een c u m u l a t i e v e pro- p o r t i e v a n . 5 1 8 b e h o o r t , b e t e k e n t d i t d a t

51,8%

van de k a n d i d a t e n t e n h o o g s t e

29

punten g e s c o o r d h e e f t ,

I n g r a f i e k

3.2

z i j n d e z e l f d e r e s u l t a t e n vermeld v o o r d e t o t a a l p u n t e n met z e k e r h e i d s a a n d u i d i n g .

- 9 -

W i j merken nog op d a t h e t s p r e i d i n g s g e b i e d v o o r h e t a a n t a l goede ant- woorden l o o p t van

14

t o t 3 8 ( m o g e l i j k s p r e i d i n g s g e b i e d O

-

401,

Het s p r e i d i n g s g e b i e d v o o r d e s c o r e met z e k e r h e i d s a a n d u i d i n g l o o p t v a n

+

12

t o t

+

68 ( m o g e l i j k s p r e i d i n g s g e b i e d v a n

-

40

t o t i

80)-

De gegevens p e r i t e m z u l l e n h i e r n i e t besproken worden. Z i j worden u i t e r a a r d k r i t i s c h g e a n a l y s e e r d , v a n d e ene k a n t om de items t e kunnen

v e r b e t e r e n ; v a n de andere k a n t om i n een volgende c u r s u s h e t o n d e r w i j s t e kunnen v e r b e t e r e n . W i j vermelden v o o r de t e s t :

-

c o n s i s t e n t i e zonder z e k e r h e i d s a a n d u i d i n g

=

+

.69

-

c o n s i s t e n t i e rnet zekerheidsaanduiding

=

+

.69

-

c o r r e l a t i e t o t a a l s c o r e s met/zonder z e k e r h e i d s a a n d u i d l n g

=

+

.96

H i e r u i t v a l t a l l e r e e r s t t e c o n c l u d e r e n d a t de z e k e r h e i d s t o e t s n i e t v e r o o r z a a k t h e e f t d a t v o o r n a m e l i j k "het z e l f v e r t r o u w e n " is onderzocht e

De t e s t meet h o o f d z a k e l i j k n a a r h e t goed kunnen antwoord geven op de g e s t e l d e problemen, De z e k e r h e i d s t o e t s z o r g t a l l e e n v o o r een g r o t e r e d i s c r i m i n a t i e .

Over de b e t e k e n i s v a n h e t b e g r i p g l ( i n t e r n e ) c o n s i s t e n t i e P ' v a n d e t e s t de v o l g e n d e opmerking.

Yganneer de t e s t t o t d o e l h e e f t &&n f'eigenschapt3 t e meten, dan moet de c o n s i s t e n t i e zo d i c h t m o g e l i j k b i j

1.0

g e l z i j n .

Een t e s t d i e d u s b i j v o o r b e e l d g e c o n s t r u e e r d wordt om ::de i n t e l l i g e n t i e " o f F'àe i j v e r ? ' of '?het i n t e r p r e t e r e n van g r a f i e k e n T t t e meten is goed wanneer een hoge i n t e r n e c o n s i s t e n t i e wordt gevonden.

V e r b e t e r e n v a n een d e r g e l i j k e t e s t kan g e r i c h t gebeuren door b i j i e d e r i t e m t e l e t t e n op de i t e m - t o t a a l c o r r e l a t i e , Vragen met een hoge item- t o t a a l c o r r e l a t i e z i j n rfgoedegs vragen,

Het i s nu d e vraag of b i j een t e s t als de onderhavige inderdaafl ge- sproken kan worden o v e r &én eigenschap: zo i e t s als t g b e g r i p v o o r V o o r t g e z e t t e St e r k t e l e e r

*).

Op de e e r s t e p l a a t s moet immers onderscheid gemaakt worden t u s s e n ver- s c h i l l e n d e onderdelen v a n h e t vak, b i j v o o r b e e l d s c h i j v e n , p l a t e n , k o k e r s , Op de tweede p l a a t s z i j n v r a g e n g e c o n s t r u e e r d d i e h e e l v e r - s c h i l l e n d e s o o r t e n k e n n i s o f vaardigheden proberen t e t o e t s e n .

Kan i n d e r d a a d worden v e r o n d e r s t e l d d a t h e t weten w a t krimpdruk is en

-

10

-

h e t o p l o s s e n v a n de b i p o t e n t i a a l v e r g e l i j k i n g b e i d e t e s t e n o p "het begrip v o o r V o o r t g e z e t t e Sterkteleer'>?

W i j g e l o v e n d a t e e n t e s t a l s de o n d e r h a v i g e b e s l i s t n i e t e e n één- d i m e n s i o n a l e t e s t moet z i j n .

i n bepaalde verhoudingen worden a l l e r l e i a s p e c t e n en f a c e t t e n onder-

z o c h t t w a a r u i t tezamen h e t b e e l d v e r s c h i j n t i n h o e v e r r e de s t u d e n t a a n d e d o e l s t e l l i n g e n v a n h e t o n d e r w i j s v o o r V o o r t g e z e t t e S t e r k t e l e e r v o l d o e t

Het l i g t v o o r de hand d a t e r t o c h " i e t s gemeenschappelijks" i n a l deze a s p e c t e n aanwezig is, d a t karakterist i s v o o r d i t vak. D i t b e t e k e n t d a t de i n t e r n e c o n s i s t e n t i e i n e l l g e v a l p o s i t i e f z a l moeten z i j n . D i t b e t e k e n t eveneens d a t n i e t a l l e v r a g e n een hoge i t e m - t o t a a l c o r r e l a t i e hoeven t e b e z i t t e n , Is d e z e g r o o t h e i d erg k l e i n p o s i t i e f o f n e g a t i e f , dan i s d i t e e n v r a a g t e k e n p l a a t s e n b i j d i e vraag, Is h e t

item m i s s c h i e n s l e c h t geformuleerd'? Wijkt de d a a r i n o n d e r z o c h t e eigen- s c h a p z o v e e l af v a n de r e s t v a n d e t e s t ? Achten w i j d a t g u n s t i g ? Is h i e r u i t i n f o r m a t i e v o o r h e t o n d e r w i j s t e v e r k r i j g e n ?

Het zonder meer schrappen van items met een l a g e i t e m - t o t a a l c o r r e l a t i e kan betekenen d a t een t o c h w e l b e l a n g r i j k aspect wordt g e ë l i m i n e e r d ,

t e s t wordt door d i t schrappen homogener, m a a r h e t i s denkbaar d a t z i j dan b i j v o o r b e e l d l o u t e r een i n t e l l i g e n t i e - t e s t w o r d t p

Om de g r e n s v o l d o e n d e

-

onvoldoende vast t e l e g g e n werd g e t r a c h t g e b r u i k t e Baken v a n de k e r n i t e m methode, Acht v e r s c h i l l e n d e k e r n i t e m - s l e u t e l s , i e d e r b e s t a a n d e u i t 7 items, werden gehanteerd,

Op de e e r s t e plaats werd door zes l e d e n v a n d e g r o e p Technische Me- c h a n i c a o n a f h a n k e l i j k v a n elkaar een s l e u t e l aangegeven,

I n t a b e l

3.2

worden de v e r s c h i l l e n d e b e o o r d e l a a r s aangeduid met de l e t - t e r s

M, B,

I,

V , E,

M.

De met

R

aangeduide reeks werd %et de ogen d i c h t " (random) aangewezen, T e n s l o t t e i s d e s l e u t e l A pas aangewezen, n a d a t de t e s t r e s u l t a t e n bekend

war en.

Twee d o c e n t e n c o n s t r u e e r d e n deze s l e u t e l zonder e x p l i c i e t n a a r de t e s t - r e s u l t a t e n t e k i j k e n . Z i j z i j n e r z i c h echter terdege v a n bewust d a t deze s l e u t e l t o c h e r n s t i g b e p a a l d i s door de gegevens v a n d e g r o e p en

-

11

-

T a b e l

3.2

p-waar de p-waarde v o o r de v e r s c h i l l e n d e kernitems ~~ item

30

35

1

23

39

I 1

7

18

40

3 6

37

20

26

27

15

16

33

22

17

1 9 14

6

25

4

2

38

12 21

28

10

M

I_

B

-

X X X X X X

-

I

-

X X X X b e o o r d e l a a r

-

v

__. X X X X X X

E

-

X X X

N

-

X X X

-

R

__I X X X X x X

-

: 2

-

-

12

-

v e r v o l g t a b e l

3.2

p -waar de i t e m b e o o r d e l a a r

M

-

I

R

_ X

A

25

4

2 3 8 12 21

28

10

31

29

24

8

34

32

13

5

9

3

X X X X X X

x

X X X X X X X X X X X X X X X

88

ge m i d d e

1

de p -waar de s t a n d a a r d d e v i a t i e

_o5

- ~- -~ ~ bovengrens s l a g i n g s p r o p , e

64

* 52

-

,88

4

65

0

54

-

*

77

-

ondergrens s l a g i n g s p r o p . *

83

corr. t o t a a l s c o r e / k e r n - i t emsc o r e

59

____. .60

-

.67

e

66

b 60

.62

Opm.: De bovengrens v o o r h e t s l a g i n g s p e r c e n t a g e i s g e l i j k a a n d e gemid- d e l d e p-waarde en gaat u i t v a n de h y p o t h e s e - d a t g e l u k en pech geen r o i s p e l e n .

De ondergrens i s bepaald v a n u i t de hypothese d a t z i j d i e h e t

kennen de vraag goed beantwoorden en z i j d i e h e t n i e t kennen

-

13

-

de s l a g i n g s p r o p o r t i e v o o r de ondergrens (dus h e t d e e l d a t h e t i n e l k

-

I g e v a l w e e t ) q dan g e l d t : q +

4

( 1

-

q)

=

p q -

3

B i j t a b e l 3.2 moet a l s b e l a n g r i j k e i n f o r m a t i e nog vermeld worden d a t de gemiddelde p-waarde v o o r de h e l e t e s t 0,73 met een s t a n d a a r d d e v i a t i e van

-19 ise

A l l e e n v o o r d e b e o o r d e l a a r s N en A i s de s t a n d a a r d d e v i a t i e v a n de kern- itenis a a n m e r k e l i j k k l e i n e r dan v a n de h e l e t e s t ,

H i e r b i j kan u i t A n i e t de c o n c l u s i e g e t r o k k e n worden d a t de kernitem- methode b r u i k b a a r

is,

De s l e u t e l b i j S 3s immers pas a c h t e r a I t o t s t a n d gekomen e

De s l e u t e l van p3 is wel v ó ó r h e t tentamen g e c r e ë e r d , Deze s l e u t e l b e v a t e c h t e r i n d e ogen v a n d e d o c e a t een a a n t a l items d i e w e i n i g r e l e v a n t z i j n , dus v r a g e n d i e handelen o v e r de p e r i f e r i e v a n h e t h e l e v a k ,

U i t deze k r i t i e k v o l g t d a t een k l e i n e s t a n d a a r d d e v i a t i e n i e t h e t enige b e l a n g r i j k e gegeven is e

De c o r r e l a t i e t u s s e n de t o t a a l s c o r e en de k e r n i t e m s c o r e l i j k t een a n d e r b e l a n g r i j k gegeven, De h i e r o p b e t r e k k i n g hebbende c o r r e l a t i e c o ë f f i c i e n t e n z i j n i n onze ogen

-

m i s s c h i e n met u i t z o n d e r i n g v a n b e o o r d e l a a r B

-

e r g laag.

De c o r r e l a t i e c o ë f f i c i e n t e n t u s s e n de b e o o r d e l a a r s z i j n bedroevend laag, vaak z e l f s n e g a t i e f , Net u i t z o n d e r i n g v a n de c o r r e l a t i e t u s s e n S en V

( +

-48)

bewegen z i j z i c h

In

h e t g e b i e d v a n

-

.21 t o t

+

.21.

De h i e r vermelde opmerkingen moeten nog nader b e d i s c u s s i e e r d worden. Be- l a n g r i j k is t e overwegen o f h e t f e i t d a t een t e s t n i e t &&i-dimensionaal z a l z i j n op z i c h r e e d s de kernitemmethode onmogelijk maakt. I n d i t verband moet ook bekeken worden o f de c o r r e l a t i e tussen de t o t a l e t e s t en een ge- d e e l t e een g e s c h i k t e g r o o t h e i d is om c o n c l u s i e s u i t de d e e l t o e t s t e t r a n s - formeren n a a r de h e l e t e s t .

Toch moet

-

ondanks h e t f a l e n v a n de kernitemmethode

-

een b e s l i s s i n g om s l a g e n o f zakken genomen worden.

Deze b e s l i s s i n g is de v o l l e d i g e v e r a n t w o o r d e l i j k n e i d v a n d e docent-exa- minator e

A l l e r l e i andere methoden om d e g r e n s vast t e l e g g e n m i s l u k t e n ( z i e :;uY

68-11,

Van de v o l g e n d e i n f o r m a t i e werd g e b r u i k gemaakt:

U i t 276 o v e r h e t vak ( V o o r t g e z e t t e ) S t e r k t e l e e r i n h e t v e r l e d e n afgenomen tentamens i n een c o m b i n a t i e v a n s c h r i f t e l i j k en mondeling i s af t e l e i d e n

n 1.

-

14

-

d a t gemiddeld

22%

géen voldoende h a a l d e ,

D e g e m i d d e l d e p-waarden v o o r d e k e r n i t e m s t e n d e r e n naar een a f w i j s - p e r c e n t a g e v a n ongeveer

30%

v o o r

M,

B,

J,

V en E en

13%

voor N en A. D e d o c e n t b e s l o o t

15%

v a n d e k a n d i d a t e n af t e w i j z e n , onder de v e r - melding d a t deze norm Ita,, de s o e p e l e kant" is.

Deze g r e n s b e t e k e n t d a t 3 7 punten de l a a g s t e s c o r e i s d i e nog a l s v o l d o e n d e b e o o r d e e l d wordt. D e t r a n s f o r m a t i e n a a r een 10-puntsschaal werd l i n e a i r gekozen,

N a d i s c u s s i e s i s ons g e b l e k e n d a t h e t de vraag is o f deze l i n e a i r s f o r m a t i e momenteel de meest v e r s t a n d i g e is. De c i j f e r s , z o a l s z i j op examenvergaderingen ronddwarrelen, hebben e e n g e v o e l s m a t i g e inhoud, ondanks h e t f e i t d a t e r a l l e r l e i rekenkundige bewerkingen mee worden u i t g e h a a l d . W e l l i c h t d a t w i j h i e r b i j e e n v o l g e n d e g e l e g e n h e i d r e k e n i n g mee z u l l e n houden, T a b e l 3 * 3 S C o r e Normen tentamen j u n i

1968

c i j f e r f r e q u e n t i e O 1 1

u

12

26

- - -

28

29

IO

3 zakken s l a g e n

-

15

-

-

15

-

4.

Enige resultaten van het tentamen "Trillingen en balancering", juni

1968

Het college rsTrillingen en balancering" wordt in het najaar gegeven, tesamen met een instructie van 2

uur

per 2 weken,

Aan het onderhavige tentamen merd door

27

studenten deelgenomen, De belangrijkste gegevens van de groep voor de gepresenteerde

40

items luiden:

Tabel

4,l

goed

-

onzeker die be antwoord

De p-waarde van de test is 0,54; de subjectieve gemakkelijkheid is

O,59.

Zowel objectief als subjectie€ is deze test dus Boeilijker dan de test over Voortgezette Sterkteleer,

Dit vermoeden was in de groep Technische Nechanica

vi>&

het tentamen vrij unaniem aanwezig,

In grafiek

4,l

is weer de cumulatieve proportie voor de resultaten bereikt zonder en met zekerheidsaanduiding weergegeven als functie van die scores.

Het spreidingsgebied voor de juiste antwoorden loopt van

13

tot

29

en is dus aanmerkelijk kleiner dan bij Sterkteleer,

De

scores met zekerheid bestrijken eveneens een veel kleiner traject,

nl.

var].

+

I 2 tot

+ 46,

-

17

-

De b e l a n g r i j k s t e algemene g e g e v e n s v a n d e t e s t z i j n :

-

c o n s i s t e n t i e zonder z e k e r h e i d s a a n d u i d i n g = t .53

-

c o n s i s t e n t i e met z e k e r h e i d s a a n d u i d i n g =

+

.so

-

c o r r e l a t i e t o t a a l s c o r e s met/zonder z e k e r h e i d s a a n d u i d i n g

=

+

-96

H i j v e r w i j z e n naar h e t overeenkomstige g e d e e l t e v a n h o o f d s t u k

3 .

Aangaande de g e g e v e n s p e r item moet h i e r nog u i t d r u k k e l i j k vermeld worden d a t h e t g e r i n g e a a n t a l deelnemers (27) v e r e i s t d e z e g e t a l l e n met voorbehoud t e hanteren.

De g r e n s v o l d o e n d e

-

onvoldoende v a s t l e g g e n w a s ook v o o r d i t tentamen een probleem,

V i a 5 k e r n i t e m s l e u t e l s v a n 7 items werd g e t r a c h t deze g r e n s t e l o k a - l i s e r en 6

V o o r d a t d i t tentamen u i t g e v o e r d werd, waren d e t e l e u r s t e l l e n d e s e s u l - t a t e n v a n de kernitemmethode b i j V o o r t g e z e t t S t e r k t e l e e r bekend, D a a r b i j b l e e k d a t a c h t e r a f ( b e o o r d e l a a r

A

u i t t a b e l

3.2)

de methode e n i g e hoop bood, Zeer l a n g is d a a r n a door d e b e o o r d e l a a r s E en J o v e r de k e r n i t e m s g e d i s c u s s i e e r d , De d o o r b e o o r d e l a a r 3 opgegeven s l e u t e l i s dan ook de b e s t e d i e samengesteld kon worden. Ook de door 5 opgegeven

s l e u t e l l e e k zeer goed b r u i k b a a r . T a b e l 4 - 2 o-waarde v o o r de v e r s c h i l l e n d e k e r n i t e m s p-waasde *

O 0

o

22

.26 e 26

930

*

30

e 33 0

37

O 3 7

.

Lk

.44 o

L4

o

44

item 3 8 ? 2 28 26

3 4

27

35

15

24

5

6 36

31

-

w

-

X b e o o r d e l a a r J X

E

-

18

-

-

I 8

-

servolg tabel

4.2

p-waar d e item Beoordelaar

B

J

-

E

Pi

13

7

25

16 X

32

22

3

17

40

9

2 1 X X X X X X X X X X

30

37

14

20

23

21 10

39

33

29

8

X X X X X

x

X X X X X X X X X 11

18

19

4

X X X ___. 0

55

24

-

-

*

46

63

gemidde Id e p-waar d e 0 22

.46

-

. I 4

standaarddeviatie . I 2 e

66

bovengr ens slagings-, percentage Q

63

-

.40 *

55

*

53

ondergrens slagings- percentage

-

0

54

65

.48

c o r 1

.,

to t aalsc o r e/ kernitemscore

-

19

-

-

1 9

-

B i j t a b e l

4,2

moet opgemerkt worden d a t v o o r d e h e l e t e s t de p-waarde

-54

met e e n s t a n d a a r d d e v i a t i e v a n .I9 is.

Ook h i e r b l i j k t de kernitemmethode n i e t t e s l a g e n . Ook h e t u i t e r s t zorg- v u l d i g s e l e c t e r e n v a n een s l e u t e l h e e f t geen s u c c e s gehad.

tllanneer geen n a d e r e i n f o r m a t i e v e r k r e g e n wordt moet onze c o n c l u s i e z i j n

d a t h e t geen e n k e l nut h e e f t nog verder met deze methode t e e x c e r c e r e n , Een a n d e r e p o g i n g om geinformeerd t e r a k e n o v e r de g r e n s s l a g e n

-

zakken probeerden w i j t e v i n d e n door v a n t e v o r e n b i j i e d e r item a a n t e geven of deze vraag goed beantwoord moet worden door iemand d i e a a n de minimumeisen v o l d o e t .

W i j l e t t e n n i e t a l l e e n

OP de

inhoud, maar ook op de f o r m u l e r i n g , Waar e n i g e t w i j f e l w a s b e s l o t e n w i j deze vraag n i e t als minimmeis t e hanteren.

I n een a a n t a l g e v a l l e n vonden w i j d a t de vraag n i e t goed beantwoord h o e f d e t e worden, maar d a t t o t de minimumeisen i n e l k geval behoor* d a t één v a n twee a l t e r n a t i e v e n gekozen moest worden,

I n t a b e l

4,3

z i j n d e r e s u l t a t e n vermeld. Onder de p-waarden moet soms ver- s t a a n worden h e t p e r c e n t a g e s t u d e n t e n d a t twee va

t i e v e n koos,

Tabel 4.3 S c h a t t i n g minimumeisen i n d e vorm v a n items en d e gevonden p-waarden

n o o d z a k e l i j k goed t e beantwoorden items A A I U

11

15

( b o f C ) 1 7 ( a o f c > 1 8

19

23

28

( c of d )

30

37

3 8 ( a o f b ) 3 9 gemiddelde p-waarde

gemiddelde p-waarde b i j achterwege l a t e n v a n items w a a r b i j

2

a l t e r n a - t i e v e n acceptabel z i j n

p-waazldeni

66

-

20

-

2:

B i j de gekozen hy-pothesen hebben de i n t a b e l 4,3 vermelde ge-

middelde w e i n i g betekenis..

V a n u i t d i e hypothese zou de laagste p-waarde de g r e n s v o l d o e n d e

-

onvoldoende markeren.

Het i s d u i d e l i j k d a t deze methode m i s l u k t is,

W i j hebben v o o r d i t tentamen bovendien een p o g i n g gedaan d e z e l f d e normen a l s i n j a n u a r i 1968 t e h a n t e r e n door g e b r u i k t e maken v a n de equating- p r o c e d u r e e

W i j moeten v a s t s t e l l e n d a t v a n t e v o r e n n i e t zeker was o f b r u i k b a r e

g e g e v e n s v e r k r e g e n zouden worden. T w i j f e l s waren aanwezig op grond v a n h e t f e i t d a t

1, zowel i n j u n i als i n j a n u a r i ongeveer

3 0

deelnemers waren, Voor de i n t e r p r e t a t i e v a n s t a t i s t i s c h e g e g e v e n s l i j k t d i t a a n t a l laag.

2,

i n j a n u a r i t i j d n o o d een n i e t t e miskennen i n v l o e d h e e f t u i t g e - oefend.

De equating- oceduse b e r u s t op h e t p r i n c i p e d a t k w a l i t e i t s v e r s c h i l t u s s e n twee groepen s t u d e n t e n kunnen worden v a s t g e s t e l d door i e d e r van deze groepen d e z e l f d e v r a g e n t e l a t e n beantwoorden,

a l e s i t u a t i e zou o n t s t a a n wanneer b e i d e groepen d e z e l f d e t e s t zouden kunnen maken, Deze s i t u a t i e i s i n v e r b a n d Bet h e r i n n e r i n g s e f f e c t e n n i e t r e a l i s e e r b a a r e

Hek is wel m o g e l i j k een g e d e e l t e van twee jlJI.C,-test h e t z e l f d e t e doen z i j n . Door h e t v r i j grote a a n t a l items w a a r u i t een 2!l,C.-test; i n h e t alge- meen b e s t a a t is h e t m o g e l i j k nog een b e t r e k k e l i j k g r o o t a a n t a l items a l s "equating-items" t e h a n t e r e n . Op de keuze v a n deze items komen w i j nog t e r u g .

W i j kunnen d u s d e s i t u a t i e c r e z r e n d a t twee

-

o v e r i g e n s v e r s c h i l l e n d e

-

tentamens een g e d e e l t e b e v a t t e n d a t i d e n t i e k is, G l o b a a l g e s t e l d kan u i t h e t g e d e e l t e v a n d e t e s t s d a t i d e n t i e k i s a f g e l e i d worden o f de twee groepen s t u d e n t e n i n k i i a l i t e i t v e r s c h i l l e n , Weer g l o b a a l g e s t e l d : d i t

k m a l i t e i t s \ r e r s c h i l i n aanmerking nemend, is er geen i n v l o e d meer v a n moeilijkheidsverschillen i n de twee tentamens,

%ij z u l l e n h e t een en ander p r e c i e s e r formuleren en aangeven a a n de hand v a n g r a f i e k 4,2. b v i j b e s c h r i j v e n dan meteen e e n v a n d e twee methoden, d i e

d o m d e g r o e p e n d e r w i j s r e s e a r c h worden g e h a n t e e r d ,

Het januari-tentamen b e s t o n d u i t

65

i t e m s ; h e t juni-tentamen u i t

40

items,

-

21

-

16

i t e m s v a n b e i d e tentamens z i j n i d e n t i e k ( o p een e n k e l e o n b e l a n g r i j k e c o r r e c t i e n a > . D i t z i j n de Items d i e i n de j a n u a r i - t e s t d e nummers:

2

'I

6,9

12

16

%'I

7

930

,33,36 945

,401

49,53,56 $60 en 6 3 droegen, I n de j u n i - t e s t

dragen

i t

ems h e t nurimer :

13

1

4 23

2 1

4 27

2 9 , 2 0

25

o 1 6

,7

33

37

30

34

ea

40

of i n een andere v o l g o r d e genoteerd:

4,7,l3,14,16,20,21,~3,2~,27,29,

30333934937

e a 40.

De 16-equating items z u l l e n w i j aanduiden a l s d e e l t o e t s .

I n g r a f i e k 4 - 2 is nu de c u m u l a t i e v e p r o p o r t i e u i t g e z e t als f u n c t i e v a n d e s c o r e met z e k e r h e i d v o o r :

1

h e t januari-tentamen

2,

h e t juni-tentamen

3.

de d e e l t o e t s i n h e t j a n u a r i - t e n t m e n

4,

de d e e l t o e t s i n h e t juni-tentamen,

Van deze g r a f i e k e n z i j n s l e c h t s een a a n t a l d i s c r e t e punten gegever?, Tussen twee gegeven n a b u r i g e punten wordt l i n e a i r g e i n t e r p o l e e r d ,

De weg d i e b i j de e q u a t i n g bewandeld w o r d t , w i l l e n w i j t o e l i c h t e n op de g r e n s v o l d o e n d e

-

onvoldoende

(z:

o v e r h e t g e o o r l o o f d z i j n v a n een aan- t a l s t a p p e n komen w i j nog t e spreken).

I n j a n u a r i waren tenminste

30

punten n o d i g om h e t c i j f e r 6 t e b e h a l e n , D i t c o r r e s p o n d e e r t met een p r o p o r t i e v a n

.'I66

( z i e g r a f i e k ) v a n de deelnemende s t u d e n t e n d i e t e n h o o g s t e d i t p u n t e n a a n t a l behaalden,

Wanneer de d e e l t o e t s een goede a f s g e l i n g is v a n h e t t o t a l e tentamen,

dus wanneer i n h e t algemeen de r a n g o r d e b i j d e s t u d e n t e n d i e d o o r d e h e l e t e s t t o t s t a n d komt d e z e l f d e is als d i e bij d e d e e l t o e t s , dan w e r d door de s l e c h t s t e

16,6%

v a n de s t u d e n t e n i n de d e e l t o e t s

3 > 9 7

punten g e s c o o r d e B i j h e t juni-tentamen werd d e z e l f d e d e e l t o e t s g e b r u i k t , B i j d i t tentamen werd door

9,6%

v a n de deelnemende g r o e p s t u d e n t e n teui h o o g s t e 3,97 punten voor deze d e e l t o e t s g e s c o o r d ,

Wanneer nu ook b i j h e t juni-tentamen de d e e l t o e t s i n h e t algemeen d e z e l f d e r a n g o r d e bewerkt als h e t t o t a l e tentamen dan b e t e k e n t d a t d a t

9,6%

v a n deze g r o e p een p r e s t a t i e geleverd h e e f t d i e g e r i n g e r dan of g e l i j k aan de pses- t a t i e is d i e b i j h e t januari-tentamen gekoppeld w a s a a n h e t b e h a l e n

v a n

30 punten o f minder. D i t b e t e k e n t d a t voor h e t juni-tentamen

14.2

punten ge-

scoord n o e t worden om j u i s t een 6 t e v e r k r i j g e n , D i t zou b e t e k e n e n d a t h e t

s c o r e n v a n 15 punten als voldoende wordt g e k w a l i f i c e e r d ,

In

d i k geval zoude dan

2

k a n d i d a t e n o f

7,4%

v a n de deeloemess worden afgewezen,

-

22

-

V$ij moeten nog ingaan op de hypothese die in het voorgaande gemaakt is, nol. dat de door de deeltoets vastgelegde rangorde goed correspondeert met die van de hele test.

Statistisch betekent deze eis dat de correlatie-cogfficient tussen de scores bij de deeltoets en de totaaltoets groot moet zijn, Dit moet zo- wel gelden voor het "oude" als voor het "nieuwe" tentamen,

Bij het oude tentamen (in dit geval dus het januari-tentamen) is deze eis vrij eenvoudig te realiseren omdat dan de item-analyse bekend is, Van ieder item is dus o 0 a e de item-totaal correlatie bekend, Het ligt voor de hand dat goede resultaten verkregen worden door items als equating-items te se- lecteren, als zij een hoge item-totaal correlatie bezitten,

Bij hef nieuwe tentamen is niet van te voren vast te stellen hoe de corre- latie tussen de deeltoets en het gehele t e n t m e n zal worden, Wij hopen door discussies met deskundigen en ervaring wet de equating-methode aanwijzingen te vinden aan welke eisen deze correlatie-coefficient moet voldoen OE de

equating-procedure geslaagd te achten,

\\*ij hopen eveneens te achterhalen of het mogelijk is om uit het aantal equating-items en de item-totaalcorrelaties een schatting te vinden voor de correlatie tussen deeltoets en totaaltoets. Voor de selectie van de equating-items zou dat een direct hulpmiddel

ziSn,

Tabei

4.4

Gegevens equating-items per item

_ - i ._ . -~ . ~~

-

Item

nr,

j urii 13 i

4"

23

*

21

4*

27

"

29

*

20

*

2s

16*

7

33

*

37 30 34*

4s-

Item-totaal c o n . jan. juni p-waarde jan, juni

-

23

-

-

23

-

Tabel

4.5

Algemene gegevens d e e l t o e t s

item t o t a a l - c o r r

,

s t a n d a a r d d e v i a t i e

s c o r e met zekerheid

De c o r r e l a t i e - c o ë f f i c i e n t t u s s e n d e e l t o e t s en t o t a a l t o e t s b i j h e t j u n i - tentamen l i j k t erg laag v o o r h e t g e s t e l d e d o e l ,

?4ij moesten h e l a a s v a s t s t e l l e n d a t w i j o n s b i j h e t zoeken v a n equating- itenis i n de j a n u a r i - t e s t t e v e e l hebben l a t e n l e i d e n d o o r d e i t e m - t o t a a l c o r r e l a t i e - c o e f f i c i e n t e n . D a a r b i j hebben w i j t e w e i n i g r e k e n i n g gehouden met een m o g e l i j k e onbetrouwbaarheid i n d i e c o ë f f i c i e n t e n OF grond van h e t

k l e i n e a a n t a l t e n t m i n a n d i en eveneens t e w e i n i g a a n d a c h t gehecht a a n de vraag of de items r e l e v a n t waren v o o r de examenstof. Met deze zaken moet de v o l g e n d e maal t e r dege r e k e n i n g worden gehouden,

Omdat w i j geen c r i t e r i a hadden om h e t a a n t a l e q u a t i n g items t e b e p a l e n en omdat w i j b i j nader i n z i e n n i e t erg g e l u k k i g waren met d e keuze van e n i g e items, hebben r w i j de equating-procedure met I O v a n de oorspronke- l i j k e

1 6

items l a t e n u i t v o e r e n ,

Het "schzappenPt v a n 6 i t e m s gebeurde v o o r n a m e l i j k op grond v a n h e t w e i n i g r e l e v a n t z i j n v a n deze vragen, De r e s t e r e n d e items z i j n i n t a b e l

4.4

v a n

een

*

v o o r z i e n , I n t a b e l

4.6

z i j n de algemnene g e g e v e n s v a n deze rFggecorri- ge e r de de e l to e t stt w e e r g e g e v e n e

W i j w i l l e n opmerken d a t h e t w e l l i c h t g e o o r l o o f d is i n e e r s t e i n s t a n t i e meer items i n v e r s c h i l l e n d e tentamens t e d u p l i c e r e n dan strikt n o d i g is, om d a a r n a een d e e l h i e r v a n ( z o gekozen d a t de c o r r e l a t i e t u s s e n d e e l t o e t s en t o t a a l t o e t s zo g r o o t m o g e l i j k wordt v o o r h e t oude en h e t nieuwe ten- tamen) v o o r d e e q u a t i n g t e gebruiken. '

-

24

-

T a b e l

4.6

Algemene gegevens g e c o r r i g e e r d e d e e l t o e t s i t e m - t o t a a l corr. p -w aar d e s t a n d a a r d d e v i a t i e s c o r e met z e k e r h e i d

Het is d u i d e l i j k d a t de c o r r e c t i e g e e n v e r b e t e r i n g is geworden. Zonder de f r e q u e n t i e v e r d e l i n g v a n de g e c o r r i g e e r d e t e s t h i e r e x p l i c i e t t e vermelden w i l l e n w i j i n t a b e l

4,7

d u i d e l i j k maken d a t e r v r i j g r o t e v e r s c h i l l e n o n t s t a a n a l s r e s u l t a a t v a n d e e q u a t i n g met de twee vermelde d e e l t o e t s e n ,

T g i j geven i n deze t a b e l bovendien de r e s u l t a t e n d i e v e r k r e g e n worden v o l g e n s de tweede methode d i e o n d e r w i j s r e s e a r c h h a n t e e r t . Voor d e d e e l - t o e t s e n wordt n i e t l i n e a i r g e i n t e r p o l e e r d m a a r a l l e r e e r s t wordt de "best passendefp normale v e r d e l i n g b e p a a l d b i j de gegeven punt6 Deze krommen worden dan bij de e q u a t i n g gehanteerd. I n t a b e l

467

worden deze vermeld a l s "genormaliseerde d e e l t o e t s t t a

T g b e l

4.7

V e r g e l i j k i n g v a n e n i g e equating-procedures 50

60

I

33.0

I

4409

70

i

--

nieuwe n o m ( s c o r e ) genormaliseerde d e e l t oe ts 12,9

25.6

32,4

44.4

46.0

g e c o r r i g e e r d e d e e l t oe ts 1

1

g e n o r m a l i s e e r d e , ge-

,

c o r r i g e e r d e d e e l t o e t s

15.5

26,o

42.3

45.7

31

e 2

-

25

-

-

25

-

O p m e r k e l i j k i s d a t j u i s t b i j de l a g e s c o r e erg g r o t e v e r s c h i l l e n ge- c o n s t a t e e r d worden. D i t i s j u i s t h e t g e b i e d waar de s c h e i d i n g voldoende onvoldoende g e l o k a l i s e e r d moet worden,

H e t b e h o e f t geen b e t o o g d a t de equating-procedure m i s l u k t is. Oorzaken

d i e w i j r e e d s noemden z i j n :

1, de l a g e d e e l t o e t s , f t o t a a l t o e t s c o r r e l a t i e b i j h e t juni-tentamen; misschien a l s g e v o l g v a n e e n n i e t g e h e e l j u i s t e s t r a t e g i e b i j h e t k i e z e n v a n d e equating-items

2 , h e t r e l a t i e f k l e i n e a a n t a l deelnemers

( 3 *

h e t geen r e k e n i n g houden met de t i j d n o o d i n j a n u a r i , d i e immers ook i n v l o e d h e e f t op de r e s u l t a t e n v o o r de d e e l t o e t s ) .

O p punt

2

w i l l e n w i j nog w a t nader ingaan.

U i t g r a f i e k

4-2

v o l g t h e e l d u i d e l i j k d a t t o e v a l l i g e f a c t o r e n e e n be- l a n g r i j k e rol s p e l e n , Verwacht moet t o c h worden d a t b i j v e e l dee3nemers

de f r e q u e n t i e k r o m e n een min o f meer I3vloeiendtt karakter hebben. Hiervan is i n ons geval geen sprake, Een k l e i n e v e r a n d e r i n g i n de s c o r e v a n één k a n d i d a a t h e e f t b e t r e k k e l i j k g r o t e gevolgen.

Om d e z e t o e v a l l i g h e d e n t e e l i m i n e r e n wordt door o n d e r w i j s r e s e a r c h de b e s t passende kromme door de punten v a n de d e e l t o e t s g e s t r o o k t , u i t - gaande v a n de hypothese d a t de v e r d e l i n g normaal is.

I n w e e r w i l v a n s u g g e s t i e s v a n o n d e r w i j s r e s e a r c h d a t a a n d e z e hypothese

ook voor

30

p r o e f p e r s o n e n nog f t r e d e l i j k " v o l d a a n is, menen w i j u i t g r a f i e k 4,2 t e moeten c o n s t a t e r e n d a t h i e r v a n geen sprake 5s.

V a s t g e s t e l d moet worden d a t deze c o n c l u s i e n a r e g e v o l g e n h e e f t v o o r de

e q u a t i n g b i j de Technische Wechanica vakken V o o r t g e z e t t e Sterkteleer" en t t T r i l l i n g e n en balancering", Se a a n t a l v a n 30 t e n t a m i n a n d i i s t o c h e c h t wel g e b r u i k e l i j k !

Toch is e r nog een ander v e r s c h i j n s e l w a t ons zorgen baart.

i n onze ogen is e q u a t i n g op d e g r e n s voldoende

-

onvoldoende verreweg h e t b e l a n g r i j k s t e , D i t b e t e k e n t d a t i n d i t g e b i e d de f r e q u e n t i e v e r d e l i n g e n v a n de d e e l t o e t s e n z o nau i g m o g e l i j k b e p a a l d moeten z i j n , e v e n t u e e l t e n k o s t e v a n a n d e r e gebieden,

D e e e r s t e vraag i s dan o f d i t r e a l i s e e r b a a r i s wanneer h e t z f w i j s p e r c e n - tage i n de buurt v a n g e l e g e n is.

Is de ~?uit1oop1' v a n de f r e q u e n t i e v e r d e l i n g w e l nauwkeurig t e bepalen? Ook v o o r 30 tentaminandi?

-

26

-

U w e r z i j d s z i j n e r g welkom!

D e vraag komt op of de deeltoets-totaâlcorrelatie w e l z o g e w e l d i g b e l a n g r i j k is a l s g e z o c h t wordt n a a r de g r e n s voldoende-onvoldoende, Deze g r e n s is a l l e e n v a n b e l a n g v o o r d e g r o e p s t u d e n t e n rond deze g r e n s . De vraag kan g e s t e l d worden o f d e d e e l t o e t s n i e t zÓ moet z i j n

d a t v o o r a l v o o r deze g r o e p de d e e l t o e t s een goede a f b e e l d i n g v a n d e

t o t a a l t o e t s is, De c o r r e l a t i e c o ë f f i c i e n t zou dan a l l e e n b e p a a l d moeten worden door g e b r u i k t e maken v a n d i e tentaminandi d i e v r i j d i r e c t be-

t r o k k e n z i j n b i j s l a g e n o f zakken. M i s s c h i e n is h e t dan ook n o o d z a k e l i j k de v r a g e n t e s e l e c t e r e n op de p-waarden.

Het is w e l d u i d e l i j k d a t de equating-procedure n i e t geslaagd is, W i j merkten r e e d s op d a t o o k de k e ï n i t e m e t h o d e geen u i t k o m s t b r e n g t , W i j moeten dus weer op i n t u l t i e v e w i j z e de s c h e i d i n g s l a g e n

-

zakken v a s t s t e l l e n , W i j z u l l e n h i e r b i j met voorbehoud a l l e r l e i overwegingen g e b r u i k e n , zonder d a t aan de h i e r b i j horende hypothese v o l d a a n is. D e b e d o e l i n g h i e r v a n i s l o u t e r de kans op een v e r g i s s i n g t e v e r k l e i n e n , Z o a l s bekend vormde " T r i l l i n g e n en b a l a n c e ï i n g g l vóór 1967 een d e e l v a n h e t c o l l e g e F?Fechnische Dynamical@ n a a s t h e t o n d e r d e e l W a s t i g 1 i a n o s '

( r e s u i t a t e n v o o r h e t C a s t i g l i a n o g e d e e l t e vaak bar s l e c h t ) ,

De r e s u l t a t e n v a n h e t e x a m n f?I'echnische 2 p â m i c a * * i n d e p e r i o d e jâEe

1965-juni I967

( 6

e x m e n p e r i o d e n ) z i j n i n t a b e l

4.8

vermeld, T a b e l

4,8

R e s u l t a t e n "Tee h n i s c h e Dynamicag'

~- ~-~

l x d e p r o p o r t i e afgewezen k a n d i d a t e n : * 3 7

U i t d e z e t a b e l i s t e z i e n d a t v o o r 'iTechnische Dynamica" minstens

23%

werd afgewezen, met een g e n i d d e l d e v a n maar l i e f s t 37%

-

27

-

h e t mondeling examen i n j a n u a r i g e h a n t e e r d z i j n dan w a s

27%

afgewezen ( z i e

TiJE-68/1

pag.

16).

Het gemiddelde v a n a l l e k e r n i t e m s v a n a l l e b e o o r d e l a a r s l e v e r t een a f w i j s p e r c e n t a g e v a n

41,

D e gemiddelde waarden u i t t a b e l

4.3

w i j z e n i n de r i c h t i n g v a n h e t af- w i j z e n v a n

34

of

29%.

Aannemend d a t de v r a g e n i n j a n u a r i en j u n i gemiddeld e v e n m o e i l i j k waren en d a t t i j d n o o d geen r o l g e s p e e l d h e e f t zou de g r e n s v a n

30

punt i n j a n u a r i

(65

items) i n j u n i

(40

items) s a m e n v a l l e n met

30 = 19

punten ( p r o p o r t i e

.185),

i%*

Heeft de t i j d n o o d i n j a n u a r i z o een g r o t e rol gespeeld d a t s l e c h t s

40

items ( a a n t a l v a n j u n i ) s e r i e u s beantwoord werden, t e r w i j l de

25

o v e r i g e items zonder meer g e g o k t werden, dan c o r r e s p o n d e e r t

30

punten i n j a n u a r i met

30

-

4

*

25

=

24

punten ( p r o p o r t i e

.,333)

i n j u n i ,

Geen v a n de h i e r v o o r gecreëerde g e t a l l e n kunnen w i j op r a t i o n e l e gronden ver dedigen.

S e r i e u s b e k i j k e n v a n de p r e s t a t i e s , gecombineerd met de gegeven tendensen, h e e f t ons doen b e s l u i t e n de i n t a b e l

4.9

aangegeven s c h e i d i n g e n a a n t e brengen.

I

T a b e l

4.9

Normen j u n i

I968

26% v a n de deelnemers werd afgewezen, De s c h e i d i n g voldoende-onvoldoende

v a l t op een p l a a t s waar een k l e i n e w i j z i g i n g v a n d e g r e n s w e i n i g i n v l o e d h e e f t .

-

2 8

-

5.

R e a c t i e s v a n de s t u d e n t e n

O n m i d d e l l i j k na h e t tentamen werd a a n de s t u d e n t e n een e n q u ê t e t e r b e o o r d e l i n g v o o r g e l e g d . Het enquête-formulier wordt h i e r o n d e r vermeld, Aangegeven is h e t p e r c e n t a g e

van

de deelnemers a a n de e n q u ê t e d a t e e n b e p a a l d a l t e r n a t i e f k o o s o

Opgemerkt moet worden d a t deze g e t a l l e n b i j T r i l l i n g e n en b a l a n c e r i n g ( a a n t a l deelnemers 2 7 ) onbetrouwbaarder z i j n dan b i j V o o r t g e z e t t e S t e r k t e l e e r ( a a n t a l deelnemers 110>, A l l e tentaminandi v u l d e n d e en- q u ê t e i n , V r a g e n l i j s t b i j een M u l t i p l e - C h o i c e tentamen De h i e r a a n U v o o r g e l e g d e v r a g e n beogen e n i g e i n f o r m a t i e t e verzamelen o v e r Uw r e a c t i e s op d i t tentamen. Vlij v e r z o e k e n U de k l e i n e l e t t e r t e o m c i r k e l e n d i e h o o r t b i j h e t a n t - woord d a t h e t b e s t e a a n s l u i t b i j Uw mening,

Heeft U s p e c i a l e opmerkingen d i e a a n s l u i t e n b i j d e g e s t e l d e vraag dan k u n t U d i e kenbaar maken, Aan h e t e i n d e v a n de enqugte i s p l a a t s i n - geruimd v o o r algemene opmerkingen,

H e t spreekt v a n z e l f d a t deze v r a g e n l i j s t anoniem i n g e l e v e r d k a n worden.

1 . De t e r b e s c h i k k i n g g e s t e l d e t i j d v o o r de o n d e r h a v i g e t e s t is a, peel t e k i n g b. t e l a n g C . j u i s t goed d, t e k o r t e. v e e l t e k o r t

2.

De o n d e r h a v i g e t e s t is m i j n s i n z i e n s a. zeer gemakkelijk b. gemakkelijk c. j u i s t goed d, m o e i l i j k e. zeer m o e i l i j k o v e r g e s l a g e n V o o r t g e z e t t e S t e r k t e l e e r ,!

4

62 30 3 O 11

54

31 3 1 T r i l l i n g e n

+

b a l a n c e r i n g O

4

33

48

15

O O 33

56

11

-_

-

29

-

-

29

-

3 .

I n h e t algemeen z i j n de v r a g e n a. v e e l t e t h e o r e t i s c h

be t e t h e o r e t i s c h

c . een goed evenwicht t u s s e n t h e o r i e en t o e p a s s i n g de t e v e e l t o e p a s s i n g e. v e e l t e v e e l t o e p a s s i n g 4. De f o r m u l e r i n g v a n de v r a g e n w a s i n h e t algemeen a. z e e r goed b. goed c I r e d e l i j k d. (geen mening) e, matig f. s l e c h t g e z e e r s l e c h t 5, H e t aantal malen d a t ik t u s s e n

3

o f

4

a l t e r - n a t i e v e n moest gokken is a. g r o t e r dan 20 'b. ongeveer 10 c . ongeveer 5 d, minder dan

5

V o o r t g e z e t t e S t e r k t e l e e r

6, Het a a n t a l malen dat, ik tussen

2

a l t e r n a - t i e v e n moest gokken is a. g r o t e r dan

30

b. ongeveer 20 e , ongeveer 10 d. ongeveer 5 ea minder dan 5 7. I n h e t algemeen w a s de b e s l i s s i n g o f i k de 2 moest omcirkelen v o o r m i j a., z e e r m o e i l i j k b, m o e i l i j k c . (geen mening) 1 2s

68

6

O 8 53 27 O

13

1 O O

9

31

60 2 3 27 39 29 O 24

15

T r i l l i n g e n

+

b a l a n c e r i n g 7 30' 59 4 O O

41

48

4

7

O O

4

19

44

33 O

15

30

48 7 O

41

33

-

30

-

-

30

-

d, genzakkeli j k e. zeer ~ gemakkelijk 8. Door h e t a f s t r e p e n v a n de f o u t i e v e alter- n a t i e v e n vond i k h e t j u i s t e a l t e r n a t i e f b i j a, zeer w e i n i g v r a g e n b, w e i n i g v r a g e n c o v e e l v r a g e n d, zeer v e e l v r a g e n e. (geen mening)

9. Het g e b r u i k v a n kladpapier kan i k karakte- r i s e r e n als

a, zeer i n t e n s i e f

b, i n t e n s i e f C . s p o r a d i s c h

d, zeer s p o r a d i s c h

? Q . Eet i s rriijn mening d z t met deze t e s t mijn k e n n i s e n kunde i n v e r g e l i j k i n g met e e n klas- siek s c h r i f t e l i j k tentamen ( b , v . met 3 o f

4

v r a a g s t u k k e n )

a, v e e l e e r l i j k e r wordt gemeten

b, e e r l i j k e r wordt gemeten

C . ( h e t maakt g e r n T e r s c h i l )

d, minder e e r l i j k wordt gemeten e. v e e l minder e e r l i j k wordt gemeten

f , (geen mening)

Voortgezet

tl

S t e r k t e l e e r

11.

H e t i s rnijn mening d a t met deze t e s t mijn k e n n i s e n kunde i n v e r g e l i j k i n g met een klas- siek mondeling tentamen (b.v,

30

of

45

min,)

a. v e e l e e r l i j k e r wordt gemeten b. e e r l i j k e r w o r d t gemeten

c c op gelijkwaardige mijze woTdt gemeten

d e minder e e r l i j k wordt gemeten e, v e e l minder e e r l i j k wordt gemeten

f. (geen mening)

52

9

30

56

12

1

I

49

42

7

2

17

5 7

?6

6

2 2 20

46

24

8

1

4 T r i l l i n g e n

+

b a l a n c e r i n g

26

O

26

63

I 1

O O

44

48

7

O

1 9

44

? ?

26

O O

41

37

7

15 O

o

-

31

-

-

31

-

T r i l l i n g e n f- b a l a n c e r i n g

I

12. H e t c o l l e g e en d i t tentamen z i j n op e l k a a r a, z e e r s l e c h t afgestemd b e s l e c h t afgestemd c . matig afgestemd

d. (geen mening; z i e ook h )

e, r e d e l i j k afgestemd f . goed afgestemd g. z e e r goed afgestemd h. ( c o l l e g e n i e t g e v o l g d )

13.

De i n s t r u c t i e en h e t tentamen z i j n op e l k a a r a, z e e r s l e c h t afgestemd b. s l e c h t afgestemd c . matig afgestemd

d, (geen mening; z i e ook h)

e. r e d e l i j k afgestemd

f . goed afgestemd

g e z e e r goed afgestemd

h. ( i n s t r u c t i e n i e t g e v o l g d j

14.

B a a r s c h i j n l l J k ben ïK .voor d i t tentamen

a. t e r e c h t gezakt b. t e n o n r e c h t e g e z a k t c e t e r e c h t geslaagd d, t e n o n r e c h t e geslaagd e . t e r e c h t een g r e n s g e v a l f . t e n o n r e c h t e een g r e n s g e v a l g. ( i k heb geen f l a u w i d e e w a t i k g e p r e s - t e e r d heb) o v e r g e s l a g e n

15-

B i j deze t e s t v o e l d e i k m i j i n v e r g e l i j k i n g met een v e r g e l i j k b a a r klassiek s c h r i f t e l i j k t e o t m e o a. v e e l r u s t i g e r b e r u s t i g e r c . ( h e t n a a k t geen v e r s c h i l ) d. n e r v e u z e r e, v e e l n e r v e u z e r 1 O

6

4

13

50

19

7

10

I 8

20

5

10

7

O 29 1

3

72

1

3

3

17

O

14

34

35

14

3

O O

19

7

7

30

4

33

4

7 1 1

15

22

7

O

33

4

O

33

r;

19

4

30

7

7

26

41

22

4

-

32

-