Wat leren we van Rekentuin?
Wat kunnen we leren van Rekentuin?
03/03/15
Oefenweb @ Panama conferentie
1
Marthe Straatemeier
Wetenschappelijke achtergrond
•
Voortgekomen uit ‘fundamenteel’ onderzoek (UvA)
•
Het cognitieve systeem in ontwikkeling is een
complex systeem
•
Complexe systemen moeten intensief gemeten
worden
–
Maar dagelijks toetsen in de klas is onhaalbaar
•
Gebruik de dagelijkse oefeningen uit de klas
–
Digitale schriftjes
03/03/15
Oefenweb @ Panama conferentie
2
03/03/15
Oefenweb @ Panama conferentie
3
?
?
Hoogfrequente
metingen
0
10
Time
Didactische ideeën
•
Rekenen is een vorm van cognitieve expertise
–
Vereist ‘Deliberate Practice’
•
Intensieve op individu afgestemde
oefeningen met feedback
•
Het positieve effect van een-op-een onderwijs
is zeer groot!
–
Bloom’s 2 sigma probleem
03/03/15
Oefenweb @ Panama conferentie
4
Maar …
03/03/15
Oefenweb @ Panama conferentie
5
ICT biedt nieuwe mogelijkheden
•
Laptops
•
Tablets
•
Snel internet
•
Wifi
6
Leerlingen
•
Spelenderwijs
•
Eigen niveau
Leerkrachten
•
Nakijkwerk uit handen
•
Gedetailleerde
analyses
Onderzoekers
•
Hoogfrequente data
•
Grote database
11090998199,65211189143Frequency, rating and rt of 1 x 9
Ten most frequent answers
N 0 200 400 600 800 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 19010999,891181965112120,
Frequency, rating and rt of 9 x 1
Ten most frequent answers
N 0 200 400 600 800 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 1916179201214118811015272829
Frequency, rating and rt of 2 x 9
Ten most frequent answers
N 0 200 400 600 800 ● ● ● ● ● ● ● ● ●● ●● ● ● ● 1916917201211148108128152790
Frequency, rating and rt of 9 x 2
Ten most frequent answers
N 0 200 400 600 800 ● ● ● ● ● ● ● ●● ● ● ● ● ● ● 2824362118263725293237221712
Frequency, rating and rt of 3 x 9
Ten most frequent answers
N 0 200 400 600 800 1000 1200 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 2428212618363725372293217223
Frequency, rating and rt of 9 x 3
Ten most frequent answers
N 0 200 400 600 800 1000 1200 ● ● ● ● ● ● ● ● ● ●● ● ● ● ● 324527633728343546263854312456
Frequency, rating and rt of 4 x 9 N 0 200 400 600 800 1000 1200 ● ● ● ● ● ● ● ● ● ● ● ● ●● ● 32274563283437264635543824563
Frequency, rating and rt of 9 x 4 N 0 200 400 600 800 1000 1200 ● ●● ● ● ● ● ● ● ● ●● ● ● ●
ADAPTIEF
03/03/15
7
Hoe vind je een gelijkwaardige tegenstander?
03/03/15
Oefenweb @ Panama conferentie
9
Laag
Hoog
Schaken: Elo ratings
03/03/15
Oefenweb @ Panama conferentie
10
Laag
Hoog
Kinderen (Vaardigheid)
Vragen (Moeilijkheid)
2+3
Rekentuin: Elo ratings
03/03/15
Oefenweb @ Panama conferentie
11
Elo in werking
Vragen (Moeilijkheid)
Kinderen (Vaardigheid)
Laag
Hoog
03/03/15
Oefenweb @ Panama conferentie
12
Welk probleem is moeilijker?
80 + 10
2 + 3
7 + 8
22 + 38
28 + 34
1 + 77
3 + 21
Sommen waarbij r & s < 10
Voorspeller
(r + s = m)
Simpel +
(m – s = r)
Simpel –
Intercept
m
O
Minimum van r & s
**
**
Volgorde: r = s (tie)
***
***
Volgorde: r > s
O
***
Over tiental
***
***
Eenheden r en/of s is 1
***
***
Eenheden r en/of s is 5
*
Eenheden r en/of is 9
**
*
m is tiental
***
***
Eenheden m is 1
***
Eenheden m is 5
Eenheden m is 9
O
R² = 91% R² = 87%
High Speed High Stakes scoringsregel
•
Snelheid en accuratesse
geïntegreerd
•
Snel gokken wordt gestraft
•
Visueel spelelement
03/03/15
Oefenweb @ Panama conferentie
16
Voordelen nieuw CAT systeem
•
Zelf-organiserend
= Moeilijkheid opgaven automatisch aangepast
aan vaardigheid kind
•
Na elk antwoord wordt het niveau aangepast
•
Methode onafhankelijk
•
Docent hoeft niets in te stellen
•
Vaardigheid =
gegeven antwoorden &
reactietijd
•
Ieder kind maakt altijd zo'n
75% van opgaven goed
•
succeservaring en motivatie
•
grote variatie aan oefenstof: van makkelijk tot heel moeilijk
(ook geschikt voor VO, MBO en HO).
03/03/15
Spelmotivaties Rekentuin
Groei planten =
vaardigheid
Basis- & bonustuin
= belang vaardigheden
Aantal munten =
inzet /
speelfrequentie
Verdorring / gieters =
onderhouden van
vaardigheden
03/03/15
Oefenweb @ Panama conferentie
18
Rekentuin
Voor alle leeftijden (PO, VO, MBO & HO)
De spelletjes:
- optellen
- aftrekken
- vermenigvuldigen
- tellen
- delen
- cijferreeksen
- klokkijken
- 1-2-3tje
- getallen
- kangoeroe spel
- rekenvolgorde
- bloemencode
- breuken, procenten en verhoudingen
- cijfers (maak met cijfers een gegeven getal)
- slowmix (rt = 40 sec.)
- snelheidsmix (rt = 10 sec.)
- mollenspel
03/03/15
Oefenweb @ Panama conferentie
19
Tuincentrum
Innovatieve psychometrie
Nieuwe inzichten
Rekenontwikkeling & leerprocessen
Geanonimiseerde data
Onderwijs & Onderzoek
03/03/15
Oefenweb @ Panama conferentie
21
Voordelen
•
Ecologisch valide
–
Natuurlijke leeromgeving
•
Veel domeinen
–
34 spellen in rekenen, taal en
cognitieve functies.
•
Brede leeftijdsrange (4 tot volwassenen)
•
Hoogfrequentie metingen
03/03/15
Oefenweb @ Panama conferentie
22
Betrouwbaarheid
-8 -6 -4 -2 0-8
-6
-4
-2
0
Correlation m+n, n+m
Rating mirror item (n+m)
Rating item (m+n)
7 + 3 7 + 6 8 + 7 1 + 3 2 + 3 0 + 4 4 + 1 5 + 3 5 + 6 7 + 1 7 + 4 8 + 4 8 + 5 6 + 8 9 + 0 9 + 1 3 + 9 10 + 7 15 + 82 6 + 1 6 + 2 8 + 110 + 2 9 + 8 10 + 40 -5 0 5 10-5
0
5
10
Correlation mxn, nxm
Rating mirror item (nxm)
Rating item (mxn)
5 x 1 5 x 2 7 x 6 8 x 5 8 x 6 9 x 4 10 x 1 15 x 19 20 x 19 80 x 12 12 x 700 700 x 500 80 x 500 25 x 500 64 x 20 11 x 33 11 x 75 11 x 2011 x 500r = .88
r = .98
03/03/15
Oefenweb @ Panama conferentie
23
Parallel items
jan mrt mei jul sep
−4 −2 0 2 4 date rating
Drie sets van parallel
items van de
bloemencode.
03/03/15
Oefenweb @ Panama conferentie
24
Validiteit
03/03/15
Oefenweb @ Panama conferentie
25
• • • • • • • • • • • • •• • •• •• • • • • • • • • • ••• •• • • • • • • • ••• • • •• • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • •• •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • ••• • •• • • • • • • • • • • •• • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • ••• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • •••• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • 0 5 10 0 50 100 150
r = 0.83
rating additionCito Norm score
• • • • •• • • • • • • • • • • • • • • • • • • • • • • 150
r = 0.84
••• • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • •• • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • •• • • • • •••• • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • ••• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • •• • • • • • • • • • • ••• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • −5 0 5 10 0 50 100 150r = 0.8
rating multiplicationCito Norm score
• • • • •• • • • • • •••• • • • • • • • • • •• • • • 150
r = 0.78
4 5 6 7 8 4 5 6 7 8 8 • • • • • • • • • • • • •• • • • •• • • • • • • • • • ••• •• • • • • • • • ••• • • •• • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • •• •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • ••• • •• • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • •• • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • 0 5 10 0 50 100 150r = 0.83
rating additionCito Norm score
• • • • • • • • • • • • •• • • • •• • • • • • • • • • •••• • • • • • • • • •• • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • •• • • • • • •• • • • • • • • • • • • • • • • •• • • • • • • • • • •• • • • •• • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • •• •• • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • •• • • • • •• • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • −5 0 5 10 0 50 100 150
r = 0.84
rating subtractionCito Norm score
••• • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • •• • • • • • • • • • • •• • • • • • •• • • • • • • • • • • • • • • • • • • • • •• • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • •• • • • • •••• • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •••• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • •• • • • • • • • •• • ••• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • −5 0 5 10 0 50 100 150
r = 0.8
rating multiplicationCito Norm score
• •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • •• • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• •• • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • •• • • • • • • •• • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • •• • • • • • • • • • • • • •• • • • • • • • ••• • • • • • • • • • • • • • • • • • • • •• • • • •• • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • • •• • • • • • • • • • • • • • • • • • • • • • • • • −5 0 5 10 0 50 100 150
r = 0.78
rating divisionCito Norm score
4 5 6 7 8 4 5 6 7 8 4 5 6 78 4 5 67 8 03/03/15
26
Ruim 30% van de sommen wordt buiten schooltijd gemaakt
5
Klassencompetitie
Wall of fame
03/03/15
27
Foutenanalyse
•
Open item formaat in meeste spelletjes
•
Duizenden foute antwoorden per item
•
Informatief?
18 99 82 91 90 89 88 80 72 45 100 1 98 8 9
Frequency, rating and rt of
9 x 9
Ten most frequent answers
N
0
500
1000
1500
2000
● ● ● ● ● ● ● ● ● ● ● ● ● ● ●03/03/15
28
9 x 9 = ?
Omdraaifout?
Eenentachtig
Optellen?
9 + 9 = 18
Tafelfout?
2 x 9 = 18
18
03/03/15
Oefenweb @ Panama conferentie
29
2 x 9 = ?
1 10 90 99 8 19 9, 6 5 2 11 18 91 4 3Frequency, rating and rt of
1 x 9
Ten most frequent answers
N 0 200 400 600 800 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 1 90 10 99 9, 8 91 18 19 6 5 11 2 12 0,
Frequency, rating and rt of
9 x 1
Ten most frequent answers
N 0 200 400 600 800 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 19 16 17 9 20 12 14 11 8 81 10 15 27 28 29
Frequency, rating and rt of
2 x 9
Ten most frequent answers
N 0 200 400 600 800 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 19 16 9 17 20 12 11 14 8 10 81 28 15 27 90
Frequency, rating and rt of
9 x 2
Ten most frequent answers
N 0 200 400 600 800 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 28 24 36 21 18 26 37 25 29 32 3 72 2 17 12
Frequency, rating and rt of
3 x 9
Ten most frequent answers
N 0 200 400 600 800 1000 1200 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 24 28 21 26 18 36 37 25 3 72 29 32 17 2 23
Frequency, rating and rt of
9 x 3
Ten most frequent answers
N 0 200 400 600 800 1000 1200 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 32 45 27 63 37 28 34 35 46 26 38 54 31 24 56
Frequency, rating and rt of
4 x 9
N 0 200 400 600 800 1000 1200 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 32 27 45 63 28 34 37 26 46 35 54 38 24 56 3Frequency, rating and rt of
9 x 4
N 0 200 400 600 800 1000 1200 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ●03/03/15
Oefenweb @ Panama conferentie
30
6 x 7= ?
56 24 36 49 48 35 54 41 45 43 63 52 32 40 72
Frequency, rating and rt of
6 x 7
Ten most frequent answers
N 0 50 100 150 200 250 300 350 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 56 24 36 48 49 41 54 35 43 45 63 32 52 46 40
Frequency, rating and rt of
7 x 6
Ten most frequent answers
N 0 100 200 300 400 500 600 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 1 9 80 88 18 7 8, 10 5 2 6 81 16 99 4
Frequency, rating and rt of
1 x 8
Ten most frequent answers
N 0 200 400 600 800 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 1 80 9 8, 88 10 81 16 7 5 18 2 6 89 4
Frequency, rating and rt of
8 x 1
Ten most frequent answers
N 0 200 400 600 800 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 18 19 14 17 12 15 8 10 1 20 4 61 6 24 80
Frequency, rating and rt of
2 x 8
Ten most frequent answers
N 0 200 400 600 800 1000 1200 1400 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ● 18 14 19 17 12 8 15 10 4 20 1 6 61 80 24
Frequency, rating and rt of
8 x 2
Ten most frequent answers
N 0 200 400 600 800 1000 1200 1400 ● ● ● ● ● ● ● ● ● ● ● ● ● ● ●
Frequency, rating and rt of
3 x 8
N 200 400 600 800 1000 1200 ● ● ● ● ● ● ● ● ● ● ● ● ● ●Frequency, rating and rt of
8 x 3
N 200 400 600 800 1000 ● ● ● ● ● ● ● ● ● ● ● ● ●03/03/15
Oefenweb @ Panama conferentie
31
Data gebaseerde benadering
•
Eerder onderzoek:
–
Vooraf bepaalde volgorde
–
9 x 9 = 18 is een tafel gerelateerde fout omdat het de
eerste kandidaat is
•
Frequentieregel:
–
Kijk naar frequentie van fouten op andere items
–
18 is een omdraaifout als het de populairste fout is op
andere items waarbij er geen sprake is van dubbel
classificatie (8 x 8 = 46)
•
Gewogen frequentie regel:
–
Corrigeer voor aantal mogelijke matches
–
Slechts 1 antwoord is een omdraaifout
–
Veel antwoorden zijn tafel gerelateerde fouten
Resultaten
•
Eerder onderzoek overschatte ten table en
operand related fouten en veel fouten
worden niet geclassificeerd
•
Veel fouten zijn een correct antwoord op
een andere vermeldingssom
•
Miss 10^ (80 x 20 = 160) is populair
•
Systematische leeftijdstrends
–
Meeste fouten nemen af met leeftijd
–
Optelfouten en naming errors komen
veel voor bij jonge kinderen
03/03/15
Oefenweb @ Panama conferentie
33
Evaluatie
•
De gewogen frequentieregel werkt veel beter
dan de huidige methodes
•
Het is nog steeds een beschrijvende methode
–
Geen statistische fitmaten
•
Toepasbaar in andere domeinen
•
Bij conclusies rekening houden met
adaptieve dataset
•
Nuttig voor onderwijs?
–
Automatische link naar instructie?
Operator relevant
Ten table
Operand related
Double-half
Same decade
Ten table > 100
Miss 1
Miss 10
Miss 100
Miss 10^
m/n
m - n
m + n
m + n0
Typo
Reverse
Naming error
Intrusion
Pastesub
Addsub
Zero
Residual
03/03/15
Oefenweb @ Panama conferentie
34
Moeilijkheidsniveaus
•
Uniek binnen adaptief systeem:
Spelers kiezen eigen moeilijkheid
•
E(P+)=.9
(halve muntjes)
Makkelijk
•
E(P+)=.75
Normaal
•
E(P+)=.6 (dubbele
munten)
Moeilijk
03/03/15
Oefenweb @ Panama conferentie
36
Moeilijkheidskeuze
03/03/15
37
2
3
4
5
6
7
8
0.0
0.1
0.2
0.3
0.4
0.5
Preference for easy,normal
and difficult by grade and sex
Addition September 2011
grade
%
P+=.9
P+=.75
P+=.6
girls
boys
Oefenweb @ Panama conferentie
Onderzoek
•
Psychometrie
–
Adaptieve module
–
Betrouwbaarheid en validiteit
•
Voorspelling item moeilijkheid
– Vermenigvuldigen
– Optellen en aftrekken
– Tellen (subitizing)
•
Foutenanalyses
•
Rekenangst & zelfbeeld
•
Scoringsregel
•
Ontwikkelingsprocessen
•
Samenhang tussen vaardigheden
–
Executieve functies
–
Logisch redeneren
03/03/15
Oefenweb @ Panama conferentie
38
•
Klinkenberg S , Straatemeier. M., & van der Maas H. L. J. (2011).
Computer adapGve pracGce of Maths ability using a new item
response model for on the fly ability and difficulty esGmaGon.
Computers in educaGon, 57, 1813-‐1824.
•
Maris, G. & Van der Maas, H. L. J. (2012). Speed-‐accuracy
response models: Scoring rules based on response Gme and
accuracy. Psychometrika, 77, 615-‐633.
•
Jansen, B. R. J., Louwerse, J., Straatemeier, M., Van der Ven, S.
H., Klinkenberg, S., & Van der Maas, H. L. (2013). The influence
of experiencing success in math on math anxiety, perceived
math competence, and math performance. Learning and
Individual Differences, 24, 190-‐197.
•
Gierasimczuk, N., van der Maas, H. L. J., & Raijmakers, M. E. J.
(2013). An analyGc tableaux model for deducGve mastermind
empirically tested with a massively used online learning system.
Journal of Logic, Language and Informa3on, 22, 297-‐314.
•
Van der Ven, S., van der Maas, H. L. J., Straatemeier, M., &
Jansen, B. R. J. (2013). VisuospaGal working memory and
mathemaGcal ability at different ages throughout primary
school. Learning and Individual Differences, 27, 182-‐192.
Issues
•
Data integriteit
–
Veel bedreigingen:
vals spelen, invloed klassituatie, verschillende devices, spelen op
elkaars account, hulp van ouders, fouten in de achtergrondgegevens
–
De kracht van de grootte van de dataset
•
Data afhandeling: 1 miljoen antwoorden per dag
•
Privacy
–
Geanonimiseerde data (op kind, klas en schoolniveau)
–
Privacy statement Oefenweb.nl
–
Mogelijkheid om niet deel te nemen of dit later alsnog
te beslissen
Issues
•
Risico’s van exploratief onderzoek: data fishing
–
Check hoe robuust je effecten zijn
–
Opsplitsen van data > replicaties
–
Als je willekeurige keuzes moet maken > check ze allemaal. Vermeld
het in je artikel
–
Bij grote steekproeven: check effect size
–
Presenteer het niet als confirmatieve analyses
–
Combineer met andere onderzoeken
•
De simpele vraag ‘helpt Rekentuin’ is uitermate lastig te
beantwoorden
–
Rekentuin wordt gebruikt in combinatie met andere methoden
–
Vereist dubbel blind, gerandomiseerd, onafhankelijk onderzoek
03/03/15
Oefenweb @ Panama conferentie
40
Experimenten in Rekentuin
•
We voegen een nieuwe functionaliteit toe
–
feedback, andere scoringsregels etc.
•
Deze functionaliteit stellen we ter beschikking aan een
willekeurige steekproef
–
Dubbel blind
–
Gerandomiseerd
•
We onderzoeken welke groep (wel/niet functionaliteit) het:
–
meeste vooruit gaat,
–
meeste speelt, etc.
03/03/15
Oefenweb @ Panama conferentie
41
Toekomstplannen Oefenweb
03/03/15
Oefenweb @ Panama conferentie
42
Rekentuin & Taalzee
•
±200.000 actieve gebruikers
•
±400 miljoen opgaven 5 jaar
•
±1.000.000 opgaven per dag
•
±1400 scholen
•
±45000 items
03/03/15
43
Andere producten
Oefenweb @ Panama conferentie
We welcome ….
03/03/15