1075487 00071

(1)

Controlem

Doel

Het risico op

uitvoeringsfouten tijdens

het verrichten^{van een}risicoselectierun^zo klein

mogelijk

^maker

Uitgangspunten

1 Deze matrix ziettoe op de

uitvoering

^{van een}

prodactieran

niet op

beheersing

^vanontwikkelactiviteiten De controles

zijn

^h 2 Controles op brondata^en

halfprodacten

^worden

aitgevoerd

door hetteamlid dat de betreffende brondata ontvangt^{of het b} 3 Voorcontroles

tijdens hettijdreizen

^en^de

prodactie aitvoering

^van ^Haar ^en^KOT ^model

geldt

^een

vierogen principe

4 De

gehele

^matrix^wordt

tijdens

^{een ran}

gevald

^en

gearchiveerd

ⁱⁿde hiervoor bestemde folder op deQ

schijf

Versie 3 maart2014

Runkarakteristieken Randatam

Toeslag jaari

Teamleden

(2)

iervoorindicatiefenhoeven zich niette

beperken

^tot^deze

geformaliseerde

^set^controles

etreffende

halfproduct

heeft behandeld

1075487 00071

(3)

I _Subproces

i

1 1 1

Trainingscases

^CSV Initialize

Initialize Initialize Createtestcases Createtestcases

Append Append Append

2 1 1 2 1 2 2 1 3 2 2 1 2 2 2 2 3 1 2 3 2 2 3 3

Miner Data Partition 3 1 1

Miner Scorecard Miner Scorecard 3 2 1

3 2 2

(4)

Controle

CSVbestand

mettrainingscases

^is^correct

geupdatet

met meest recente

trainingscases

^Denk^aan ^isdatum beoordeeld

jui Bij toevoeging

^{van een} ^nieuwemaand iseen nieuwe

library aangemaakt

ⁱⁿ

script

^API

Hetbestand

mettrainingscases

^wordt^correct

ingelezen script

^A02

Bij toevoeging

^{van een} ^nieuwemaand is deze maand

toegevoegd

^aan

samenvoeginggescoorde

^casesⁱⁿ

script

^A03

Bij toevoeging

^{van een} ^nieuwemaand iseen nieuwe process flow

toegevoegd

Bij toevoeging

^van êen ^nieuweîndicator ên

zijn

^deze^vooralle historische^runsop^correcte

wijze toegevoegd Bij toevoeging

^{van een} ^nieuwemaand is deze maand

toegevoegd

^aan

samenvoeging trainingscases

ⁱⁿ

script

^ZQl Alle

overbodige

kolommen worden

gedropt

ⁱⁿ

script

^ZQl

Uitde controle in

script

^Z02

volgen

geen

missings

op indicatoren die niet

missing

^mogen

zijn

Alle

aangeleverde trainingscases

^worden

gebruikt

^voorhettrainen of het valideren^van het model

Vergelijk

aantal records HT trainin KOT

training

^met^aantal

regels

ⁱⁿ

Enterprise

^Miner

Dedoor het model

geselecteerde

indicatoren hun

groepering

^en^{de hieraan}

gekoppelde

^scorecard

points zijn plausibel

De

samenstelling

^van ^{het model}^vertoontgeen onverklaarbare of

implausibele

verschillenmethet model^vande

vorige

^ru

1075487 00071

(5)

Wie Status KOT Status HT St

ingevuld _Open _Open

Open Open

n

(6)

Opmerkingen

1075487 00071

(7)

£

£ ^a

a

i

N

0 o

ID CQ

V CD m

Controle

Proces Wie

M

Hetaanleverformat bestandsvorm

scheidingsteken

tekst

qualifiers

^isconform de in documentatie gegeven

specificaties

Brondata

1 1

Open Open Open Open

Brondata Alle

benodigde

^kolommen

zijn

beschikbaar

1 2

Open Open Open Open

Het

regelaantal

^is^conform

verwachting

^enⁱⁿ

lijn

^met

eerdere

dataleveringen

Brondata

1 3

Open Open Open Open

Brondata ftantal

regels

ⁱⁿ bronbestand aantal

regels

^{in SAS}

1 4

Open Open Open Open

In SAS

zijn

dataformats denkaan

veldlengte^

decimalen datumformat

goed geladen

Brondata

1 5

Open Open Open Open

Halfproduct

Brondata isververst

2 1

Open Open Open Open

Er

zijn

^na het draaienvanhet

halfproduct

geen

errors uninitialized kritieke

warnings

ⁱⁿ

log Halfproduct

2 2

Open Open Open Open

De

output

^is^conform

verwachting

^vereiste^kolommen

zijn

beschikbaarenhebben

plausibele

^waarden

regelaantal

^is^conform

verwachting

Halfproduct

2 3

Open Open Open Open

Geen

missings

op numerieke indicatoren die niet

missing

mogen

zijn

Halfproduct

2 4

Open Open Open Open

I 1

Filter op datumeinde in

halfproduct

bezwaren is correct

gezet

ⁱⁿ

hetalgemeen

^net^voor

vorige

^{run van} betreffende

toeslag jaar

Halfproduct

2 5

Open

|Algemeen

^Wie ^Status

Opmerkingen

Voordat

productierun

^wordt

gestart zijn

alle historische

halfproducten verwijderd

Productie

3 1

Open

Voordat

productierun

^wordt

gestart zijn

alle actuele

halfproducten

^naarde

latopgekopieerd

Productie

3 2

Open

[Opmerkingen

Algemene opmerkingen

1 2 3 4 5 e 7 8 9 10

Haifproducten

^niet^ververst

1 2 3 4 5

(8)

7 8 9 10

1075487 00071

(9)

Cfl

IE tiO^c

£ _£

^■G

a

CO ^c ■5

t 2 ^Q

0

1

X

tf QO _o _n Q

□ ^c

O 2 ■K 01 01 ^o

CD u

■S

0 01 U D

■3 ^c 3 3

0]

O 01

c O

Open Open Open Open Open Open Open Open Open Open Open

Open Open Open Open Open Open Open Open

Open Open Open Open Open Open Open Open Open Open Open

Open Open Open Open Open Open Open Open Open Open

3

Open Open Open Open Open Open Open Open

Open Open Open Open Open Open Open Open Open

Open Open Open Open Open Open Open Open a

Ingen

(10)

1075487 00071

(11)

cn 0

S2

C

D V

£

5

s ^SI

I

D

0 Q 0 O

n 3

jn

S

in

5

D

Open Open Open Open Open Open Open

Open Open Open Open Open

(12)

1075487 00071

(13)

Proces

Subproces

ii

Brondata Brondata 1 1 1

1 1 2

DTM_HT

DTM HT

1 2 1 DTM HT nit

1 2 2 DTM HT nit

1 3 1 DTM HT Create DTM HT

1 3 2 DTM HT Create DTM HT

HT_Model

HT Model

2 1 1 nit

2 1 2 nit

HT Model Combine 2 2 1

HT Model

2 3 1 scoreHTcases

HT_Model HT_Model HT_Model

HT Model

Finalize

2_Uitsluiten

Finalize

4_lndelen

Finalize SActies Finalize 8 Uitsluiten 2 4 1

2 4 2 2 4 3 2 4 4

HT Model Finalize 2 4 5

HT Model HT Model HT Model HT Model

Finalize 10 Normaliseer Finalize il Overzichtstabel Finalize l2 JW

Finalize l2 JW 2 4 6

2 4 7 2 4 8 2 4 9

steekproef

3 1 1

Output

3 1 2

Output Bijva ngst

Llitsluitlijst

^met zonder reden 3 1 3

Output

Dnderzoekslijst

3 1 4

Output

Overzichtstabel 3 1 5

Output

Opiever

^email

3 1 6

Output

Backup Backup productierun

4 1 1

(14)

Controle

Alle

benodigde

^kolommen

zijn

beschikbaar

Het

regelaantal

^is^conform

verwachting

^enⁱⁿ

lijn

^met^eerdere

dataleveringen

Bij

^de

prodactierun

^{worden de}

jaiste conceptbeschikkingen gebraikt

de laatste versies^vande concept

beschikkingen zijn

ⁱⁿ^de daarvoor bestemde folder

geplaatst

^enalle referenties in

script

Libnames variables staan

goed

De

jaiste toeslagja

^a ^{r en}

zijn ingevald bij

de macrovariabele

controlejaar

Voor geen^vande

scripts verschijnen

^na^het^{rannen van}^het

halfprodact foatmeldingen

^ERROR ^of uninitialized inde

log

^die

nietverklaard kannen worden

Heteindbestand DTM HT beslaat het

juiste

^aantal

regels

^enalle kolommen

zijn

beschikbaarenvertonen

plausibele

^waarden

Alle

halfproducten zijn

^ververst^{en naar}de daarvoor bestemde folders op de

laptop gekopieerd

Inhet

script

^Init

zijn

^de

juiste parameterwaardes ingevald

Let op denkaan

periode

Voor geen^vande

scripts verschijnen

^na^het^{rannen van}^het

halfprodact foatmeldingen

log

^die

Het Miner

script

^met^naam model ht ddmm hhmm sas isnahet trainen

opgeslagen

let op bestandsdatum ^{en naar}de

juiste

folder

gekopieerd

De 2 meest recente

uitsluitlijsten

worden op^correcte

wijze ingelezen

Let op

naamgeving

^endatumformats De

juiste indelingslijst

schema wie op welke

lijst

^wordt

ingelezen

Hetaantal

conceptbeschikkingen

per actie is

plausibel

Uittesluitenposten^worden^met^de

juiste

^text

toegevoegd

^aan het bestand Uitslaiten HT

Voor geen^vande

scripts verschijnen

^na^het^{runnen van}^het

halfproduct foutmeldingen

log

^die

De

verdeling

^vanposten^over^de

genormaliseerde scorecardgroepen

per indicator

zijn plausibel

^zierapport^PROCFREQ Deaantallen posten per dimensie^vande overzichtstabel

zijn plausibel

^zierapport ^PROCFREQ

In

script

^{12 JW}

zijn

^de

juiste

^waarden

ingevald

^voorde macrovariabelen

toeslagjaar

^en

anderjaar

Hetaantal records in tabel

LijstJWHT

^sluit^aan ^met^de

uitsluitlijst

^en kolommen bevatten

plausibele

^waarden

Hetaantal records in de

steekproef

^{CSV is 300}^ende kolommen bevatten

plausibele

^waarden

bijvangst

^CSV^sluit^aan ^met^de

frequentietabel

^S

Acties^

^de

verdeling

^van

posten

^overde reden is

plausibel

^ende kolommen bevatten

plausibele

^waarden

uitsluitlijst

frequentietabel

^{5 Acties} ^de

verdeling

^vanposten^overde redenen is

plausibel

plausibele

^waarden

onderzoekslijst

frequentietabel

^{5 Acties} ^de

verdeling

^overde reden is

plausibel

^en

de kolommen bevatten

plausibele

^waarden

Hetaantal BSNs per combinatie^vanindicatoren is

plausibel^

hettotaal aantal BSNssluitaan methettotaal aantal

gescoorde posten

ⁱⁿ

Export_Temp3

plausibele

^waarden

Delaatste versies^van de

bijvangst^ aitslaitlijst

^en ^en

onderzoekslijst zijn

ⁱⁿ^correct^format

bijgevoegd

Na

afloop

^van ^de

productierun

^is^een

backup

^van ^het

gehele project

^brondata

halfproducten

model op deQ

schijf

gezet

1075487 00071

(15)

UVi0 Status Comment

Open

Open Open

Open

Open Open Open Open

Open

Open Open Open Open Open

Open

(16)

I

_i Proces

_Subproces

1 1 1 DTM KOT Brondata

Brondata 1 1 2 DTM KOT

1 1 1 DTM KOT Create DTM KOT

2 1 1

KOT_Model

KOT Model nit Combine 2 2 1

KOT Model Combine 2 2 2

KOT Model

2 3 1 Score KOTcases

KOT_Model KOT_Model

KOT Model

Finalize

4_HotHor

Finalize SUitsluiten Finalize

7_lndelen

Finalize SActies Finalize il Jitsluiten 2 4 1

2 4 2 2 4 3

2 4 4 KOTModel KOT Model 2 4 5

KOT Model Finalize 2 4 6

KOT_Model KOT_Model KOT_Model

KOT Model

Finalize

l3_Normaliseer

Finalize

l4_Overzichtstabel

Finalize 15 Finalize 15 2 4 7

2 4 8 2 4 9

0 2 i

2 4 10

Steekproef

3 1 1

Output

3 1 2

Output Bijvangst

Uitsluitlijst

^met zonder reden 3 1 3

Output

Onderzoekslijst

3 1 4

Output

3 1 4

Output

^{HOT HOR}

Overzichtstabel 3 1 5

Output

Opiever

^email

3 1 6

Output

Backup Backup productierun

4 1 1

1075487 00071

(17)

Controle

Alle

benodigde

^kolommen

zijn

beschikbaar

Het

regelaantal

^is^conform

verwachting

^enⁱⁿ

lijn

^met^eerdere

dataleveringen

Bij

^de

productierun

^{worden de}

jaiste conceptbeschikkingen gebruikt

de laatste versie^vande

conceptbeschikkingen zijn

ⁱⁿ^de daarvoor bestemde folder

geplaatst

^enalle referenties in

script

^Libnames ^staan

goed

De

jaiste toeslagja

^a ^{r en}

zijn ingevald bij

de macrovariabele

controlejaar

Voor geen^vande

scripts verschijnen

halfprodact foatmeldingen

log

^die nietverklaard kannen worden

Heteindbestand DTM KOT beslaat het

juiste

^aantal

regels

^enalle kolommen

zijn

beschikbaar^envertonen

plausibele

^waarden

Alle

halfprodacten zijn

^ververst^{en naar}^de

laptop gekopieerd

Inhet

script

^Inif

zijn

^de

jaiste parameterwaardes ingevald

Let op denk^aan

periode

Voor geen^vande

scripts verschijnen

halfprodact foatmeldingen

log

^die

Het Miner

script

^met^naam KOT SCORE CODEsas isnahet trainen

opgeslagen

let op bestandsdatum ^{en naar}de

juiste

^folder

gekopieerd

Demeest recente hothor

lijst

wordt op^correcte

wijze ingelezen

De 2meest recente

uitsluitlijsten

worden op^correcte

wijze ingelezen

Let op

naamgeving

^endatumformats De

jaiste indelingslijst

schema wie op welke

lijst

^wordt

ingelezen

Hetaantal BSN sper actie is

plausibel

Uittesluitenposten^worden^met^de

juiste

^text

toegevoegd

^aan het bestand Uitsluiten KOT

Voor geen^vande

scripts verschijnen

halfprodact foatmeldingen

log

^die

De

verdeling

^vanposten^over^de

genormaliseerde scorecardgroepen

per indicator

zijn plausibel

^zierapport^PROCFREQ Deaantallen postenper dimensie^vande overzichtstabel

zijn plausibel

^zierapport^PROC FREQ

In

script

^{15 JW}

zijn

^de

jaiste

^waarden

ingevald

^voorde macrovariabelen

toeslagjaar

^en

anderjaar

Hetaantal records in tabel

LijstJWKOT

^slait^aan^met^de

uitsluitlijsten

kolommen bevatten

plausibele

^waarden

steekproef

^{CSV is 300}^ende kolommen bevatten

plausibele

^waarden

bijvangst

freqaentietabel

^{S Acties} ^de

verdeling

^van

posten

^overde reden is

plausibel

plausibele

^waarden

uitslaitlijst

freqaentietabel

^{S Acties} ^de

verdeling

^van

posten

^overde redenen is

plausibel

plausibele

^waarden

onderzoekslijst

frequentietabel

^{S Acties} ^de

verdeling

^overde reden is

plausibel

^en

de kolommen bevatten

plausibele

^waarden

Hetaantal records in de HOT HOR CSV sluitaan metde

freqaentietabel

^{8 Acties} ^de

verdeling

^overde reden is

plausibel

^en^de

kolommen bevatten

plausibele

^waarden

Hetaantal BSNs per combinatie^van indicatoren is

plausibel

hettotaal aantal BSNssluitaan methettotaal aantal

gescoorde posten

ⁱⁿ

Export_Temp3

plausibele

^waarden

Delaatste versiesvande

bijvangst aitsluitlijst

^en

onderzoekslijst

^en ^HOTHOR

lijst zijn

ⁱⁿ^correct^format

bijgevoegd

Na

afloop

^van^de

productierun

^is^een

backup

^van ^het

gehele project

^brondata

halfprodacten

model op deQ

schijf

gezet

(18)

Qpmerkingen

Wie Status

Open Open

Open

Open Open

Open

Open Open Open Open Open

Open

Open Open Open Open Open

Open

1075487 00071

(19)

Proces ii

1 1 Onbekende aanvragers

Zorg

1 2 Onbekende aanvragers

Zorg

Onbekende aanvragers

Zorg

1 3

Zorg

1 4

Zorg

1 5

1 6

Output

(20)

Controle

Er is^eennieuwe aanvragers bestand inQ

\VEPROW63\TSL

^DM

Handhavingsregie\Profiling 2013\Brondata\ONBEKENDE

^AANVR

gezet

Hetmeest recentenieuwe aanvragers bestand

gebruikt

^wordt^en ^{het aantal}

toeslagjaren

per BSN is conform

verwachting

Demeeste recen

uitsluitlijst

^staatⁱⁿ^Q

\VEPROW63\TSL

^DM

Handhavingsregie\Profiling 2013\Brondata\UITSLUITLIJST

Demeest recente

uitsluitlijst

^en^de

vorige uitsluitlijst

^worden

goed ingelezen

De

toevoeging

^van de laatste door de risicoselectie

gegenereerde uitsluitlijst

^voorzorgaan de

reguliere uitsluitlijsten gaatgoed

De

output

^is

plausibel

let op

format^ toeslagjaar^

^aantal

regels

1075487 00071

(21)

UVi0 Status

Open

(22)

Opmerkingen

1075487 00071

(23)

kantal

unieke BSN^s

31 1 2014 over201 19 2 2014 over2013 03 03 2014

[over 2014]

Lijst

i

Bijvangst

^HT

uitgesloten

Onbekende aanvragers HT

Uitsluitlijst

^HT

Uitsluitlijst

^HT unieke BSN’s

1 1 61 55 46

1 2 426 106 252

1 3 1 574 920 1 165

1 4 787 462 583

Bijvangst

^KOT

uitgesloten

Onbekende aanvragers KOT HotHor KOT

Uitsluitlijst

^KOT

Uitsluitlijst

^KOT unieke BSN’s

2 1 32 15 141

2 2 6 1 11

2 3 50 92 339

2 4 776 622 1 277

2 5 388 314 664

Uitsluitlijst Zorg

^{Unieke BSN}^s

3 1 3 068 870 1 204

3 2 1 899 458 613

(24)

26 03 2014 over20

Idl

19 334 1 305 653 8 10 231 1 071 549 1 559 796

1075487 00071

(25)

(26)

Subproces

ii

Checks HT Checks HT 1 1

1 2

Checks KOT Checks KOT 2 1

2 2

1075487 00071

(27)

Controle

Zijn

^er^{Postcode 4}

gebieden

^waarvoorongewoon veel mutaties

omhoog

^voor^HT

gedaan zijn

Voorde

postcodes

^{onder 1 1} ^is^het

aannemelijk

dat de betreffende aanvragen

rechtmatig zijn

^denk^aan ^verschil

vorige

^be

Zijn

^er^{Postcode 4}

gebieden

^waarvoorongewoon veel mutaties

omhoog

^voor^KOT

gedaan zijn

Voorde

postcodes

^{onder 2 1} ^is^het

aannemelijk

dat de betreffende aanvragen

rechtmatig zijn

^denk^aan ^verschil

vorige

^be

(28)

Opmerkingen

UVi0 Status

Open

s transactie

Open

s transactie

1075487 00071

(29)

Proces ii

1 1

ijst

1 2

■ijst

10 2e

1 3

ijst

1 3

■ijst

(30)

Controle

De

juiste toeslagja

^a ^{r en}

zijn ingevuld bij

de macrovariabele

periode

Demeest recente

uitsluitlijst

^Onbekende

Aanvrager Zorg

wordt op^correcte

wijze ingelezen

Let op

naamgeving

^endatumformats

Regelaantal

^van^{de totale}

lijst correspondeert

^met^de^{som van}^de

regelaantallen

^van^de

lijsten

^voor^{KOT HT}^enzorg Hetaantal records in

d^|0

²

^jst

^CSV^sluit^aan ^met^{het aantal}

regels

^{in SAS}^ende kolommen bevatten

plausibele

^waarden

1075487 00071

(31)

Opmerkingen

UVi0 Status

1075487 00071

Controlem

uitvoeringsfouten tijdens

mogelijk

Uitgangspunten

uitvoering

prodactieran

beheersing

zijn

halfprodacten

aitgevoerd

tijdens hettijdreizen

prodactie aitvoering

geldt

vierogen principe

gehele

tijdens

gevald

gearchiveerd

schijf

Toeslag jaari

beperken

geformaliseerde

halfproduct

1075487 00071

I Subproces

Trainingscases

Append Append Append

mettrainingscases

geupdatet

trainingscases

jui Bij toevoeging

library aangemaakt

script

mettrainingscases

ingelezen script

Bij toevoeging

toegevoegd

samenvoeginggescoorde

script

Bij toevoeging

toegevoegd

Bij toevoeging

zijn

wijze toegevoegd Bij toevoeging

toegevoegd

samenvoeging trainingscases

script

overbodige

gedropt

script

script

volgen

missings

missing

zijn

aangeleverde trainingscases

gebruikt

Vergelijk

training

regels

Enterprise

geselecteerde

groepering

gekoppelde

points zijn plausibel

samenstelling

implausibele

vorige

1075487 00071

ingevuld Open Open

Open Open

Open Open

Open Open

Open Open

Open Open

Open Open

Open Open

Open Open

Open Open

I _Subproces

ingevuld _Open _Open

£ _£