Vervolgonderzoek - INTERNAL AUDIT & DE BEVESTIGINGSBIAS.

5 CONCLUSIE

5.4 Vervolgonderzoek

Vanuit de literatuur en de adviezen zijn de volgende onderzoeksthema’s naar voren gekomen die mogelijk vervolgonderzoek onder internal auditors verdienen:

1) het uitvoeren van soortgelijk onderzoek op grotere schaal om met meer zekerheid uitspraken te kunnen doen over de relatie tussen internal auditors en de beïnvloeding door de bevestigingsbias.

2) het uitvoeren van soortgelijke onderzoek waarbij internal auditors alvorens aan de experimenten deel te nemen op de hoogte worden gebracht van het bestaan van de bevestigingsbias en het belang van falsificatie in de teststrategie. Dit om te testen of het bewustzijn van het bestaan van de bevestigingsbias invloed heeft op de mate waarin internal auditors worden beïnvloed door deze bias.

Verschillende groepen zouden gebruikt kunnen worden: groepen die niet op de hoogte zijn gebracht, groepen die vlak voor het experiment op de hoogte worden gebracht, groepen die een bepaalde tijd voor het experiment op de hoogte zijn gebracht. Tot slot zou een groep de opdracht kunnen krijgen om minstens twee keer falsificatie toe te passen in de teststrategie.

3) het uitvoeren van soortgelijk onderzoek waarbij de relatie tussen overmoed en het evenredig behandelen van bewijsmateriaal wordt onderzocht.

4) het uitvoeren van soortgelijk onderzoek onder groepen internal auditors met verschillende achtergronden. Dit om te testen welk effect groepsstructuren hebben op de beïnvloeding door de bevestigingsbias. Interessant is te onderzoeken of groepen juist beïnvloeding door de bevestigingsbias vergroten of verkleinen en wat de relatie is met groepsdiversiteit.

LITERATUURLIJST

ACCA (2017, Maart). Banishing Bias? Audit, objectivity and the value of professional scepticism.

Opgehaald van http://www.accaglobal.com/content/dam/ACCA_Global/Technical/audit/pi-banishing-bias-prof-scepticism.pdf

Akerlof, G. A., & Dickens, W. T. (1982). The economic consequences of cognitive dissonance. The American Economic Review 72(3), 307–319.

Allahverdyan, A. E., & Galstyan, A. (2014). Opinion dynamics with confirmation bias. PLoS ONE 9(7), 1-14.

Allen, M. (2005). Encouraging pupil error may promote better understanding of a scientific concept.

School Science Review 86, 79–85.

Brown, C. E., Peecher, M. E., & Solomon, I. (1999). Auditors’ hypothesis testing in diagnostic inference tasks. Journal of Accounting Research 37 (1), 1-26.

Cummings, L. (2010). De Routledge Pragmatics Encyclopedia. Abingdon, [Engeland]: Routledge.

Ehrlinger, J., Mitchum, A. L., & Dweck, C. S. (2016). Understanding overconfidence: Theories of intelligence, preferential attention, and distorted self-assessment. Journal of Experimental Social Psychology 63, 94-100.

European institutes of internal auditors. (2018). Risk in focus, hot topics for internal audit 2018. A report from European institutes of internal auditors. Opgehaald van https://www.iia.nl/SiteFiles/Hot%20Topics%202018%2011_9_2017_digital%20version.pdf

Fellner, G., & Krügel, S. (2012). Judgmental overconfidence: Three measures, one bias? Journal of Economic Psychology 33(1), 142–154.

Garro, A. (2009). Learning nash equilibria in non-cooperative games. In Encyclopedia of Artificial Intelligence, 1018-1023

Khosrowpour, M. (2013). Dictionary of Information Science and Technology 2. Hershey, PA: IGI Global.

Gilovich, T., Griffin, D. W., & Kahneman, D. (2002). Heuristics and Biases: The Psychology of Intuitive Judgment. Cambridge University Press.

Glover, S., Prawitt, D., & Wilks, T. (2005). Why Do Auditors Over-Rely on Weak Analytical Procedures? The Role of Outcome and Precision. Auditing: A Journal of Practice & Theory 24(Supplement), 197–220.

Goodwin, C. J., & Goodwin, K. A. (2016). Research in psychology methods and design. John Wiley

& Sons, 6-8.

Greenstein, F. I., & Immerman, H. I. (1992). What Did Eisenhower Tell Kennedy about Indochina?

The Politics of Misperception. Journal of American History 79(2), 568-587.

Heiman-Hoffman, V., Moser, D., & Joseph, J. (1995). The impact of an auditor's initial hypothesis on subsequent performance at identifying actual errors. Contemporary Accounting Research 11(2), 763-779.

Institute of Internal auditors Global. (2018). Definition internal auditing. Opgehaald van

https://na.theiia.org/standards-guidance/mandatory-guidance/pages/definition-of-internal-auditing.aspx

Institute of Internal auditors Global. (2017). Implementation guide 1120. Opgehaald van

https://global.theiia.org/standards-guidance/Member%20Documents/IG1120-Individual-Objectivity.pdf

Instituut van Internal auditors Nederland. (2017). Internationale standaarden voor de beroepsuitoefening van Internal Auditing (standaarden). Opgehaald van https://global.theiia.org/translations/PublicDocuments/IPPF-Standards-2017-Dutch.pdf

Instituut van Internal auditors Nederland, Bogstra, R. & Renes, R. (2017). Internal Audit Monitor 2017.

Opgehaald van https://www.iia.nl/SiteFiles/Goed%20bestuur%20en%20toezicht%20verdient%20een%20goed

e%20Internal%20Audit%20Functie-web.pdf

Johnston, L. (1996). Resisting change: Information-seeking and stereotype change. European Journal of Social Psychology 26, 799–825.

Jonas, E., Schulz-Hardt, S., Frey, D., & Thelen, N. (2001). Confirmation bias in sequential information search after preliminary decisions: an expansion of dissonance theoretical research on selective exposure to information. Journal of personality and social psychology 80(4), 557-571.

Kahan, D. M., Peters, E., Dawson, E. C., & Slovic, P. (2017). Motivated numeracy and enlightened self-government. Behavioural Public Policy 1(1), 1-22.

Kahneman, D., & Klein, G. (2009). Conditions for Intuitive Expertise, A Failure to Disagree. Applied Research Associates, 515-526.

Kahneman, D. (2011). Thinking, fast and slow. New York: Farrar, Straus and Giroux.

Kahneman, D. (2013). Nobel Prize Winner Daniel Kahneman: Lessons From Hitler's SS And The

Danger In Trusting Your Gut. Forbes. Opgehaald van:

https://www.forbes.com/sites/steveforbes/2013/01/24/nobel-prize-winner-daniel-kahneman-lessons-from-hitlers-ss-and-the-danger-in-trusting-your-gut/#24b528b156e7

Kaplan, S. E., & Reckers, P. M. (1989). An examination of information search during initial audit planning. Accounting, Organizations and Society 14 (5/6), 539-550.

Klayman, J., & Ha, Y. W. (1987). Confirmation, disconfirmation, and information in hypothesis testing. Psychological Review 94 (2), 211-228.

Knapp, M. C., & Knapp, C. A. (2012). Cognitive biases in audit engagements. The CPA Journal, 82(6), 40.

Koriat, A., Lichtenstein, S., & Fischhoff, B. (1980). Reasons for confidence. Journal of Experimental Psychology: Human Learning and Memory, 6, 107–118.

Kumar, S., & Goyal, N. (2015). Behavioural biases in investment decision making—a systematic literature review. Qualitative Research in Financial Markets, 7(1), 88–108.

Kunda, Z. (1990). The case for motivated reasoning. Psychological bulletin 108, 480-498.

Mattheus. Nieuwe testament, 7 (7)

McMillan, J. J., & White, R. A. (1993). Auditors' belief revisions and evidence search: The effect of hypothesis frame, confirmation bias, and professional skepticism. Accounting Review 1993, 443-465.

Messier, W. Jr., Glover, S., & Prawitt, D. (2006). Auditing and assurance services: A systematic Approach (vierde druk). New York, NY: McGraw-Hill/Irwin.

Moed, T. (2006). In control met control self-assessment. Finance and control (2), 40-43.

Monitoring Commissie Corporate Governance Code. (2016, December 8). De Nederlandse Corporate Governance Code. Opgehaald van https://www.mccg.nl/download/?id=3364.

Mullainathan, S., & Thaler, R. H. (2000). Behavioral economics (No. w7948). National Bureau of Economic Research.

Murato, A., Nakamura, T., & Karwowski, W. (2015). Influence of cognitive biases in distorting decision making and leading to critical unfavorable incidents. Safety 1 (1), 44-58.

Nickerson, R. S. (1998). Confirmation bias: A ubiquitous phenomenon in many guises. Review of General Psychology 2(2), 175-220.

Park, J., Konana, P., Gu, B., Kumar, A., & Raghunathan, R. (2013). Information valuation and confirmation bias in virtual communities: Evidence from stock message boards. Information Systems Research 24(4), 1050–1067.

Pennington, R., Schafer, J. K., & Pinsker, R. (2016). Do Auditor Advocacy Attitudes Impede Audit Objectivity? . Journal of Accounting, Auditing & Finance 32(1), 136-151.

Pinkley, R. L., Griffith, T. L., & Northcraft, G. B. (1995). “Fixed pie” a la mode: Information availability, information processing, and the negotiation of suboptimal agreements.

Organizational Behavior and Human Decision Processes 62, 101–112.

Plato, & Helm, J. J. (2003). Apology. Wauconda III : Bolchazy-Carducci.

Pligt, J D. (2015) Psychology of decision making (917-922) in Behavioral Economics. (2015).

International Encyclopedia of the Social & Behavioral Sciences.

Pligt, J. D., & Vliek, M. (2017). The psychology of influence: Theory, research and practice. London:

Routledge.

Public Oversight Board (POB), Panel on audit effectiveness. (2000). Report and recommendations.

Stamford, CT: POB.

Rassin, E., Eerland, A., & Kuijpers, I. (2010). Let's find the evidence: An analogue study of confirmation bias in criminal investigations. Journal of Investigative Psychology and Offender Profiling 7(3), 231-246.

Rock, D., & Grant, H. (2016). Why diverse teams are smarter. Harvard Business Review 4(4), 2-5.

Schwind, C., Buder, J., Cress, U., & Hesse, F. W. (2012). Preference-inconsistent recommendations:

An effective approach for reducing confirmation bias and stimulating divergent thinking?

Computers & Education 58(2), 787–796.

Stafford, V. H., & Thor, M. (2016). Achieving Excellence in Assurance, Strategic Risk Insights, and More. Viewpoints From Financial Services Stakeholders. Opgehaald van https://www.iia.nl/SiteFiles/Publicaties/Foundation%20CBOK%20Achieving%20Excellence.p df

Stanovich, K. E., & West, R. F. (2007). Natural myside bias is independent of cognitive ability.

Thinking & Reasoning 13(3), 225–247.

Stanovich, K. E., & West, R. F. (2008a). On the failure of cognitive ability to predict myside and one-sided thinking biases. Thinking & Reasoning 14(2), 129–167.

Stanovich, K. E., & West, R. F. (2008b). On the relative independence of thinkingbiases and cognitive ability. Journal of Personality and Social Psychology 94(4), 672–695.

Surowiecki, J. (2005). The wisdom of crowds. New York: Anchor Books.

Thaler, R. H. (2016). Behavioral economics: past, present, and future. American Economic Review 106(7), 1577-1600.

Thomas, D. A. (2010). Causes of catastrophic failure in complex systems. An Optical Believe It or Not:

Key Lessons Learned II. 7796, p. 77960K. San Diego: International Society for Optics and Photonics.

Tversky, A., & Kahneman, D. (1974). Judgment under uncertainty: Heuristics and biases. science, 185(4157), 1124-1131.

Van Alphen, M. (2016). Inleiding in de counselling. Amsterdam: Boom uitgevers.

Van de Kieft, R. (2016). Pensioen en bestuur. Audit Magazine (2), 22-25.

Wason, P. C. (1960). On the failure to eliminate hypotheses in a conceptual task. Quarterly journal of experimental psychology 12(3), 129-140.

White, S. B., & Neale, M. A. (1994). The Role of Negotiator Aspirations and Settlement Expectancies in Bargaining Outcomes. Organizational Behavior and Human Decision Processes 57(2), 303-317.

Bijlage 1a Selectie proefpersonen 2-4-6 taak

# #

Internal auditor KPMG 10 Accountantskantoor 10

Internal auditor Stryker 5 Pharmaceutische sector 5

Internal auditor Gemeente van Amsterdam 3 Publieke sector 3

Internal auditor Achmea 2 Verzekeringssector 2

Grand Total 20 Grand Total 20

Bijlage 1b Instructie 2-4-6 taak

“Je krijgt drie nummers die voldoen aan een eenvoudige regel die ik in gedachten heb. Deze regel houdt verband met een relatie tussen drie nummers en niet met hun absolute grootte. Dat wil zeggen het is geen regel zoals dat alle getallen onder de 50 moeten zijn. Het is de bedoeling dat je de regel ontdekt door reeksen van drie nummers op te schrijven. Nadat je deze reeks hebt opgeschreven zal ik noteren of de reeks wel/ niet aan mijn regel voldoet. Vervolgens schrijf je op wat je denkt dat de regel is en hoeveel procent zeker je daarvan bent.

Er is geen tijdslimiet, maar je moet proberen om de regel te vinden door middel van het benoemen van een minimaal aantal reeksen. Het gaat om het ontdekken van de regel en niet om het vinden van nummers die aan de regel voldoen.

Als je 100% zeker bent van de regel die ik in mijn hoofd hebt, houdt het experiment op.”

(Wason, 1960, p. 4)

Bijlage 1c Formulier 2-4-6 taak

WASON 2-4-6 TAAK

# Volgorde Past binnen mijn regel Wat is de regel? Met hoeveel % zekerheid?

1 2-4-6 JA

2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20

Bijlage 2a Selectie proefpersonen twee complexe vraagstukken

# #

Internal auditor KPMG 18 Accountantskantoor 21

Internal auditor Stryker 7 Publieke sector 8

Internal auditor ABN Amro 4 Bancaire sector 8

Internal auditor Gemeente van Amsterdam 4 Pharmaceutische sector 7

Internal auditor Achmea 3 Verzekeringssector 4

Internal auditor Deloitte 2 Pensioensector 3

Internal auditor PGGM 2 Corporate sector 2

Internal auditor Politie 2 Consultancy 1

Internal auditor SNS 1 Zorgsector 1

Internal auditor ONVZ 1 Financiële sector 1

Internal auditor Triodos Bank 1 Grand Total 56

Internal auditor Heineken 1

Internal auditor Icare 1

Internal auditor Privacy consultancy 4U 1

Internal auditor Inholland 1

Internal auditor PWC 1

Internal auditor Waternet 1

Internal auditor APG 1

Internal auditor De Nederlandsche Bank 1

Internal auditor Flowtraders 1

Internal auditor Ministerie van defensie 1

Internal auditor KLM 1

Grand Total 56

Bijlage 2b Cases 1 t/m 4 twee complexe vraagstukken

CASE 1

Als je als vrouw de mogelijkheid had om in de jaren 60 in Nederland een beroep te kiezen, was het beroep internal auditor misschien niet de slimste keuze. De doorgroeimogelijkheden en beloningen waren laag; de werkdruk was hoog. In de meerderheid van de bedrijven waar internal auditors werkten, had amper de helft van de vrouwelijke internal auditors genoeg inkomen om rond te komen.

In totaal waren er in 1960 1000 internal auditors werkzaam. Veel bedrijven hadden een sterke voorkeur voor mannelijke internal auditors. Vrouwen werden dermate ondergewaardeerd dat slechts 1 op de 20 internal auditors een vrouw was. De vrouwen die werkzaam waren als internal auditor werden vaak hevig gekleineerd op de werkvloer. Ook werden zij om het minste geringste ontslagen.

De overheid heeft maatregelen genomen om meer vrouwelijke internal auditors aan te trekken. Zo hebben zij campagnes ontworpen waarin de kracht van multidisciplinaire teams naar voren komt.

Daarnaast hebben zij een wet ingesteld die ervoor zorgt dat de lonen van vrouwelijke internal auditors worden verhoogd én verschaffen zij een aanzienlijke bonus aan bedrijven die een vrouwelijke internal auditor aan nemen.

Voor de overheid is het belangrijk om te weten of de maatregelen genomen in het jaar 2000 hebben geholpen, daarom is een bureau ingehuurd die dit onderzoekt.

Het bureau heeft onderzoek gedaan in het land zelf (zie grafieken) en heeft tevens de situatie vergeleken met een identiek land die geen maatregelen heeft genomen (zie tabel). De landen zijn identiek, het enige verschil is het aantal inwoners, maar dit voorkomt niet dat de resultaten kunnen worden beoordeeld.

Beantwoord de volgende vraag met behulp van de gegevens en de grafieken/ tabel op de volgende bladzijde.

Welk resultaat ondersteunt de gegevens?

De maatregelen van de overheid hebben een positieve bijdrage gehad aan het aantal vrouwelijke internal auditors.

De overheid had beter geen maatregelen kunnen nemen.

TABEL 1

ONDERZOEK NAAR DE TOENAME VAN VROUWELIJKE INTERNAL AUDITORS TUSSEN (2000-2020) IN TWEE IDENTIEKE* LANDEN MET/ ZONDER MAATREGELEN. * identiek: alle factoren zijn gelijk, met uitzondering van het aantal

inwoners.

Resultaten Aantal vrouwelijke internal

auditors aangenomen

Aantal vrouwelijke internal auditors ontslagen

Land met maatregelen 223 75

Land zonder maatregelen 107 21

65 CASE 2

De overheid heeft maatregelen genomen om meer vrouwelijke internal auditors aan te trekken. Zo hebben zij campagnes ontworpen waarin de kracht van multidisciplinaire teams naar voren komt.

Voor de overheid is het belangrijk om te weten of de maatregelen genomen in het jaar 2000 hebben geholpen, daarom is een bureau ingehuurd die dit onderzoekt.

Beantwoord de volgende vraag met behulp van de gegevens en de grafieken/ tabel op de volgende bladzijde.

Welk resultaat ondersteunt de gegevens?

De maatregelen van de overheid hebben een positieve bijdrage gehad aan het aantal vrouwelijke internal auditors.

De overheid had beter geen maatregelen kunnen nemen.

TABEL 1

inwoners.

Resultaten Aantal vrouwelijke internal

auditors ontslagen

Aantal vrouwelijke internal auditors aangenomen

Land met maatregelen 223 75

Land zonder maatregelen 107 21

67 CASE 3

Medische onderzoekers hebben een nieuwe crème ontwikkeld voor de behandeling van huiduitslag.

Nieuwe behandelingen werken vaak, maar maken huiduitslag soms erger. Zelfs als behandelingen niet werken, wordt huiduitslag soms beter en soms alleen erger. Daarom is het noodzakelijk om elke nieuwe behandeling in een experiment te testen om te zien of het de huidconditie van degenen die het gebruiken beter of slechter maakt dan wanneer ze het niet hadden gebruikt.

Onderzoekers hebben een experiment uitgevoerd met patiënten met huiduitslag. In het experiment gebruikte één groep patiënten de nieuwe crème twee weken lang en een tweede groep gebruikte de nieuwe crème niet.

In elke groep is het aantal mensen bij wie de huidconditie beter is geworden en het aantal waarvan de toestand verslechterde, weergegeven in de onderstaande tabel. Omdat patiënten niet altijd de studies voltooien, is het totale aantal patiënten in elke twee groepen niet precies hetzelfde, maar dit voorkomt niet dat de resultaten kunnen worden beoordeeld.

Geef aan of het experiment aantoont dat het gebruik van de nieuwe crème de conditie van de huid waarschijnlijk beter of slechter zal maken.

Resultaten

Welk resultaat ondersteunt de studie?

Mensen die de huidcrème wel gebruikten, hadden meer kans op een verbeterde huidconditie dan degenen die dat niet deden.

Mensen die de huidcrème wel gebruikten, hadden meer kans op een verslechterde huidconditie dan degenen die dat niet deden.

68 CASE 4