Evaluatie van initiatieven op het gebied van criminaliteitspreventie

Febe Liagre en Jeroen Van Lierde, EUCPN Secretariat
Dag van de Veiligheid 2014

Transcript

1. Evalua&e  van  ini&a&even  op  het   gebied  van  criminaliteitspreven&e   Febe  Liagre  en  Jeroen  Van  Lierde,  EUCPN  Secretariat   Dag  van  de  Veiligheid  2014       *** EUCPN Secretariat With financial support from the Prevention of and Fight against Crime Programme of the European Union European Commission – Directorate-General Home Affairs
2. Wat  is  het  EUCPN?   •  Het  “EUCPN”,  kort  voor  European  Crime   Preven@on  network.   •  Ontstaan  uit  een  beslissing  van  de  Europese   Raad.   •  Betrach@ng  van  het  Netwerk  is  in  de  eerste   plaats  om  kennis  en  goede  prak@jken  over   misdaadpreven@e  uit  te  wisselen   •  EUCPN  secretariaat  (BE)  ondersteunt  het   netwerk  en  fungeert  als  een  soort   exper@secentrum  
3. Wat  kan  het  EUCPN  mij  bieden?   •  Het  EUCPN-­‐secretariaat:   – database  met  goede  prak@jken  en  beleids-­‐ informa@e  van  de  verschillende  EU-­‐lidstaten:   www.eucpn.org   •  Eigen  producten  EUCPN-­‐secretariaat/EUCPN:   o.a  toolboxen   – Voor  prak@jkwerkers  &  beleidsmedewerkers   – Theore@sche  en  prak@sche  informa@e   – specifiek  onderwerp   – Één  ervan  is  “evalua@e”  
4.  Toolbox  over  evalua&e   •  Product  van  het  Iers  voorziXerschap  en  het  EUCPN   secretariaat   •  doel:   –   Prak@jkwerkers  bewust  maken  van  de  belangrijke   elementen  van  evalua@e   –   Prak@jkwerkers  aanmoedigen  meer  systema@sch   te  werk  te  gaan  en  om  meer  samen  te  werken   met  externe  evaluatoren.   =>  De  toolbox  is  een  prak&sch  instrument  voor  lokale   preven@e  projecten  in  heel  de  EU    
5. Waarom  evalua&e?  
6. Waarom  evalua&e?   “There  can  surely  be  nothing   more  pointless  and,   ul@mately,  boring  than  simply   repea@ng  the  same  mistakes   over  and  over  again  or,   conversely,  failing  to  make   the  best  use  of  a  successful   technique  because  finding  out   whether  it  worked  and  why  is   dismissed  as  a  distrac@on   from  fresh  ac@vity.”     (Dixon,  2002)  
7.  Wat  is  evalua&e…   •  Een  nu`ge  kijk  op  jouw  project  of  programma     •  data-­‐collec@e  op  een  systhema@sche  manier   •  Geeb    feedback     ...Niet   •  Monitoring   •  Audi@ng   •  Inspec@e   •  Kosten-­‐baten  analyse  
8. Evalua&e  types  en  ontwerpen  
9. Discarding  myths…   Evalua@e  is:     •  Te  moeilijk   •  Te  duur   •  Ontmoedigend    
10. 2.  Prac&cal  guidelines   Drie  onderdelen:     •  Plannen  (voorbereiding  &  uitwerking):     •  Gegevens  verzamelen  en  analyseren  (kwan@ta@eve   &  kwalita@eve  data  &  benaderingen)   •  Rapporteren  &  communiceren    
11. Uw  evalua&e  plannen   •  Evalua@e  voorbereiden     •  Evalua@e  uitwerken  
12. Uw  evalua&e  voorbereiden   •  Begrijpen  wat  u  wilt  bereiken   •  Belanghebbenden  betrekken  
13. Uw  evalua&e  voorbereiden   •  Begrijpen  wat  u  wilt  bereiken   •  Belanghebbenden  betrekken   •  Budget   •  Wie  moet  de  evalua@e  uitvoeren?  
14. Soort evaltuatie Voordelen Nadelen Lagere kosten Mogelijk gebrek aan nodige deskundigheid om interviews af te nemen of gegeven te analyseren Gemakkelijkere toegang tot gegevens en mensen Wordt mogelijk niet als objectief beschouwd Meer kennis van het programma Is mogelijk niet geschikt om verdere financiering te rechtvaardingen Helpt organisaties om zichzelf en wat ze don beter te begrijpen kan de inzet van programmamedewerkers vereisen, die dan hun gewone werk niet kunnen doen Mensen met deskundigheid en ervaring in het uitvoeren van evaluaties die aan hoge normen voldoen Hogere kosten Wordt gezien al de meest objectieve soort evaluatie Geen rechtstreekse ervaring met het functioneren van het programma, dus wellicht minder begrip Goed om aan te tonen hoe doeltreffend programma's zijn in het bereiken van hun doelstelingen Interne evaltuatie (evaluatie wordt uitgevoerd door de beheerders van het programma). Externe evaluatie (Evaluatie wordt uitgevoerd door externe deskundigen, vaak van een universiteit of onderzoeksinstelling)
15. Uw  evalua&e  voorbereiden   •  Begrijpen  wat  u  wilt  bereiken   •  Belanghebbenden  betrekken   •  Budget   •  Wie  moet  de  evalua@e  uitvoeren?   •  Evalua@eteam  samenstellen   •  adviesraad  
16. Uw  evalua&e  uitwerken   •  Achtergrondonderzoek  verrichten  
17. Logisch  basismodel     Concrete  examples   For  example,  the  launch  of  a  preven@on  campaign  to    raise   public  awareness  on  domes@c  burglaries      
18. Eerdere  onderzoeken  en   metastudies               References  to  other   (inter)na@onal  sources  
19. Uw  evalua&e  uitwerken   •  Achtergrondonderzoek  verrichten   •  Evalua@evragen  uitwerken  
20. Evalua&evragen  uitwerken   Evaluatievragen formuleren Programmaonderdeel (activiteit/ resultaat) Evaluatievraag Bijv. 6 maanden nadat het programma is uitgevoerd, is het aantal meldingen van verdacht gedrag met 25% gestegen Bijv. Heeft het programma zijn doelstelling behaald om het aantal meldingen van verdacht gedrag te verhogen? Bijv. Na een jaar is de angst voor criminaliteit van gebruikers van de dienst met 40% afgenomen Bijv. Vertonen gebruikers van de dienst na het programma lagere angstniveaus in vergelijking met mensen die de dienst niet gebruiken?
21. Uw  evalua&e  uitwerken   •  Achtergrondonderzoek  verrichten   •  Evalua@evragen  uitwerken   •  Soort  informa@e   •  Indicatoren  uitwerken   •  De  evalua@eopzet  kiezen  om  de  impact  te   meten  
22. De  evalua&eopzet                
23. Uw  evalua&e  uitwerken   •  Soort  informa@e   •  Indicatoren  uitwerken   •  De  evalua@eopzet  kiezen  om  de  impact  te   meten   •  Een  evalua@eplan  opstellen   meten   •  Een  evalua@eplan  opstellen  
24. Gegevensverzameling  en  – analyse     •  Gegevens  verzamelen   •  Gegevens  analyseren  en  interpreteren  
25. Gegevens  verzamelen   •  Kwan@ta@eve  benaderingen   – Enquête   •  Kwalita@eve  benaderingen   – Interviews   – Focusgroepen   – observa@e  
26. Gegevens  analyseren  en   interpreteren   •  Kwan@ta@eve  gegevens   – Gegevens  opschonen   – Gegevens  analyseren   – Gegevens  interpreteren   •  Kwalita@eve  gegevens   •  Terugkoppelen  naar  belanghebbenden  
27. Communica&e     •  Uw  evalua@ebevindingen  rapporteren  en   communiceren  
28. Bedankt!       www.eucpn.org       With the financial support of the Prevention of and Fight against Crime Programme of the European Union European Commission Directorate-General Home Affairs