POLITIQUE SCIENTIFIQUE FEDERALE rue de la Science 8 B-1000 BRUXELLES Tél. 02 238 34 11 Fax 02 230 59 12 www.belsp.be Fiche de prjet pur les institutins publiques Cette fiche est remplie par une institutin publique. Y est décrit la nature du prjet à mettre en euvre, les tâches à cnfier à une équipe scientifique, le timing et le budget dnt dispsera cette équipe, les mdalités d implémentatin du résultat final de l équipe scientifique que cette institutin publique mettra en place tant pur sn fnctinnement prpre que pur en permettre l accès aux chercheurs et au grand public. Infrmatins pratiques Nm de l institutin publique ayant intrduit le prjet: Plice fédérale Nm du prjet : Cmment pallier aux nn-répnses (ligne fixe et refus) d une enquête téléphnique cmme le Mniteur de sécurité? Timing des tâches scientifiques : 12 mis Délivrables et activités de valrisatin à charge de l équipe scientifique (nn cmpris ceux décrits d la fiche ci-après): - Séminaire internatinal en début de prjet (état de l art) ; - rapprt succinct expsant la manière dnt les dnnées visées par le prjet peuvent être cmparées et harmnisées au niveau internatinal/eurpéen. L bjet de ce rapprt est de permettre à l institutin publique de traiter ses prpres dnnés d une perspective de cmparabilité internatinale/eurpéenne ; - activité de valrisatin en fin de prjet : l équipe fera une prpsitin d sn frmulaire de sumissin avec pur bjectif de faire cnnaître au mieux le résultat du prjet. - délivrables visés par le cntrat de recherche : descriptin du prjet (max. 25 lignes en quatre langues français, néerlandais, anglais et allemand pur le site web de la plitique scientifique fédérale), résumé du prjet en maximum 10 pages pur le site web de la Plitique scientifique fédérale, également en quatre langues et à remettre à l issue du prjet), un texte en français, néerlandais et anglais destiné à la Newsletter AGORA (max. 40 lignes), rapprts intermédiaires (maximum 2 pages, tus les 6 mis permettant de libérer les tranches de financement de l équipe scientifique), rapprts pur le cmité d accmpagnement (vir plus lin) ; Ces activités snt à charge du budget de l équipe scientifique. Dérulement du prjet : L institutin publique gère sn prjet et entretient dnc un dialgue étrit avec l équipe et la Plitique scientifique (qui frment le cmité technique). Le prjet est accmpagné par un cmité d accmpagnement cmpsé de fnctinnaires et de scientifiques. Ce cmité se réunit à échéances régulières et au mins tris fis durant la durée du prjet (au début, au milieu et à la fin du prjet). Y est représenté des utilisateurs ptentiels du résultat du prjet et tute persnne qui peut cntribuer à faire avancer le prjet. L équipe se charge de furnir les dcuments pur ce cmité, l institutin publique gère l agenda et les prcès-verbaux. date de la réunin d infrmatin (inscriptin une semaine à l avance par e-mail naji@belsp.be. A défaut d inscriptin, la réunin est annulée) : 12 janvier, salle 7 de la Plitique scientifique fédérale, 14h30. Prgramme AGORA Prjet NOTESUMO 1/7
Le prjet 1. Nm de l Institutin Plice Fédérale Directin Générale de l Appui Opératinnel Directin de la Banque de Dnnées Natinale 2. Nm du prjet Nn-répnse à une enquête téléphnique telle que le Mniteur de Sécurité 3. Acrnyme NOTESUMO (Nn-répnse à une enquête téléphnique telle que le Mniteur de Sécurité) 4. Descriptin du prjet et cntexte d lequel il s inscrit au sein de l institutin Cmment pallier aux nn-répnses (ligne fixe et refus) d une enquête téléphnique cmme le Mniteur de sécurité? L bjectif de la recherche est de permettre une utilisatin, la plus ptimale pssible, de la base de dnnées du Mniteur de sécurité qui puisse tenir cmpte du biais intrduit par l imprtance et les caractéristiques des nn-répnses. Le prblème des nn-répnses est un bstacle prpre à tutes les recherches quantitatives de grande ampleur. La plupart des recherches sur base d enquêtes divent truver le juste équilibre entre le mde de passatin (face à face, téléphnique, par currier, ), le budget, le temps et le taux de participatin (= la représentativité de la ppulatin). D le prlngement d un prjet AGORA en 2005 prtant sur l ptimalisatin du questinnaire du Mniteur de sécurité et la mise en place d un mini-mniteur et d un mniteur-plus, cette recherche est d une grande imprtance pur tutes les enquêtes scientifiques quantitatives à grande échelle cmme celle du Mniteur de sécurité. Le Mniteur de sécurité est une enquête téléphnique standardisée à grande échelle auprès de la ppulatin. Cette enquête est réalisée à la demande du Ministre de l Intérieur et est suivie par la Directin de la Banque de dnnées natinale au sein de la Directin Générale de l Appui Opératinnel de la Plice fédérale. Cette enquête cmprte des questins relatives au sentiment d insécurité, à la victimisatin, au signalement et à la déclaratin de délits et à la satisfactin du fnctinnement des services de plice. En 2004, le Mniteur de Sécurité a été réalisé pur la cinquième fis aux niveaux fédéral et lcal (1997, 1998, 2000, 2002, 2004). En 2004, plus de 41.000 persnnes nt été interviewées. Le prchain Mniteur de sécurité se tiendra durant le premier semestre de 2006. L enquête du Mniteur de sécurité, dnt la sixième passatin de l enquête aura lieu en 2006 ; se dit d être la plus représentative pssible de tutes les catégries de la ppulatin. Le Mniteur de sécurité est un util imprtant pur suivre les tendances de l avis de la ppulatin au sujet de la sécurité et de la plice. Il faut dnc veiller à ce qu aucun biais ne vienne influencer la cmparabilité temprelle de l explitatin et des analyses de la base de dnnées du Mniteur de sécurité. 1) Une apprche des ppulatins sus-représentées La répartitin de l échantilln de la base de dnnées du Mniteur de sécurité a été cmparée à la répartitin réelle de la ppulatin du pays seln les catégries d âge et de sexe. Cmme il s agit d une enquête téléphnique, les catégries les mins représentées snt, classiquement, les classes les plus jeunes, 15-24 et 25-34, et qui ne dispsent prbablement que d un GSM. A l inverse, les catégries d âge les plus élevées snt sur-représentées d l échantilln. La répartitin entre hmmes et femmes d l échantilln est, quant à elle, prche de la réalité. Cette analyse a été réalisée depuis 1997. Prgramme AGORA Prjet NOTESUMO 2/7
1997 1998 2000 2002 2004 15-24 0,67 0,65 0,67 0,60 0,60 25-34 1,00 0,99 0,86 0,74 0,73 35-49 1,07 1,09 1,12 1,03 1,04 50-64 1,13 1,13 1,22 1,25 1,28 65+ 1,03 1,02 0,99 1,21 1,16 Sus- et sur- représentatin d l échantilln du Mniteur de sécurité (par classes d âge) par rapprt à la répartitin de la ppulatin de 15 et plus en Belgique. Il apparaît que depuis 1997, les catégries d âge les plus jeunes (15-24 et 25-34 ) snt de mins en mins bien représentées. Un biais est dnc susceptible d apparaître d les résultats. Il semble dnc primrdial de mener une réflexin sur l impact de ce biais et de mettre en œuvre des méthdes alternatives pur réduire cet écart crissant au curs du temps. 2) Le taux de participatin D autre part, nus avns la pssibilité de calculer le taux de participatin à l enquête en cnnaissant le nmbre de refus en début d interview et au curs de celle-ci. En 2004, le taux net de participatin était de 66,4%. En tenant cmpte des tentatives ne dnnant pas lieu à un cntact (répndeur, téléphne ccupé, ), le taux brut de participatin était de 57,1%. Il serait intéressant de vérifier si les persnnes nn désireuses de participer à l enquête pssède un prfil spécifique. En effet, il se peut que certaines catégries de répndants échappent de ce fait à l analyse. Si le prfil des nn-répndants s écarte significativement du prfil des répndants, il serait pertinent de recalculer les intervalles de cnfiance en tenant cmpte de ces écarts. De même, une différence gégraphique s bserve quant aux taux de répnse. Les prvinces de Namur, du Luxemburg et du Brabant Walln nt les taux de répnse les plus élevés (75%). A l inverse, les prvinces de Flandre Occidentale et Orientale nt les taux les plus bas (63%). Les facteurs sci-écnmiques u démgraphiques à la base de ces différences snt imprtants à mettre en lumière pur nus permettre de définir les techniques nus permettant de «gmmer» ces différences spatiales. Enfin, une réflexin sur les principales raisns de refus invquées par les répndants permettraient d apprcher le prfil des nn-répndants. (Par rdre décrissant : pas d intérêt pur ce sujet (40%), raccrche s explicatin (25%), trp âgé/malade (20%) u pas le temps (10%)). 5. Réalisatin à mettre en œuvre a) par l équipe scientifique 1) Une apprche des ppulatins sus-représentées Un calcul de la représentativité de l échantilln du Mniteur de sécurité devra être effectué seln différents critères. Il faudra mettre en évidence les biais qui existe seln les catégries d âge, de sexe, de niveau de diplôme, de prfessin, en fnctin de la répartitin de la ppulatin. S il apparaît que les écarts entre l échantilln et la répartitin de la ppulatin snt trp grands, une réflexin devra être menée pur vir si l impact de la pst-stratificatin n influence pas de manière trp imprtante les résultats (tant au niveau fédéral que lcal). Ex. pids nettement supérieur à 1. Le Mniteur de Sécurité utilise des pids pur «rectifier» l échantilln en fnctin de la répartitin de la ppulatin seln l âge et le sexe. En fnctin des résultats, d autres critères de pststratificatin devrnt peut-être être pris en cnsidératin? Prgramme AGORA Prjet NOTESUMO 3/7
2) Le prfil des catégries ne pssédant pas de ligne fixe L évlutin du nmbre de raccrdements à une ligne téléphnique fixe décrît clairement depuis 1997 seln l enquête de l INS sur les budgets des ménages. En parallèle, le nmbre de persnnes dispsant d un GSM est en nette augmentatin. L impact d une enquête téléphnique à grande échelle uniquement sur les persnnes pssédant une ligne fixe intrduit inévitablement un biais. Abnnement GSM au téléphne fixe Enquête 1995-96 95,6% Enquête 1996-97 97,1% Enquête 1997-98 93,5% 10,0% Enquête 1999 87,9% 30,7% Enquête 2000 84,0% 47,5% Enquête 2001 85,7% 63,0% Raccrdement au téléphne fixe - Enquête sur le budget des ménages Cnfrt ménager - INS L enquête sur le budget des ménages de l INS nus apprend également qu en 2001, le purcentage de ménages qui pssèdent au mins l'un des biens suivants est de : - uniquement téléphne fixe : 34,1% - uniquement GSM : 11,4% - téléphne fixe et GSM : 51,6% - téléphne fixe u GSM : 97,1% Il ressrt de cela que 11,4% des ménages belges en 2001 pssèdent uniquement un GSM et ne snt dnc pas jignables seln une enquête téléphnique cnventinnelle. Face à ces cnstatatins, il semble utile de : - réclter de l infrmatin sur les caractéristiques des ménages pssédants une ligne fixe (prfil sci-démgraphique) - réclter de l infrmatin sur les caractéristiques des ménages ne pssédants pas de ligne fixe (prfil sci-démgraphique) Il faudra mettre en lumière les différences de prfil entre les ménages pssédant une ligne fixe et ceux n en pssédant pas. Cnnaissant le prfil des répndants à l enquête du Mniteur de sécurité, le prfil des ménages pssédant une ligne fixe et le prfil des ménages ne pssédant pas de ligne fixe, il est pssible de mesurer les écarts par rapprt à l échantilln. Un recalcul des intervalles de cnfiance en tenant cmpte des sus-représentativités devra, d ce cas, être réalisé. 3) Alternatives à l enquête téléphnique En parallèle au questinnement sur l influence des nn-répnses sur l analyse des résultats de la base de dnnées du Mniteur de sécurité, une réflexin sur des méthdes alternatives de passatin dit être envisagée vu le nmbre décrissant de ménages pssédant une ligne fixe. Actuellement, le mde de passatin des enquêtes du Mniteur de sécurité est uniquement téléphnique. Nus avns déjà au travers d autres études une bnne idée des alternatives existantes. Néanmins leur mise en œuvre cncrète n a pas encre été abrdée. Il est dnc pertinent de s interrger cncrètement sur la pssibilité de cmbiner des méthdes alternatives cmme par ex. partir du registre natinal et cllecter les nms et adresses de la ppulatin cible et ensuite de s interrger sur la méthde de passatin cmme la méthde face à face u par currier, Internet, GSM De plus, un test de ces alternatives dit être envisagé pur mettre en évidences les différences de répnse que purraient engendrer des méthdes de passatin différente et l impact que cela peut engendrer sur les analyses des dnnées. Prgramme AGORA Prjet NOTESUMO 4/7
Enfin, cnnaissant le temps myen de l enquête téléphnique du Mniteur de sécurité, à savir 26 min. quelle est la faisabilité d une enquête par GSM? Quelles snt les bases de dnnées GSM existantes, recuvre-t-elle la ppulatin d sn entièreté? 4) Le taux de participatin Les répndants ne désirant pas participer au Mniteur de sécurité en début d interview snt néanmins invités à participer à un petit questinnaire de 5 minutes. 509 répndants nt ainsi participé à ce petit questinnaire en 2004. Il ne s agit bien entendu pas des répndants refusant le plus catégriquement de participer à l enquête. Les caractéristiques de ces répndants divent être cmparées aux caractéristiques des répndants réalisant le questinnaire du Mniteur de sécurité d sn entièreté. Il se peut que certaines catégries de répndants échappent de ce fait à l analyse. Si le prfil des nn-répndants s écarte significativement du prfil des répndants, il serait pertinent de recalculer les intervalles de cnfiance en tenant cmpte de ces écarts. Une analyse des différences gégraphiques en ce qui cncerne le taux de répnse dit aussi être envisagée et être mise en parallèle avec une réflexin sur les principales raisns de refus invquées par les répndants. b) par l institutin publique: 1) en préalable au travail de l équipe scientifique mise à dispsitin des dnnées brutes nécessaires aux analyses (les variables) ntamment au niveau des caractéristiques persnnelles (âge, sexe, prfessin, diplôme, chef de ménage, ) de la base de dnnés du Mniteur de sécurité mise à dispsitin du fichier sur le questinnaire de refus 2) en curs de prjet mise à dispsitin d autres dnnées qui seraient nécessaires en curs de prjet suivi en cntinu du prjet et évaluatin en curs de recherche rganisatin de plusieurs cmités d accmpagnement : en début de recherche, en curs de recherche et à la fin de la recherche 6. Prduit final attendu a) de l équipe scientifique analyse quantitative des prfils des répndants, nn-répndants et persnnes ne pssédant pas de ligne fixe rédactin d un rapprt reprenant les résultats du pint 3. (re-)calcul des intervalles de cnfiance lrsque c est nécessaire analyses quantitatives des résultats du testing seln le mde de passatin b) pur l institutin publique rapprt reprenant et analysant les différentes étapes de la recherche (vir pint 3) spécifiquement pur les ppulatins sus-représentées : critères de pststratificatin et intervalles de cnfiance sur l échantilln du Mniteur de sécurité à recalculer. en ce qui cncerne le prfil des persnnes ne dispsant pas de ligne fixe : cmparaisn quantitative entre les résultats du Mniteur de sécurité d sn état actuel et les résultats du testing seln une autre passatin, et recalcul des intervalles de cnfiance. au niveau des alternatives de passatin : analyse des résultats du testing + rechercher les bases de dnnées GSM existantes. Prgramme AGORA Prjet NOTESUMO 5/7
pint du vue du taux de participatin : analyse quantitative du questinnaire subsidiaire du Mniteur de sécurité actuel (questinnaire de refus). questinnaires réalisés u adaptés en fnctin du mde de passatin résultats et analyses du testing du questinnaire et des résultats seln une autre passatin. 7. Valrisatin du prduit final a) pur l institutin publique: intégratin du prduit final d sn fnctinnement prpre La prise en cmpte des résultats de la recherche se fera au travers de différentes étapes : prise en cmpte de l intervalle de cnfiance plus large si la différence entre l échantilln et la répartitin de l échantilln (âge, refus, ) est trp imprtante. intégratin des résultats du testing prvenant des questinnaires dévelppés en fnctin de la méthde de passatin la plus apprpriée pur amélirer la représentativité de l échantilln. b) pur le public : mdalités et cnditins d accès pur le mnde scientifique et le grand public une réflexin apprfndie sur les biais engendrés par les enquêtes téléphniques et leurs «slutins» purraient être trmises aux rganismes publiques qui snt cnfrntés aux mêmes prblématiques. 8. Timing, planning des activités a) Timing des activités 12 mis 1) Une apprche des ppulatins sus-représentées (1,5 mis) - Représentativité de l échantilln du Mniteur de sécurité seln différents critères (catégries d âge, de sexe, de niveau de diplôme, de prfessin, ) : ½ mis - Si écarts entre échantilln et ppulatin imprtants : pst-stratificatin : ½ mis - Autres critères de pst-stratificatin : ½ mis 2) Le prfil des catégries ne pssédant pas de ligne fixe (3 mis) - Etude préalable sur l évlutin du nmbre de raccrdements à une ligne téléphnique fixe : ½ mis - Réclter de l infrmatin sur les caractéristiques des ménages pssédants une ligne fixe (prfil sci-démgraphique) : ½ mis - Réclter de l infrmatin sur les caractéristiques des ménages ne pssédants pas de ligne fixe (prfil sci-démgraphique) : ½ mis - Mise en lumière des différences de prfil entre les ménages pssédant une ligne fixe et ceux n en pssédant pas : ½ mis - Cmparaisn avec le prfil des répndants à l enquête du Mniteur de sécurité + recalcul des intervalles de cnfiance en fnctin des sus-représentativités : 1 mis 3) Alternatives à l enquête téléphnique (4,5 mis) - Identificatin et faisabilité des mdes de passatin alternatifs : 1 mis - Adaptatin au questinnaire seln la méthde sélectinnée : 1 mis - Testing de la (u les) méthde(s) de passatin : 1 mis - Analyses des résultats du testing (sur base des variables issues des dnnées brutes : statistiques, crrélatins, ) : impact sur les répnses et différences seln le mde de passatin : 1,5 mis 4) Le taux de participatin (2 mis) - Identificatin des caractéristiques des répndants refusant de participer: ½ mis - Cmparaisn entre prfil des répndants du Mniteur de sécurité et répndants refusant d y participer + recalculer des intervalles de cnfiance: 1mis Prgramme AGORA Prjet NOTESUMO 6/7
- Analyse des différences gégraphiques du taux de répnse (principales raisns de refus) : ½ mis 5) Rédactin du rapprt final (1 mis) - Rédactin du rapprt final reprenant les pints cités précédemment : 1 mis b) Planning des activités: phasage des étapes du travail: 1) pur l équipe scientifique 01 02 03 04 05 06 07 08 09 10 11 12 apprche des ppulatins sus-représentées d l échantilln prfil des catégries ne pssédant pas de ligne fixe alternatives à l enquête téléphnique taux de participatin rédactin du rapprt 2) pur l institutin publique 01 02 03 04 05 06 07 08 09 10 11 12 furnir les dnnées nécessaires furnir les dnnées nécessaires en curs de recherche cmités d accmpagnement 9. Cnditins particulières a) suggestins de cmpsitin du cmité d accmpagnement Cmité d accmpagnement pur le suivi du prjet : utre la directin de la banque de dnnées natinale, deux représentants de la plice lcale (1 N et 1 F), désignés par la Cmmissin permanente de la Plice lcale ; un membre de la Directin du fnctinnement et de la crdinatin de la plice fédérale (CGC), un membre du Service de plitique criminelle du SPF Justice, un représentant du SPF Plitique scientifique; un représentant des guverneurs, à désigner par les guverneurs; un représentant du SPF Intérieur (Directin générale de la plitique de préventin et de sécurité); un directeur-crdinateur ; plusieurs représentants du mnde académique/scientifique; un représentant de l Administratin Planning en Statistiek de la Cmmunauté flamande; un représentant de la Régin wallnne ; un représentant du Vlaams stedenbeleid ; un représentant de l unin wallnne des villes et cmmunes ; un représentant de l INS ; Département PEO Persnnel et Organisatin. b) clause de cnfidentialité éventuelle Le Mniteur de sécurité est prpriété de l Etat. Tute reprductin u utilisatin dit faire l bjet d une demande. c) présence éventuelle de l équipe au sein de l institutin Chaque semaine, des cntacts sernt établis entre l équipe de recherche et l institutin publique (par téléphne u mail). Cet échange hebdmadaire a pur but l échange d infrmatins et le suivi de l avancement de la recherche ainsi que pur sulever tus prblèmes rencntrés. Une réunin mensuelle sera également prévue pur appruver les différentes phases d avancement. d) autres nihil Prgramme AGORA Prjet NOTESUMO 7/7