PEUT-ON FAIRE USAGE D’ENQUETES TELEPHONIQUES DANS LA MESURE CLASSIQUE DE LA PAUVRETE ? L’EXEMPLE DE L’ÉTHIOPIE
PAR ALAN DE BRAUW, KALLE HIRVONEN, GASHAW T. ABATE & ABDULAZIZE WOLLE
Les enquêtes sont une méthode clé pour les chercheurs en sciences sociales pour recueillir des données sur les niveaux de vie. Avant la pandémie de la COVID-19, ces enquêtes dans les pays à revenu faible et intermédiaire (PRFI) étaient généralement menées en personne ; les enquêtes téléphoniques étaient rarement utilisées (à l'exception du Programme alimentaire mondial dans certains de ses exercices d'analyse et de cartographie de la vulnérabilité (ACV)). Mais pendant une période commençant avec les premiers stades de la pandémie en 2020, les enquêtes en personne sont devenues impraticables, alors même que le besoin d'informations des impacts sur les ménages d'une crise mondiale en cours devenait de plus en plus urgent.
De nombreux chercheurs se sont alors tournés vers les enquêtes téléphoniques pour suivre l'évolution des niveaux de vie. La Banque mondiale a mené plus de 100 enquêtes téléphoniques ; Innovations for Poverty Action a mené plus de 50 enquêtes téléphoniques dans le cadre de son programme RECOVR ; et l'IFPRI a mené des enquêtes téléphoniques dans un certain nombre de pays (Papouasie-Nouvelle-Guinée, Myanmar, Inde, Népal, Chine, Nigéria, Ghana, Kenya et Éthiopie, entre autres).
Bien que les enquêtes téléphoniques aient aidé les chercheurs, les praticiens et les décideurs à déterminer comment la pandémie a affecté la vie des gens, elles n'ont pas pu remplacer les enquêtes en personne pour la collecte de données sur certains indicateurs importants, tels que l'anthropométrie. Les enquêtes téléphoniques ont également eu tendance à aborder des sujets relativement simples tels que les indicateurs de sécurité alimentaire ou le statut de l'emploi, en évitant les sujets nécessitant des mesures plus complexes - en particulier les dépenses de consommation généralement utilisées dans la mesure de la pauvreté dans les contextes des PRFM. Celles-ci impliquent des questionnaires détaillés avec des modules couvrant l'incidence, la fréquence et le montant de la consommation pour plus de 100 produits alimentaires et les valeurs des dépenses pour plus de 30 produits non alimentaires. La plupart des enquêtes téléphoniques n'ont pas tenté de collecter de telles données, afin de minimiser le temps passé au téléphone.
L'absence d'enquêtes en personne a donc généralement affecté la connaissance des impacts de la pandémie ; avant la reprise de la collecte de données en personne, les résumés généraux de ces impacts ont dû s'appuyer soit sur des mesures simples et subjectives, soit sur des modèles de simulation économique.
Parallèlement, dans les pays où les chercheurs ont tenté de recueillir des données de consommation par téléphone, les résultats divergent de ceux des mesures subjectives ou des modèles de simulation, suggérant que les augmentations de l'insécurité alimentaire n'étaient pas aussi graves.
Par exemple, des enquêtes téléphoniques menées au Kenya et en Sierra Leone suggèrent que la valeur de la consommation alimentaire a en fait augmenté pendant la pandémie ; un projet de collecte de journaux financiers auprès des ménages au Kenya a en outre montré que les ménages ont vendu des actifs pour maintenir les niveaux de consommation. Une étude menée en Éthiopie suggère qu'il n'y a pas eu de changement significatif dans la valeur de la consommation alimentaire globale d'un échantillon représentatif d'Addis-Abeba entre une enquête en personne menée en 2019 et une enquête téléphonique menée à la même période de l'année en 2020, bien que la composition de la consommation alimentaire ait changé.
Bien que ces résultats soient intrigants, la qualité des données restait mise en doute: la méthode d'enquête par téléphone pouvait-elle introduire des biais systématiques ou non systématiques dans les estimations de la consommation, et donc dans l'incidence de la pauvreté ? Pour un article récemment publié dans le Journal of Development Economics, une fois que la collecte de données en personne est redevenue possible, nous sommes retournés à un échantillon de ménages que nous avions suivis à Addis-Abeba pour répondre à cette question.
Pour ce faire, nous avons réparti l'échantillon de manière aléatoire en deux groupes qui ont ensuite participé à des enquêtes identiques, l'une réalisée par téléphone et l'autre en personne.
Les résultats sont assez frappants. Dans la figure 1a ci-dessous, nous représentons graphiquement la distribution des dépenses de consommation par habitant de l'enquête en personne que nous avons menée en septembre 2019, triée par mode d'enquête de notre expérience de 2021. La répartition de l'échantillon étant aléatoire, comme on pouvait s'y attendre, il y a eu peu de différences dans les réponses entre les groupes et les deux distributions se superposent presque.
Cependant, les enquêtes de septembre 2021 ont donné un résultat nettement différent (figure 1b). La distribution de l'enquête en personne se situe loin à droite de la distribution de l'enquête téléphonique, ce qui indique que la méthode de l'enquête téléphonique a produit des estimations de consommation plus faibles sur l'ensemble de la distribution. Nous constatons que la consommation moyenne par habitant pour le groupe de l'enquête en personne est 26 % plus élevée que celle du groupe de l'enquête téléphonique ; en d'autres termes, il semble y avoir un biais négatif important dans la mesure de l'enquête téléphonique.
Figure 1a
Figure 1b
Pourquoi une telle différence ? L'une des causes probables est la fatigue de l'enquête, un problème relativement courant dans les enquêtes téléphoniques. La lassitude peut affecter la mesure de la consommation de différentes manières. Par exemple, les répondants pourraient cesser de prêter attention vers la fin de la liste des 118 aliments. En fait, nous avons anticipé ce biais potentiel dans la conception de notre enquête - et nous l'avons résolu en utilisant deux listes d'aliments différentes, en choisissant au hasard la liste utilisée dans chaque ménage. Les listes d'aliments étaient organisées par blocs ou groupes d'aliments (fruits, légumes, céréales, légumineuses, viande et poisson, œufs et produits laitiers, huiles et beurre, épices et boissons), ce qui nous a permis de tester rigoureusement si les réponses différaient pour les aliments figurant plus loin dans le questionnaire.
En effet, nous constatons que lorsque les aliments apparaissent plus tard dans le questionnaire, leurs quantités consommées sont plus faibles. Cependant, il n'en va pas de même pour les questions filtres simples Oui/Non concernant l'incidence de la consommation de tous les aliments, qui ont été posées en premier avant que les enquêteurs ne se penchent sur les quantités consommées.
Ainsi, alors que les enquêtes téléphoniques ne sont apparemment pas appropriées pour mesurer les dépenses de consommation et les mesures standard de l'incidence de la pauvreté, elles peuvent fournir de bonnes informations sur les changements des indicateurs de qualité du régime alimentaire qui comptent le nombre de groupes d'aliments consommés par les ménages, validant ainsi une grande partie du travail d'enquête téléphonique effectué pendant la pandémie.
Les enquêtes téléphoniques présentent de nombreux avantages : elles sont peu coûteuses, elles peuvent être réalisées à une fréquence élevée et par des enquêteurs situés pratiquement n'importe où, et le nombre d'adultes possédant un téléphone portable ne cesse d'augmenter dans le monde entier. Bien que la pauvreté ne puisse manifestement pas être mesurée de manière standard par téléphone, il existe potentiellement d'autres moyens de la mesurer avec peu de biais. Des recherches supplémentaires sont nécessaires sur les méthodes d'imputation multiple (certaines questions étant posées en personne et d'autres par téléphone) ou sur les questionnaires fractionnés (le questionnaire étant divisé en blocs et chaque personne interrogée répondant à un sous-ensemble de l'ensemble du questionnaire). Ces approches permettraient de raccourcir les entretiens, réduisant ainsi la lassitude des enquêteurs, et de continuer à produire des mesures fiables qui peuvent aider à évaluer comment des chocs tels que ceux de ces dernières années modifient la pauvreté.
Alan de Brauw est chercheur principal à l'unité Marchés, commerce et institutions (MTI) de l'IFPRI ; Kalle Hirvonen est chercheur principal à l'unité Stratégies de développement et gouvernance de l'IFPRI ; Gashaw Tadesse Abate est chercheur au sein de l'unité MTI ; Abdulazize Wolle est doctorant en économie à l'université d'Albany.
Ce travail a été financé par le programme de recherche du CGIAR sur l'agriculture pour la nutrition et la santé (A4NH), dirigé par l'IFPRI.
Article référencé :
Abate, Gashaw Tadesse ; de Brauw, Alan ; Hirvonen, Kalle ; et Wolle, Abdulazize. Mesurer la consommation par téléphone : Evidence from a survey experiment in urban Ethiopia. Journal of Development Economics 161(mars 2023) :
