Présentation

Parmi les outils dont disposent les stratèges, peu génèrent autant de débats que le sondage de poussée. Bien que la recherche conventionnelle d'opinion vise à mesurer où se trouvent les électeurs, les sondages de poussée sont conçus pour les déplacer. La distinction est importante, parce que la façon dont une campagne mesure l'efficacité d'un sondage de poussée détermine si la tactique est perçue comme un succès stratégique ou une responsabilité de réputation. Comprendre les cadres, les paramètres et les défis liés à l'évaluation de l'efficacité du sondage de poussée offre une fenêtre sur la prise de décision moderne de campagne et les limites éthiques de la persuasion des électeurs.

Les sondages de poussée occupent une zone grise entre la recherche et la défense des droits. Ils ne sont pas conçus pour produire des données impartiales sur le sentiment des électeurs. Ils fonctionnent plutôt comme un outil pour diffuser des informations préjudiciables, renforcer les biais existants ou tester la résonance d'une attaque particulière.Les campagnes investissent des ressources importantes dans le déploiement de ces appels, mais sans mesure rigoureuse, elles ne peuvent pas savoir si l'effort a déplacé des chiffres ou simplement généré du bruit.

Que font les sondages de poussée et comment se distinguent-ils des sondages légitimes?

Pour mesurer l'efficacité d'un sondage de poussée, il faut d'abord définir ce qui est qualifié de sondage de poussée en pratique. Le terme désigne un scénario de télémarketing ou d'appel en direct qui se passe comme un sondage d'opinion légitime, mais qui est en fait conçu pour changer l'opinion du répondant, souvent en présentant des informations négatives sur un adversaire. Un sondage de poussée typique pourrait se demander : « Est-ce que vous seriez plus ou moins susceptible d'appuyer le candidat Smith si vous saviez qu'elle avait été citée pour évasion fiscale en 2018? » La question intègre une affirmation, et le répondant traite cette affirmation même s'ils répondent « moins probables ».

L'American Association for Public Opinion Research (AAPOR) distingue les sondages de la recherche légitime en faisant remarquer que les sondages de poussée « ne sont pas conçus pour recueillir de l'information, mais plutôt pour diffuser de la propagande sous couvert de recherche. » Les campagnes qui utilisent les sondages de poussée font régulièrement l'objet de critiques de la part des médias, des chercheurs universitaires et parfois des régulateurs électoraux. Malgré cela, les sondages de poussée persistent parce qu'ils peuvent être efficaces dans les courses à faible information ou pendant les derniers jours avant une élection, lorsqu'un appel bien organisé peut donner des conseils aux électeurs indécis.

Certains États exigent la divulgation de qui paie l'appel, tandis que d'autres ont tenté d'interdire les sondages pour des raisons purement mensongères. Les campagnes qui opèrent dans plusieurs États doivent suivre attentivement ces règlements, et la mesure de l'efficacité comprend souvent une évaluation des risques de retombées juridiques ou de relations publiques. Un sondage de poussée qui fait naître le sentiment des électeurs de deux points de pourcentage, mais qui génère des histoires de première page sur les tricks sales peut produire un net négatif pour la campagne qui l'a déployé.

Le rôle stratégique des sondages de poussée dans les campagnes modernes

Les sondages de poussée sont le plus souvent utilisés dans les courses concurrentielles où un petit nombre d'électeurs indécis peuvent en déterminer le résultat. Ils sont également utilisés lors des élections primaires pour tester des messages trop agressifs pour la publicité publique. La justification stratégique repose sur trois hypothèses : qu'un appel téléphonique ciblé peut atteindre des électeurs qui ne consomment pas de publicité de campagne, que l'information fournie restera lettre morte même si le répondant y résiste et que l'effet est difficile à remonter à la campagne d'origine.

Les campagnes doivent également évaluer si le sondage de poussée a atteint son objectif de communication. L'appel a-t-il réussi à susciter un doute précis sur l'adversaire? A-t-il déplacé la conversation autour d'un enjeu particulier? A-t-il supprimé la participation de l'adversaire? Ce sont des questions que le sondage conventionnel ne peut répondre directement. Les campagnes utilisent donc une combinaison de sondages pré-exposition et post-exposition, de groupes de contrôle et d'entrevues de suivi pour isoler l'effet du message.

Poussez les sondages comme la publicité négative par téléphone

Il existe un fort parallèle entre les sondages de poussée et les publicités télévisées négatives, qui visent tous deux à créer une association émotionnelle ou cognitive qui rend l'adversaire moins attrayant. La différence est qu'un sondage de poussée est interactif. Le répondant est forcé de traiter l'information et de formuler une réponse. Ce traitement actif peut rendre l'information plus mémorable qu'un spot de télévision passive.

Cependant, la nature interactive du sondage de poussée introduit également le risque. Un répondant qui se sent manipulé peut devenir plus motivé à soutenir le candidat visé. Ce phénomène, connu sous le nom d'effet de réaction, est une variable clé dans la mesure de l'efficacité.

Principales mesures pour mesurer l'efficacité du sondage de poussée

Les campagnes s'appuient sur un ensemble de mesures quantifiables pour déterminer si un sondage de poussée a atteint l'effet prévu. Ces mesures sont suivies à travers plusieurs points de collecte de données pour construire une image avant et après. Les mesures les plus utilisées sont le changement de réponse, les taux d'engagement des électeurs, le rappel de messages et les résultats subséquents du sondage.

Changement de réponse

Pour mesurer cette situation, les campagnes effectuent une enquête prépollaire sur un univers cible, administrent le sondage de poussée sur un sous-ensemble de cet univers, puis effectuent une enquête postpolaire sur les mêmes individus. La différence de réponses entre les deux points de temps est attribuée, avec prudence, à l'exposition au sondage de poussée. Un déplacement statistiquement significatif de un à trois points de pourcentage est généralement considéré comme un succès dans une race serrée. Cependant, les campagnes doivent tenir compte de la régression à la moyenne et de la possibilité que le prépoll lui-même sensibilise les répondants à la question.

Les campagnes sophistiquées construisent des modèles de régression qui contrôlent les variables démographiques, le maigre partisan et la consommation des médias. Elles testent également les effets dose-réponse. Si les répondants qui ont reçu une version plus longue du sondage de poussée montrent un changement plus important que ceux qui ont reçu une version plus courte, la campagne gagne en confiance que le contenu lui-même est à l'origine du changement.

Engagement des électeurs et critères de participation

Le pourcentage d'électeurs contactés qui ont effectué un sondage de poussée est lui-même une mesure de l'efficacité. Les faibles taux d'achèvement indiquent que le script ne permet pas d'engager les répondants, ce qui réduit le nombre de personnes exposées au message. Les campagnes permettent de suivre le nombre d'appels placés, le nombre de contacts, le nombre de réponses et la durée moyenne de l'appel.

L'engagement est également mesuré par le nombre de répondants qui demandent plus d'information ou qui offrent spontanément des opinions non sollicitées pendant l'appel. Les superviseurs du centre d'appels indiquent ces interactions pour une analyse qualitative. Si une partie importante des répondants exprime de la colère ou de la suspicion, la campagne peut décider d'abandonner le script ou de modifier son ton. Inversement, si les répondants semblent réceptifs et posent des questions de suivi, qui indiquent une pénétration plus forte du message.

Rappel de message

Le rappel du message est un indicateur d'efficacité en retard. Il mesure si l'électeur se souvient de l'allégation centrale ou de la revendication des heures ou des jours suivant l'appel. Le rappel élevé implique que l'information a été encodée dans la mémoire à long terme, ce qui augmente la probabilité qu'elle influencera la décision finale de l'électeur.

Dans un environnement de médias saturés où les électeurs sont bombardés de messages concurrents, les taux de rappel supérieurs à 20 % sont considérés comme excellents. Dans une course plus calme, un taux de rappel de 30 % ou plus peut être réalisable. Les campagnes testent également la désintégration des rappels en effectuant des enquêtes de suivi à intervalles de 24 heures, 48 heures et une semaine. La désintégration rapide suggère que le message ne s'est pas maintenu, tandis que la stabilité ou l'augmentation des rappels laisse entendre que le message s'est répandu par la discussion interpersonnelle ou la couverture médiatique générée par le sondage de poussée lui-même.

Résultats du sondage subséquent

Les campagnes font généralement passer un sondage de référence avant la vague de sondage, puis un sondage de suivi après la vague est terminé. La différence de soutien des candidats, surtout parmi le segment démographique ou géographique ciblé, sert à estimer l'effet net. Cette mesure est bruyante parce que de nombreux autres facteurs - publicité télévisée, événements d'actualité, réactions des adversaires et opérations de vote - se produisent simultanément. Pour accroître la précision, les campagnes utilisent un cadre de différence de différences, comparant le changement entre l'univers ciblé au changement entre un univers de contrôle qui n'a pas reçu le sondage de poussée.

Certaines campagnes vont plus loin et utilisent une analyse de couple ou une pondération de la propension pour simuler une expérience randomisée. Lorsque des sondages poussés sont déployés sur de multiples marchés médiatiques, les campagnes peuvent comparer les mouvements sur les marchés traités aux mouvements sur des marchés non traités, à condition que les marchés soient semblables sur des covariables clés telles que la composition partisane, le revenu et l'éducation.

Méthodes utilisées par les campagnes pour évaluer l'impact

Au-delà des mesures de base, les campagnes déploient plusieurs approches méthodologiques pour isoler et quantifier l'effet des sondages de poussée.Ces méthodes vont de simples comparaisons avant post à des conceptions sophistiquées de panneaux multi-ondes. Le choix de la méthode dépend du budget de la campagne, du calendrier et de la tolérance pour l'erreur de mesure.

Sondages préalables et postérieurs à la période de vote

La méthode la plus directe consiste à effectuer une enquête de base sur la population cible, y compris les cotes favorables, les associations d'émission et l'intention de voter. La campagne sature alors cette population avec le sondage de poussée appelle sur une période définie. Après la fermeture de la fenêtre de saturation, une enquête de suivi est effectuée auprès de la même population ou d'un nouvel échantillon prélevé à partir du même cadre. La différence entre les mesures clés entre les deux vagues est attribuée, avec des mises en garde, à l'exposition au sondage de poussée.

Les campagnes de comparaison pré-post comprennent souvent une série de questions de contrôle sur des sujets non liés pour mesurer si le sondage de poussée a généré un changement général d'attention ou d'humeur des répondants. Si les questions de contrôle ne montrent aucun changement alors que les questions de cible montrent un mouvement, la confiance dans l'attribution augmente.

Conceptions de groupe de contrôle

Dans le cadre d'une conception de contrôle randomisée, la campagne identifie une liste de numéros de téléphone et attribue au hasard une partie de cette liste pour recevoir l'appel de sondage de poussée, tandis que le reste ne reçoit aucun appel ni un appel de placebo pour un sujet non lié. Les deux groupes sont interrogés par la suite. La différence de réponses entre les groupes de traitement et de contrôle isole l'effet du sondage de poussée tout en annulant des facteurs externes communs tels que la couverture des nouvelles ou la météo.

L'exécution d'un véritable modèle de contrôle aléatoire dans une campagne en direct est difficile parce que les listes téléphoniques sont rarement vraiment aléatoires et parce que les électeurs peuvent partager des informations entre les groupes de traitement et de contrôle. Les effets de déversement peuvent atténuer l'impact mesuré. Les campagnes d'atténuation en choisissant des groupes de contrôle dans des zones géographiquement distinctes ou en veillant à ce que les échantillons de traitement et de contrôle soient prélevés sur des segments de liste non chevauchants.

Analyse des données et modélisation comportementale

Les campagnes modernes ont accès à de vastes bases de données sur les électeurs, y compris l'historique de la participation passée, l'enregistrement des partis, le comportement des consommateurs et les données numériques sur l'empreinte. Ces bases de données permettent aux campagnes de construire des modèles prédictifs de la réaction probable des électeurs pour pousser l'exposition aux sondages. Par exemple, une campagne pourrait utiliser la régression logistique pour identifier les profils démographiques et comportementaux les plus sensibles au message testé dans un sondage de poussée.

Un électeur qui reçoit un sondage de poussée et qui voit ensuite une publicité télévisée connexe peut afficher un changement plus important qu'un électeur exposé à l'un ou l'autre stimulus seul. Les campagnes utilisent des modèles d'attribution multi-touch pour répartir la contribution de chaque canal. Ces modèles reposent souvent sur des statistiques bayésiennes ou des algorithmes d'apprentissage automatique qui peuvent gérer des données à haute dimension. La sortie est un score de contribution pour les sondages de poussée par rapport à la sollicitation, le courrier direct, les publicités numériques et d'autres tactiques.

L'American Association for Public Opinion Research maintient des lignes directrices sur le sondage éthique que les campagnes devraient faire référence lors de la conception de cadres de mesure pour s'assurer qu'elles ne consolident pas le véritable sondage avec la défense des intérêts.

Enquêtes de suivi et rétroaction qualitative

Les campagnes complètent leur arsenal de mesure par des entrevues qualitatives, des groupes de discussion et des questions ouvertes. Un sondage de suivi qui comprend une courte section de réponse gratuite peut révéler comment les répondants parlent du contenu du sondage de poussée à leurs amis et à leur famille. Si une grande partie des réponses ouvertes mentionnent l'allégation spécifique du sondage de poussée, la campagne sait que le message se répand de façon organique.

Certaines campagnes mènent également des appels de compte rendu avec le personnel du centre d'appels qui a livré le sondage de poussée. Les représentants du centre d'appels ont souvent un sens intuitif de quels scripts fonctionnent. Ils peuvent rapporter le ton des conversations, les réfutations communes des répondants et les réactions inattendues. Cette rétroaction qualitative se connecte à des révisions de script et cible les ajustements en temps quasi réel.

Infrastructure des données et technologie pour le suivi de l'efficacité

Measuring push poll effectiveness at scale requires robust data infrastructure. Campaigns that deploy hundreds of thousands of calls need systems that log every call outcome, time stamp every interaction, and link responses back to individual voter records. Modern campaign technology stacks include predictive dialers, interactive voice response systems, and customer relationship management platforms that integrate with polling and analytics software.

Une technologie couramment utilisée pour le suivi est le dialogue automatique avec fonctionnalité intégrée de sondage. Ces systèmes enregistrent si l'appel a été répondu, combien de temps le répondant a été maintenu sur la ligne, quelles questions ont été répondues, et si le répondant a rempli l'appel. Ces métadonnées se nourrissent directement dans les modèles d'efficacité. Si les données montrent que le même script produit des temps d'appel plus longs dans certains codes régionaux, la campagne enquête si ces appels sont enregistrés ou ignorés, et ajuste la modélisation en conséquence.

Une autre technologie émergente est l'analyse du sentiment appliquée à l'audio d'appel enregistré. Certains fournisseurs offrent des outils de traitement de langue naturelle qui analysent ton, choix de mots et valence émotionnelle des réponses des répondants. Bien que toujours coûteux pour la plupart des campagnes, ces outils peuvent détecter des changements de colère, de confusion ou d'enthousiasme qui prédisent un comportement ultérieur.

La recherche de Pew sur les utilisations commerciales et politiques des sondages de poussée souligne l'importance de la collecte transparente de données pour la légitimité.

Défis à relever pour mesurer l'efficacité du scrutin

Malgré l'éventail des méthodes et des paramètres disponibles, les campagnes sont confrontées à des obstacles considérables lorsqu'elles tentent de mesurer l'impact réel d'un sondage de poussée, qui découlent de la nature de l'instrument lui-même, de l'environnement dans lequel il opère et des contraintes éthiques qui entourent la recherche politique.

Influence subconsciente et variables confusionnelles

Le simple effet d'exposition, un biais cognitif bien documenté, suggère que la présentation répétée d'un stimulus peut augmenter le goût de ce stimulus même si la personne ne se souvient pas consciemment de l'exposition. Dans le cas d'un sondage de poussée, l'électeur pourrait se sentir vaguement plus négatif au sujet du candidat visé, mais attribuer ce sentiment à une nouvelle qu'elle a vue ou à une conversation qu'elle a eue.

Si un journal écrit une histoire sur le sondage, les électeurs qui lisent cette histoire peuvent changer d'opinion sans jamais recevoir d'appel. La campagne voit alors un mouvement dans la population générale qu'elle peut attribuer incorrectement à l'opération téléphonique. Pour contrôler cet effet, il faut suivre les médias, coder les nouvelles et analyser les séries chronologiques que de nombreuses campagnes manquent de ressources pour mener.

Bénéfices sociaux et réponses

Lorsque les répondants sont interrogés dans un sondage de suivi pour déterminer s'ils ont été influencés par un appel téléphonique, beaucoup le nieront, soit parce qu'ils ne veulent pas admettre la vulnérabilité à la manipulation, soit parce qu'ils croient vraiment qu'ils sont immunisés.

Par exemple, ils demandent aux répondants d'évaluer le candidat sur une liste d'attributs, dont certains ont été mentionnés dans le sondage de poussée et d'autres non. Si le groupe de sondage de poussée note que le candidat est inférieur aux attributs mentionnés mais non sur les attributs non mentionnés, la campagne a une influence latente, ce qui réduit la dépendance à l'égard des questions d'attribution directe et fournit des preuves plus claires de l'effet spécifique du sondage de poussée.

Contraintes juridiques et éthiques

Dans les États qui exigent la divulgation de l'identité de l'appelant ou de l'entité qui paie l'appel, les campagnes peuvent devoir modifier leurs scripts de manière à réduire le pouvoir de persuasion du sondage. La mesure de l'efficacité dans ces conditions modifiées ne peut pas se généraliser dans des environnements illimités. De plus, les comités d'éthique des universités et des établissements de recherche n'approuvent généralement pas les études qui impliquent une communication trompeuse, ce qui limite la disponibilité de recherches universitaires indépendantes sur les effets de sondage.

Si la mesure interne d'une campagne démontre que le sondage est efficace, la campagne peut être tentée d'en accroître l'utilisation. Cette escalade augmente la probabilité d'exposition, ce qui peut entraîner une couverture médiatique négative, des réactions négatives des électeurs, voire des poursuites judiciaires. La mesure efficace, dans ce contexte, comprend une analyse des risques et des avantages qui évalue le gain marginal de soutien des électeurs par rapport au coût potentiel d'un scandale.

La Commission électorale fédérale fournit des directives réglementaires sur les normes de communication que les campagnes devraient revoir en même temps que leurs protocoles de mesure.

Meilleures pratiques pour les campagnes d'évaluation des sondages de masse

En se fondant sur les méthodes et les défis décrits ci-dessus, les campagnes peuvent adopter un ensemble de pratiques exemplaires pour améliorer la fiabilité de leur mesure de l'efficacité des sondages de poussée, qui permettent d'équilibrer la rigueur avec les contraintes pratiques de temps, de budget et de risque juridique.

D'abord, les campagnes devraient intégrer la mesure dans la conception de l'opération de sondage de poussée dès le début. Attendre que les appels soient terminés pour décider comment mesurer les effets produit inévitablement des résultats faibles ou ambigus. Les questions de pré- et post-enquête, de groupes de contrôle et de rappel de messages devraient être planifiées avant le premier appel.

Deuxièmement, les campagnes devraient utiliser plusieurs méthodes de mesure en parallèle. Aucune mesure ne fournit une image complète. La combinaison de l'analyse des changements de réponse avec le suivi des rappels de messages, les mesures de l'engagement et la rétroaction qualitative produit des données convergentes qui sont plus solides aux biais inhérents à une méthode unique.

Troisièmement, les campagnes devraient documenter leur méthodologie de mesure de manière transparente pour une utilisation interne. Une documentation claire permet à l'équipe de campagne de reproduire la mesure dans les cycles futurs, de comparer les races et d'apprendre des succès et des échecs. Elle fournit également une défense si le sondage de poussée est contesté devant le tribunal ou dans les médias.

Quatrièmement, les campagnes devraient investir dans l'intégration des données. Les mesures d'efficacité les plus précieuses proviennent du lien entre les données sur l'exposition aux sondages et les résultats des élections. Une campagne qui sait quels électeurs ont reçu le sondage peut vérifier si ces électeurs étaient plus ou moins susceptibles de se produire et s'ils ont voté pour l'adversaire visé.

Enfin, les campagnes devraient rester informées de l'évolution des règlements et des attitudes du public à l'égard des sondages de poussée. À mesure que les lois sur la protection des données se resserrent et que les électeurs prennent conscience des tactiques trompeuses, l'efficacité des sondages de poussée peut diminuer.

Conclusion

La mesure de l'efficacité des sondages de poussée est une tâche complexe mais essentielle pour les campagnes qui choisissent d'utiliser cet outil controversé. Les mesures utilisées – changement de réponse, taux d'engagement, rappel de messages et résultats subséquents du sondage – fournissent une base quantitative, tandis que des méthodes telles que les conceptions prépost, les groupes de contrôle, l'analyse des données et la rétroaction qualitative ajoutent de la profondeur et de la rigueur causale.

En fin de compte, l'efficacité d'un sondage de poussée n'est pas seulement une question de savoir si le nombre a été déplacé. Il s'agit aussi de savoir si la campagne a compris les risques, géré les implications éthiques et utilisé les données de façon responsable.Les meilleures campagnes utilisent la mesure non seulement pour confirmer leurs stratégies, mais aussi pour apprendre, adapter et décider quand une tactique a dépassé son utilité.

L'Institut de recherche sur les politiques de Northwestern offre une analyse supplémentaire des tactiques de communication politique qui fournit un contexte pour comprendre les stratégies de sondage de poussée.