pauline et françois-maxime ferme
Nombres, faits et tendances façonnant votre monde
Avez-vous fumé au moins 100 cigarettes dans votre vie? Avez-vous pratiqué le yoga au cours de la dernière année? En moyenne, combien d'heures de sommeil obtenez-vous dans une journée?
À la valeur faciale, ces questions ne sont pas directement liées au Themics Center de la recherche sur Pew est la plus attachée à l'étude. Pourtant, nos chercheurs ont posé périodiquement des questions comme celles-ci pendant des années. Pourquoi? Ce sont des exemples de questions d'analyse comparative, que le Centre utilise comme vérifiant pour que nos enquêtes soient exactes.
Pourquoi et comment nous utilisons des questions d'analyse comparative
Déterminer l'exactitude d'une enquête nécessite une sorte de norme objective contre laquelle l'enquête peut être comparée. Dans les sondages électoraux et autres mesures de l'intention de vote, la norme est l'issue des élections. Mais pour des enquêtes qui ne posent pas de questions sur les élections ou le vote, les chercheurs doivent trouver une autre façon de comparer leurs conclusions. Cela se fait souvent avec l'aide d'autres enquêtes - généralement importantes, coûteuses, des enquêtes gouvernementales menées avec une grande attention à la qualité des données.
Les enquêtes sur les centres de recherche de Pew comprennent parfois des questions sur les caractéristiques économiques, démographiques et de mode de vie pour lesquelles des statistiques gouvernementales sont disponibles comme une référence. Cela nous aide non seulement à faire vérifier l'exactitude de nos conclusions, elle nous aide également à étudier comment les enquêtes elles-mêmes peuvent être mieux menées.
Prenons, par exemple, une étude de centre de recherche de pew de l'année dernière qui a examiné les taux de réponse faibles - de nombreux répondants potentiels contactés, mais beaucoup d'entre eux participent - signifient pour l'exactitude des enquêtes téléphoniques. Pour aider à répondre à cette question, l'étude a comparé les résultats d'une enquête téléphonique par le Centre avec celles des enquêtes de référence à haute réponse par le gouvernement fédéral pour voir quoi, le cas échéant, existait des différences.
Le rapport a révélé que les enquêtes sur le Centre de recherche sur les PEW étaient étroitement alignées sur des enquêtes fédérales sur les principaux points de repère démographique et de style de vie. Dans 14 questions sur les traits personnels, la différence moyenne entre l'estimation du gouvernement et l'estimation de l'enquête téléphonique du centre était de 3 points de pourcentage. Les différences sur les questions individuelles variaient de 0 à 8 points. Le plus important était sur une mesure demandant aux répondants sur leur état de santé: le gouvernement a constaté que 59% des personnes ont évalué leur santé comme très bonne ou excellente, tandis que l'enquête téléphonique du Centre a révélé 51%.
Les 13 autres éléments étaient assez proches des repères, la plupart avec des différences de 3 points de pourcentage ou moins, ce qui était généralement dans la marge d'erreur. Ces questions comprenaient des mesures du revenu familial, de l'état de l'emploi, de la taille des ménages, de la citoyenneté, de l'assurance maladie, de la durée de résidence à l'adresse actuelle, du statut matrimonial et de la parentalité, de la fréquence de fumer, du lieu de naissance (parmi les Hispaniques) et d'avoir un permis de conduire. En d'autres termes, sur ces mesures, l'enquête téléphonique à faible réponse a fourni des résultats assez comparables à ceux de l'enquête gouvernementale à haute réponse utilisée comme référence.
Globalement, le rapport a montré que le biais a été introduit dans des enquêtes en raison de faibles taux de réponse restant limité de la portée. Et, de manière critique, le sondage téléphonique estime que l'affiliation des partis, l'idéologie politique et l'affiliation religieuse continuent de bien suivre les estimations des enquêtes de référence à taux de réponse à haute réponse.
Cependant, à mesure que le Centre et les autres chercheurs de l'enquête ont discuté de largement, des enquêtes téléphoniques continuent de produire des biais importants sur des mesures d'engagement civique et, dans une moindre mesure, de l'engagement politique. Cette divergence est probablement en raison des biais de non-réponse - dans lesquels les types de personnes acceptant de participer à des enquêtes sont systématiquement différentes de ceux qui ne peuvent pas être contactés ou refusés de participer. Comme indiqué dans les travaux précédents, les personnes qui répondent aux enquêtes sont probablement les mêmes personnes impliquées dans la vie de la communauté - ce sont des menuisiers et participer à des enquêtes est une sorte de comportement pro-social relatif à d'autres types de comportements tels que le volontariat. Heureusement pour les sondeurs, l'engagement civique n'est pas fortement corrélé aux attitudes politiques ou à la plupart des autres mesures que les chercheurs étudient dans les enquêtes.
Bien que de grandes enquêtes gouvernementales soient généralement considérées comme ayant une qualité de données élevée, elles ne sont pas à l'abri de certains des mêmes problèmes que chaque enquête chercheuse est confrontée. Par exemple, si les enquêtes gouvernementales ont tendance à avoir des taux de réponse très élevés (sur l'ordre de 60% ou plus) par rapport aux sondages d'opinion menés par d'autres organisations, le risque de biais de non-réponse existe toujours.
Les enquêtes gouvernementales, bien que soigneusement développées et testées, sont également toujours soumises à une erreur de mesure, qui peut survenir de la manière dont les questions sont posées (telles que quelles questions viennent immédiatement avant une question particulière, si l'enquête a été menée sur le téléphone ou en ligne. , etc.). Les questionnaires de Centre de recherche sur Pew comprenant des questions d'analyse comparative ne reproduisent pas le contexte exact dans lequel les questions initiales ont été posées, notamment parce que le Centre a tendance à se concentrer sur des sujets différents de ceux des enquêtes de référence. Les repères sont également généralement indisponibles pour des questions sur les attitudes et les comportements que le gouvernement n'étudie pas.
Toutes les enquêtes peuvent également faire face à des problèmes de biais de réponse, y compris un biais de désirabilité sociale, où les répondants peuvent modifier des réponses à certaines questions à se présenter plus favorablement. Ceci est particulièrement un risque lorsqu'un intervieweur pose des questions sensibles: les répondants peuvent, par exemple, de surestimer leur fréquence de vote.
Tous ces facteurs peuvent affecter la comparabilité des questions apparemment identiques posées sur différentes enquêtes, y compris les enquêtes gouvernementales. Cela dit, des questions d'analyse comparative continuent d'être un outil précieux pour les chercheurs de sondage vérifiant et évaluant la précision. Ils sont particulièrement vitaux pour les études du Centre sur la méthodologie de l'enquête.
Kristen Bialik est un ancien assistant de recherche au Centre de recherche sur Pew.
En période d'incertitude, de bonnes décisions exigent de bonnes données. Veuillez soutenir nos recherches avec une contribution financière.
À propos du Centre de recherche sur Pew Centre de recherche sur Pew est un réservoir de fait non étagère qui informe le public sur les problèmes, les attitudes et les tendances qui façonnent le monde. Il mène des sondages d'opinion, des recherches démographiques, une analyse de contenu des médias et une autre recherche sur la science sociale empirique. Le Centre de recherche sur Pew ne prend pas de postes de politique. C'est une filiale des fiducies de charité de pew.
https://www.youtube.com/watch?v=nvBom99Ffl4
Nombres, faits et tendances façonnant votre monde
Avez-vous fumé au moins 100 cigarettes dans votre vie? Avez-vous pratiqué le yoga au cours de la dernière année? En moyenne, combien d'heures de sommeil obtenez-vous dans une journée?
À la valeur faciale, ces questions ne sont pas directement liées au Themics Center de la recherche sur Pew est la plus attachée à l'étude. Pourtant, nos chercheurs ont posé périodiquement des questions comme celles-ci pendant des années. Pourquoi? Ce sont des exemples de questions d'analyse comparative, que le Centre utilise comme vérifiant pour que nos enquêtes soient exactes.
Pourquoi et comment nous utilisons des questions d'analyse comparative
Déterminer l'exactitude d'une enquête nécessite une sorte de norme objective contre laquelle l'enquête peut être comparée. Dans les sondages électoraux et autres mesures de l'intention de vote, la norme est l'issue des élections. Mais pour des enquêtes qui ne posent pas de questions sur les élections ou le vote, les chercheurs doivent trouver une autre façon de comparer leurs conclusions. Cela se fait souvent avec l'aide d'autres enquêtes - généralement importantes, coûteuses, des enquêtes gouvernementales menées avec une grande attention à la qualité des données.
Les enquêtes sur les centres de recherche de Pew comprennent parfois des questions sur les caractéristiques économiques, démographiques et de mode de vie pour lesquelles des statistiques gouvernementales sont disponibles comme une référence. Cela nous aide non seulement à faire vérifier l'exactitude de nos conclusions, elle nous aide également à étudier comment les enquêtes elles-mêmes peuvent être mieux menées.
Prenons, par exemple, une étude de centre de recherche de pew de l'année dernière qui a examiné les taux de réponse faibles - de nombreux répondants potentiels contactés, mais beaucoup d'entre eux participent - signifient pour l'exactitude des enquêtes téléphoniques. Pour aider à répondre à cette question, l'étude a comparé les résultats d'une enquête téléphonique par le Centre avec celles des enquêtes de référence à haute réponse par le gouvernement fédéral pour voir quoi, le cas échéant, existait des différences.
Le rapport a révélé que les enquêtes sur le Centre de recherche sur les PEW étaient étroitement alignées sur des enquêtes fédérales sur les principaux points de repère démographique et de style de vie. Dans 14 questions sur les traits personnels, la différence moyenne entre l'estimation du gouvernement et l'estimation de l'enquête téléphonique du centre était de 3 points de pourcentage. Les différences sur les questions individuelles variaient de 0 à 8 points. Le plus important était sur une mesure demandant aux répondants sur leur état de santé: le gouvernement a constaté que 59% des personnes ont évalué leur santé comme très bonne ou excellente, tandis que l'enquête téléphonique du Centre a révélé 51%.
Les 13 autres éléments étaient assez proches des repères, la plupart avec des différences de 3 points de pourcentage ou moins, ce qui était généralement dans la marge d'erreur. Ces questions comprenaient des mesures du revenu familial, de l'état de l'emploi, de la taille des ménages, de la citoyenneté, de l'assurance maladie, de la durée de résidence à l'adresse actuelle, du statut matrimonial et de la parentalité, de la fréquence de fumer, du lieu de naissance (parmi les Hispaniques) et d'avoir un permis de conduire. En d'autres termes, sur ces mesures, l'enquête téléphonique à faible réponse a fourni des résultats assez comparables à ceux de l'enquête gouvernementale à haute réponse utilisée comme référence.
Globalement, le rapport a montré que le biais a été introduit dans des enquêtes en raison de faibles taux de réponse restant limité de la portée. Et, de manière critique, le sondage téléphonique estime que l'affiliation des partis, l'idéologie politique et l'affiliation religieuse continuent de bien suivre les estimations des enquêtes de référence à taux de réponse à haute réponse.
Cependant, à mesure que le Centre et les autres chercheurs de l'enquête ont discuté de largement, des enquêtes téléphoniques continuent de produire des biais importants sur des mesures d'engagement civique et, dans une moindre mesure, de l'engagement politique. Cette divergence est probablement en raison des biais de non-réponse - dans lesquels les types de personnes acceptant de participer à des enquêtes sont systématiquement différentes de ceux qui ne peuvent pas être contactés ou refusés de participer. Comme indiqué dans les travaux précédents, les personnes qui répondent aux enquêtes sont probablement les mêmes personnes impliquées dans la vie de la communauté - ce sont des menuisiers et participer à des enquêtes est une sorte de comportement pro-social relatif à d'autres types de comportements tels que le volontariat. Heureusement pour les sondeurs, l'engagement civique n'est pas fortement corrélé aux attitudes politiques ou à la plupart des autres mesures que les chercheurs étudient dans les enquêtes.
Bien que de grandes enquêtes gouvernementales soient généralement considérées comme ayant une qualité de données élevée, elles ne sont pas à l'abri de certains des mêmes problèmes que chaque enquête chercheuse est confrontée. Par exemple, si les enquêtes gouvernementales ont tendance à avoir des taux de réponse très élevés (sur l'ordre de 60% ou plus) par rapport aux sondages d'opinion menés par d'autres organisations, le risque de biais de non-réponse existe toujours.
Les enquêtes gouvernementales, bien que soigneusement développées et testées, sont également toujours soumises à une erreur de mesure, qui peut survenir de la manière dont les questions sont posées (telles que quelles questions viennent immédiatement avant une question particulière, si l'enquête a été menée sur le téléphone ou en ligne. , etc.). Les questionnaires de Centre de recherche sur Pew comprenant des questions d'analyse comparative ne reproduisent pas le contexte exact dans lequel les questions initiales ont été posées, notamment parce que le Centre a tendance à se concentrer sur des sujets différents de ceux des enquêtes de référence. Les repères sont également généralement indisponibles pour des questions sur les attitudes et les comportements que le gouvernement n'étudie pas.
Toutes les enquêtes peuvent également faire face à des problèmes de biais de réponse, y compris un biais de désirabilité sociale, où les répondants peuvent modifier des réponses à certaines questions à se présenter plus favorablement. Ceci est particulièrement un risque lorsqu'un intervieweur pose des questions sensibles: les répondants peuvent, par exemple, de surestimer leur fréquence de vote.
Tous ces facteurs peuvent affecter la comparabilité des questions apparemment identiques posées sur différentes enquêtes, y compris les enquêtes gouvernementales. Cela dit, des questions d'analyse comparative continuent d'être un outil précieux pour les chercheurs de sondage vérifiant et évaluant la précision. Ils sont particulièrement vitaux pour les études du Centre sur la méthodologie de l'enquête.
Kristen Bialik est un ancien assistant de recherche au Centre de recherche sur Pew.
En période d'incertitude, de bonnes décisions exigent de bonnes données. Veuillez soutenir nos recherches avec une contribution financière.
À propos du Centre de recherche sur Pew Centre de recherche sur Pew est un réservoir de fait non étagère qui informe le public sur les problèmes, les attitudes et les tendances qui façonnent le monde. Il mène des sondages d'opinion, des recherches démographiques, une analyse de contenu des médias et une autre recherche sur la science sociale empirique. Le Centre de recherche sur Pew ne prend pas de postes de politique. C'est une filiale des fiducies de charité de pew.
https://www.youtube.com/watch?v=nvBom99Ffl4