Questionnaire Pretesting Methods

Questionnaire Pretesting Methods

Depuis 20 ans, il y a eu un accroissement significatif dans l’utilisation de formes nouvelles de pré-tests de questionnaires. Diverses techniques d’évaluations ont été utilisées pour signaler les points forts et faibles de ces méthodes. Des études limitées ont été faites sur l’efficacité des intervi...

Cijeli opis

Spremljeno u:
Bibliografski detalji
Izdano u:URI:https://journals.openedition.org/bms,
Glavni autori: Rothgeb, Jennifer M., Willis, Gordon, Forsyth, Barbara
Format: Article ou chapitre numérique
Jezik:Anglais
Izdano: Bulletin de méthodologie sociologique 2014
Teme:
Méthodes de pré-test
Evaluation
Interview cognitif
Revue par experts
Système formel d’évaluation cognitive
Tests de questions
Pretesting Methods Evaluation
Cognitive Interviewing
Expert Review
Cognitive Appraisal System
Question Testing
Online pristup:Accès Université d'Orléans et IFPM
id openedition-oai:revues.org:bms_348
record_format openedition
spelling openedition-oai:revues.org:bms_348 en https://journals.openedition.org/bms/348 2014-01-29T01:00:00Z info:eu-repo/semantics/openAccess article info:eu-repo/semantics/article urn:handle:20.500.13089/dav3 All rights reserved Questionnaire Pretesting Methods Bulletin de méthodologie sociologique Association internationale de méthodologie sociologique info:eu-repo/semantics/reference/issn/2070-2779 info:eu-repo/semantics/reference/issn/0759-1063 URI:https://journals.openedition.org/bms Rothgeb, Jennifer M. Willis, Gordon Forsyth, Barbara Méthodes de pré-test Evaluation Interview cognitif Revue par experts Système formel d’évaluation cognitive Tests de questions Pretesting Methods Evaluation Cognitive Interviewing Expert Review Cognitive Appraisal System Question Testing Depuis 20 ans, il y a eu un accroissement significatif dans l’utilisation de formes nouvelles de pré-tests de questionnaires. Diverses techniques d’évaluations ont été utilisées pour signaler les points forts et faibles de ces méthodes. Des études limitées ont été faites sur l’efficacité des interviews cognitifs dans la résolution des problèmes de questionnaire. Mais ces études n’ont pas distingué les effets des méthodes des effets de l’organisation. L’objectif de cette recherche est de déterminer comment des méthodes diverses utilisées par trois instituts d’enquête par questionnaire (U.S. Census Bureau, Westat Inc. et Research Triangle Institute) arrivent à prédire les problèmes. Pour cette recherche, plusieurs chercheurs dans chacun des instituts ont utilisé trois méthodes de pré-test (revue informelle par experts, un système formel d’évaluation cognitive, et l’interview cognitif) sur trois questionnaires dans une expérience tridimensionnelle de tris multiples. Une classification est faite des problèmes identifiés par les méthodes et ces problèmes sont comparés les uns aux autres. Nous calculons le degré d’accord entre les instituts et entre les méthodes. Nous concluons sur l’utilité et l’adéquation de chaque méthode, et le degré d’accord et le caractère systématique de ces résultats. During the past 20 years there has been a significant increase in the use of novel forms of questionnaire pretesting. Various evaluation techniques have been evaluated and the strengths and weaknesses identified. Limited research has been conducted about the effectiveness of cognitive interviews in ameliorating questionnaire problems. However, this research has not allowed for separating effects of pretesting method from effects of the organization applying these methods. The objective of our research was to determine how various methods, applied across three survey research organizations (The Census Bureau, Westat, Inc., and Research Triangle Institute), were found to predict problems. For this research, multiple researchers within each organization applied three pretesting methods (informal expert review, a formal cognitive appraisal system, and cognitive interviewing) to three questionnaires, according to a Latin Square-based experimental design. A classification scheme was developed to code problems identified through all methods. The problems detected by each pretesting method and organization were quantitatively compared. We will present results about the degree of agreement between organizations and between methods. We will make conclusions about the utility and appropriateness of each method, and the degree to which the results are common and systematic, as opposed to haphazard and organization-specific.
collection OpenEdition Journal
language Anglais
format Article ou chapitre numérique
building 0/Bibliothèque numérique/
1/Bibliothèque numérique/OpenEdition Journals/
topic Méthodes de pré-test
Evaluation
Interview cognitif
Revue par experts
Système formel d’évaluation cognitive
Tests de questions
Pretesting Methods Evaluation
Cognitive Interviewing
Expert Review
Cognitive Appraisal System
Question Testing
spellingShingle Méthodes de pré-test
Evaluation
Interview cognitif
Revue par experts
Système formel d’évaluation cognitive
Tests de questions
Pretesting Methods Evaluation
Cognitive Interviewing
Expert Review
Cognitive Appraisal System
Question Testing
Rothgeb, Jennifer M.
Willis, Gordon
Forsyth, Barbara
Questionnaire Pretesting Methods
description Depuis 20 ans, il y a eu un accroissement significatif dans l’utilisation de formes nouvelles de pré-tests de questionnaires. Diverses techniques d’évaluations ont été utilisées pour signaler les points forts et faibles de ces méthodes. Des études limitées ont été faites sur l’efficacité des interviews cognitifs dans la résolution des problèmes de questionnaire. Mais ces études n’ont pas distingué les effets des méthodes des effets de l’organisation. L’objectif de cette recherche est de déterminer comment des méthodes diverses utilisées par trois instituts d’enquête par questionnaire (U.S. Census Bureau, Westat Inc. et Research Triangle Institute) arrivent à prédire les problèmes. Pour cette recherche, plusieurs chercheurs dans chacun des instituts ont utilisé trois méthodes de pré-test (revue informelle par experts, un système formel d’évaluation cognitive, et l’interview cognitif) sur trois questionnaires dans une expérience tridimensionnelle de tris multiples. Une classification est faite des problèmes identifiés par les méthodes et ces problèmes sont comparés les uns aux autres. Nous calculons le degré d’accord entre les instituts et entre les méthodes. Nous concluons sur l’utilité et l’adéquation de chaque méthode, et le degré d’accord et le caractère systématique de ces résultats.
author Rothgeb, Jennifer M.
Willis, Gordon
Forsyth, Barbara
author_facet Rothgeb, Jennifer M.
Willis, Gordon
Forsyth, Barbara
author_sort Rothgeb, Jennifer M.
title Questionnaire Pretesting Methods
title_short Questionnaire Pretesting Methods
title_full Questionnaire Pretesting Methods
title_fullStr Questionnaire Pretesting Methods
title_full_unstemmed Questionnaire Pretesting Methods
title_sort questionnaire pretesting methods
publisher Bulletin de méthodologie sociologique
publishDate 2014
container_title URI:https://journals.openedition.org/bms
url https://ezproxy.univ-orleans.fr/login?url=https://journals.openedition.org/bms/348
_version_ 1877243300215259136

Similar Items