Why it is easy to write bad questions

Abstract

Es gibt mindestens acht Standards, denen Fragen in Fragebögen entsprechen sollten. Ein Grund dafür, dass Fragen falsch gestellt werden, ist der, dass Forscher einige Standards berücksichtigen, andere aber ignorieren. Ein komplexeres Problem besteht darin, dass eine nach einem Standard gute Frage gemessen an einem anderen Standard eine schlechte Frage sein kann. Darüberhinaus liefern die typischen Evaluierungsverfahren von Pretests und Fragen keine Informationen über alle acht Standards. Wenn über einen Standard keine Informationen vorliegen, kann er leicht vernachlässigt werden. Forscher verwenden zudem gerne Fragen, die schon einmal gestellt wurden, auch wenn die Schwächen dieser Fragen bereits bekannt sind. Dieser Aufsatz stellt die acht Standards vor und diskutiert Konflikte zwischen den einzelnen Standards, Schwierigkeiten bei der Evaluation von Fragen und Implikationen für die Umfrageforschung. (ICEÜbers)

'There are at least 8 standards that survey questions should meet. One reason it is easy to write poor questions is that researchers focus on some standards but ignore others. A more complex problem is posed by the fact that designing a question that is good according to one standard can make it a poor question when judged against another standard. Third, typical pretest and question evaluation procedures do not provide information about all 8 standards. It is easy to ignore a standard if there is no information about it. Finally, researchers often are committed to questions that have been used previously, even when there is evidence that they are flawed. This paper presents the 8 standards, the ways in which they can be in conflict, the challenges of evaluating questions, and the implications for standard survey practice.' (author's abstract)|