Suchergebnisse

Es gibt mindestens acht Standards, denen Fragen in Fragebögen entsprechen sollten. Ein Grund dafür, dass Fragen falsch gestellt werden, ist der, dass Forscher einige Standards berücksichtigen, andere aber ignorieren. Ein komplexeres Problem besteht darin, dass eine nach einem Standard gute Frage gemessen an einem anderen Standard eine schlechte Frage sein kann. Darüberhinaus liefern die typischen Evaluierungsverfahren von Pretests und Fragen keine Informationen über alle acht Standards. Wenn über einen Standard keine Informationen vorliegen, kann er leicht vernachlässigt werden. Forscher verwenden zudem gerne Fragen, die schon einmal gestellt wurden, auch wenn die Schwächen dieser Fragen bereits bekannt sind. Dieser Aufsatz stellt die acht Standards vor und diskutiert Konflikte zwischen den einzelnen Standards, Schwierigkeiten bei der Evaluation von Fragen und Implikationen für die Umfrageforschung. (ICEÜbers)

Der Autor diskutiert forschungspraktische Probleme, die sich im Rahmen der kognitiven Testung bei Umfragen ergeben, z.B. das Problem, dass alternative Formulierungen von gleichen Fragestellungen zu unterschiedlichen Bewertungen der Daten führen können. Er verdeutlicht anhand von sechs Tabellen die Unterschiede bei den erhobenen Daten, die aus zwei Forschungsprojekten stammen, in denen sehr ähnliche Befragungsmethoden eingesetzt worden sind. (ICI)

Der Autor untersucht die Rahmenbedingungen und Voraussetzungen für weitere Diskussionen zur kognitiven Befragungsmethode. Er gibt zunächst einen Überblick über die Entstehung dieser empirischen Forschungsmethode in den 1980er Jahren in den USA und fragt nach möglichen Weiterentwicklungen und Anwendungsbereichen in der Zukunft. Er zeigt, dass die beiden hauptsächlichen Paradigmen der kognitiven Befragung zum einen auf psychologische Labormethoden zurückgehen und zum anderen in der Tradition einer "intensiven Befragung" verwurzelt sind. Vor diesem Hintergrund kann die Anwendung der kognitiven Befragungsmethode in der Forschungspraxis kritisch bewertet werden, wie der Autor z.B. mit Blick auf die Rolle des Interviewers, der Auswahl der Befragten, der Verfahren der Datengewinnung und der Evaluation der erhobenen Daten näher zeigt. (ICI)

"This volume, the ninth in the ZUMA-Nachrichten Spezial series on methodological issues in empirical social science research takes up issues of question and questionnaire evaluation. The papers in this volume discuss practical as well as theoretical aspects of questionnaire evaluation. All contributions are based on presentations made at the fourth QUEST (Questionnaire Evaluation Standards) conference which took place from October 21-23, 2003 at ZUMA in Mannheim. There were 26 attendees from 9 countries representing 14 organizations: Bureau of Labor Statistics, USA, Center for Survey Research, University of Massachusetts, USA, Institut für Demoskopie Allensbach, Germany, National Center for Health Statistics, USA, National Center for Social Rerearch, U.K., Office of National Statistics, U.K., Statistics Canada, Statistics Finland, Statistics Netherlands, Statistics New Zealand, Statistics Norway, Statistics Sweden, U.S. Census Bureau, ZUMA, Germany." (author's abstract)

In der "Statistics Netherlands" (SN) wurde im Jahr 2002 ein Forschungsprojekt ins Leben gerufen, um die Codierung von Antworten auf offene Fragen bei Interviews zu verbessern. Im Ergebnis wurde ein Codierungsprogramm entwickelt, das bereits in den Fragen integriert ist und somit für den Interviewer zu einer Arbeitserleichterung in der computergestützten Befragung führt. Diese Verbesserungen wurden im April 2003 empirisch getestet, wobei die Interaktion zwischen dem Interviewer und dem Antwortenden sowie zwischen dem Interviewer und den neuen Fragen im Vordergrund standen. Im vorliegenden Beitrag werden die angewandten Methoden und Ergebnisse des Tests näher vorgestellt und diskutiert. (ICI)

Die Autorin stellt einige Forschungsansätze aus dem U.S. Census Bureau vor, die sich auf den Pretest von Umfragen und die Evaluation der eingesetzten Erhebungsinstrumente beziehen. Von den Mitarbeitern der "Statistical Research Division" (SRD) wurde im Jahr 1998 insbesondere vorgeschlagen, einen unabhängigen demographischen Haushaltssurvey einzurichten, der ausschließlich Forschungszwecken dienen sollte. Die Autorin berichtet von Erfahrungen mit diesem Umfrageprojekt aus den Jahren 1999 und 2000, das als "Questionnaire Design Experimental Research Survey" (QDERS) bezeichnet wird. Sie stellt die besonderen methodischen Leistungen des Projekts heraus und gibt einen Überblick über vorliegende Veröffentlichungen und Tagungsberichte. (ICI)

Der Autor berichtet von Erfahrungen, die die "Statistics Norway" mit dem von EUROSTAT gegründeten Forschungsprojekt "Developing Methods for Assessing Perceived Response Burden" (PRB) gesammelt hat. Ziel des Projekts war erstens die Frage, was die Antwortenden von Unternehmensbefragungen als beschwerlich wahrnehmen, und zweitens, geeignete Fragen zu entwickeln, die einem erschwerten Antwortverhalten entgegenwirken. Es wurden hierzu Gruppendiskussionen mit einigen Befragten aus Unternehmen der Dienstleistungsbranche in der Region Oslo durchgeführt, deren Ergebnisse der Autor näher vorstellt. Er konzentriert sich exemplarisch auf zwei Fokusgruppen und erörtert einige Aspekte des Forschungsdesigns des Befragungsinstruments. (ICI)

Die Autorin beschreibt die wesentlichen Kritikpunkte von finnischen Sozialwissenschaftlern an der kognitiven Theorie und insbesondere ihrer Testung in der Forschungspraxis. Sie fasst die vorliegenden Kommentare zur kognitiven Befragungsmethode überblicksartig zusammen und ordnet sie in den Kontext und die Diskussionsbeiträge zum vergangenen QUEST-Workshop ein. Sie stellt ferner anhand einiger Beispiele die Testverfahren und das Forschungsdesign der "Finland's Social Statistics" vor und zeigt, inwiefern die verwandten Methoden für verschiedene Nutzergruppen in Europa von Interesse sein können. (ICI)

Der Beitrag gibt einen Überblick über die Nutzung der "Statistics New Zealand" (SNZ) für Haushalts-, Unternehmens- und Wirtschaftsbefragungen. Es werden die unterschiedlichen Pretest-Methoden beschrieben, welche zur Bewertung der Fragen und Fragebögen eingesetzt werden, z.B. Begriffstest, kognitiver Test, Nutzbarkeitstest, Übersetzungstest und Felderprobung. Anhand von Beispielen wird gezeigt, wie diese Methoden in der Forschungspraxis zusammenwirken und einander ergänzen. (ICI)

In Zeiten abnehmender Ressourcen ist die Effizienz von statistischen Informationen von herausragender Bedeutung. Die "Statistics Netherlands" (SN) haben daher die "Structural Business Statistics" (SBS) mit verändertem Design überarbeitet und im Jahr 1998 ein Projekt mit dem Ziel begonnen, die Datengewinnung, Datenaufbereitung und Veröffentlichung der SBS zu integrieren und zu standardisieren. Dieses Projekt, das mittlerweile unter der Bezeichnung IMPECT ("Implementation of the Economical Transformation Process") bekannt ist, hat sich in jüngster Zeit vor allem der Evaluation und Verbesserung der Inhalte von Befragungen gewidmet. Im vorliegenden Beitrag wird ein Überblick über die Ziele und Strategien einer geplanten Evaluation von fast 200 Fragebögen unterschiedlicher Wirtschaftsbranchen gegeben. (ICI)

Im britischen "Office for National Statistics" (ONS) wurden in den vergangenen zwei Jahren verschiedene Methoden zur Verbesserung der Erhebungsinstrumente bei Unternehmensbefragungen entwickelt und erprobt. Der vorliegende Beitrag berichtet über die Merkmale der Instrumente zur Datengewinnung bei Unternehmensumfragen im ONS, über Weiterentwicklungen und Verbesserungen sowie über die Rahmenbedingungen einer Bewertung der eingesetzten Erhebungsinstrumente. (ICI)

Die Frage, welche Vorgehensweisen und Methoden bei kognitiven Tests im Rahmen von Befragungen am geeignetsten sind, beschäftigt inzwischen zahlreiche Sozialforscher auf der ganzen Welt und die empirischen Forschungen in diesem Bereich haben gerade erst begonnen. Diese Frage ist nach Meinung der Autorin auch nicht einfach zu beantworten, da es keinen alleinigen richtigen Weg gibt, um eine Erhebung in kognitiver Hinsicht zu evaluieren. Sie berichtet vor diesem Hintergrund von den Ergebnissen eines kleinen Experiments, in welchem die Unterschiede zwischen kognitiven Interviews am Telefon und in einer face-to-face-Situation untersucht worden sind. Im Vordergrund steht die Frage, wie telefonische kognitive Interviews mit einer nicht ausgewählten Untersuchungspopulation durchgeführt werden können und inwieweit die Struktur des Befragungsprotokolls durch den Einsatz unterschiedlicher Methoden verändert bzw. angepasst werden muss. (ICI)

Die Autorin untersucht die Bedeutung von Kultur, Sprache und sozioökonomischen Faktoren im Frage-Antwort-Prozess bei allgemeinen Gesundheitssurveys. Sie stellt hierzu zwei Forschungsprojekte mit kognitiven Interviews vor, die zum einen in der ländlichen Region des Mississippi im Januar 2002 und zum anderen in Hyattsville und Northwest Ohio im Sommer 2003 durchgeführt worden sind. Sie verdeutlicht anhand von Beispielen, dass psychologische Modelle des Frage-Antwort-Prozesses nicht vollständig umfassend sind, dass der soziale Kontext den Prozess beeinflusst, in welchem der Teilnehmer auf eine bestimmte Frage antwortet und dass dies Auswirkungen auf die Qualität und die Nutzbarkeit der Erhebungsdaten hat. Die Autorin möchte mit ihren Ausführungen insbesondere eine größere Aufmerksamkeit auf den Zusammenhang zwischen Antwortfehler und der sozialen Lage des Befragten lenken. (ICI)