Evaluierung von Fragen und Erhebungsinstrumenten
Vorstellung der AG
Die PUMA-Arbeitsgruppe wird von Kathrin Gärtner (Statistik Austria) koordiniert. Beteiligt sind darüber hinaus:
Eduard Brandstätter (Johannes Kepler Universität Linz)
Ivo Ponocny (MODUL University)
Nina Djahangiri (Statistik Austria)
Nadja Lamei (Statistik Austria)
Marc Plate (Statistik Austria)
Brigitte Salfinger-Pilz (Statistik Austria)
Matthias Till (Statistik Austria)
David Johann (Universität Wien)
Kurzbeschreibung
Die AG wird sich mit folgenden zentralen Fragestellungen und Punkten beschäftigen:
- Was ist der praktische Nutzen von systematisiertem Pretesten?
- Welche Pretest-Möglichkeiten gibt es?
- Was sind die Vor- und Nachteile dieser Testverfahren?
- Wie würde ein „Gold-Standard“ für Testverfahren aussehen?
- Nach welchen Kriterien ist zwischen alternativen Frageformulierungen zu entscheiden?
- Wie können durch Pretests objektivierbare Qualitätsindikatoren für Fragen bzw. Alternativvarianten ermittelt werden?
- Wie können Testroutinen entwickelt und der Aufwand für Tests minimiert werden?
- Wie können Fehler und Erhebungskosten durch Testverfahren minimiert werden?
Ziele/Objectives der AG
Ziel 1: Methodeninventar für die Evaluierung von Fragen
- Dokumentation gängiger Testverfahren
- Handlungsleitfaden mit Empfehlungen für Pretests
- Anwendungsorientierte Vermittlung
Ziel 2: Durchführung von Pilottests
- praktische Anpassung der Teststrategie (rasch, günstig, zuverlässig)
- Bereitstellung von Kapazitäten für die Durchführung
- Ableitung von Entscheidungen für die Formulierung von Fragen in konkreten Erhebungen (IKT, EU-SILC)
Ziel 3: Aufbau eines Kataloges getesteter Fragen
- vollständige Erfassung getesteter Fragen der Sozialstatistik
- Modus zur laufenden Ergänzung von Fragen zu allen Bereichen der Lebensqualität
- Veröffentlichung und Verbreitung der getesteten Fragen
