home
|
Differences and similarities between visual analogue scales, slider scales and categorical scales in Web surveys
Frederik Funke & Ulf-Dietrich Reips
Poster presented at the 10th annual
General Online Research Tagung (GOR) conference of the
German Society for Online Research (D.G.O.F.)
March 10-12, 2008 in Hamburg (Germany)
Abstract: Differences and Similarities Between Visual Analogue Scales, Slider Scales and Categorical Scales in Web Surveys
We conducted a Web experiment to compare three scales for answering closed-ended questions in self-administered questionnaires: a
visual analogue scale (VAS), a 5 point slider scale (SLS) and a 5 point radio button scale (RBS).
VAS (a plain horizontal line with both ends anchored) produce data on the superior level of an interval scale (Reips & Funke, in press).
Nevertheless, by far the most frequently used type of scale is the RBS, even though it only provides a fixed number of discrete
categories, resulting in ordinal data only. An in-between answer format is the SLS, it is visually similar to the VAS, but functionally similar
to the RBS. On a horizontal line respondents use a slider to choose between a discrete number of options.
In our Web experiment we evaluated the influence of these three scales on the collection of data and their quality. Respondents were
randomly sent to one of the three scales.
We examined various indicators for data quality: (1) regarding dropout, VAS performed better than SLS and RBS. (2) Item nonresponse
was lowest with RBS, followed by VAS and SLS. (3) Response times were similar for SLS and RBS, but higher with VAS. (4) Regarding
distribution of values and measures of central tendency the following picture appeared: answers with SLS and RBS are more similar to
one another than they are in comparison to VAS.
Conclusion: despite some overlap, it makes a difference if VAS, SLS or RBS are used. Data and paradata mostly follow function rather
than appearance.
Zusammenfassung: Ein Vergleich von visuellen Analogskalen, Sliderskalen und Kategorialskalen in Webbefragungen
In einem Webexperiment verglichen wir drei Skalen für das Beantworten geschlossener Fragen in selbstadministrierten Untersuchungen:
Eine visuelle Analogskala (VAS), eine 5-stufige Schiebereglerskala (SRS) und eine 5-stufige Radiobutton-Skala (RBS).
Mit VAS (eine schlichte horizontale Linie, deren Enden mit Ankerreizen versehen sind) lassen sich Messungen mit Daten auf
Intervallskalenniveau durchführen (Reips & Funke, in Druck). Trotzdem sind RBS der mit Abstand am häufigsten eingesetzte Skalentyp,
obwohl sie lediglich über eine feste Anzahl diskreter Kategorien verfügt, was sich darin niederschlägt, dass mit ihr erhobene Daten nur
Ordinalskalenniveau erreichen. Zwischen diesen beiden Antwortformaten finden sich SRS. Sie ähneln vom Aussehen her VAS, von der
Funktionalität her sind sie RBS ähnlich: Auf einer horizontalen Linie kann der Befragte mittels eines Schiebereglers zwischen einer
diskreten Anzahl von Kategorien wählen.
In unserem Webexperiment untersuchten wir den Einfluss der drei Skalen auf Datenerhebung und Datengüte. Dazu erhielten die
Befragten zufällig eines der drei Skalenformate.
Wir berichten den Einfluss auf verschiedene Indikatoren für Datenqualität: (1) Hinsichtlich der Abbruchwahrscheinlichkeit schnitten VAS
besser ab als SRS und RBS. (2) Der Anteil der Antwortverweigerungen war hingegen mit RBS am geringsten, gefolgt von VAS und SRS.
(3) Bei den Antwortzeiten beobachteten wir keinen Unterschied zwischen SRS und RBS, jedoch höhere Werte bei VAS. (4) Hinsichtlich
der Verteilung der Werte und der den Maßen der zentralen Tendenz ergab sich folgendes Bild: Antworten mit SRS und RBS sind sich
ähnlicher als im jeweiligen Vergleich mit VAS.
Schlussfolgerung: Trotz einiger Überschneidungen macht es einen Unterschied, ob VAS, SRS oder RBS genutzt werden. Daten und
Paradaten zeigen, dass die Funktionsweise und nicht das Erscheinungsbild den entscheidenden Ausschlag gibt.
|