30.04.2012 | Respondi
Köln – Die respondi AG erfüllt weiterhin die strengen Kriterien der internationalen Norm ISO 26362. Der europäische Anbieter von Online-Sampling-Dienstleistungen durchlief den Re-Audit des Zertifizierers Austrian Standards Plus erfolgreich. Das gab das Unternehmen heute bekannt. [mehr]
25.04.2012 | Ulrike Preiss
Zertifizierte Online Markt- und Meinungsforschung
Marketagent.com Deutschland GmbH zieht eine erste Bilanz
Marketagent.com wurde im Januar 2010 als erstes deutschsprachiges Markt- und Meinungsforschungsinstitut nach der ISO-Norm 26362 zertifiziert. Das Re-Audit im Januar dieses Jahres bestätigte erneut die Erfüllung der Qualitätsanforderungen. Damit stellt sich das Unternehmen den hohen Qualitätsansprüchen die Kunden heute an online Marktforschung haben.
Wir sehen die die Zertifizierung sowohl als Auszeichnung als auch als Auftrag die Qualität unserer Technologie und Methodik sicherzustellen und andererseits die Prozesse kontinuierlich weiter zu entwickeln. Das Re-Audit im Januar, war für uns somit eine logische Konsequenz unsere Innovationen erneut auf den Prüfstand zu stellen. Das Ergebnis bestätigt uns, dass wir auch weiterhin die Qualitätsanforderungen erfüllen.
Wir haben uns 2010 für die Zertifizierung entschieden, weil wir festgestellt haben, dass zwar für immer mehr quantitativen Studien Online Access Panels genutzt werden, dabei die Qualitätsstandards die einzelnen Anbieter an sich erheben jedoch sehr unterschiedlich sind, was unweigerlich Qualitätsprobleme in sich birgt, und damit zu einer Verunsicherung der Kunden führt.
Für uns ist es wichtig uns positiv vom Markt zu differenzieren. Die ISO-Norm, ist das einzige neutrale Zertifizierungsprogramm, das einheitliche Normen im nationalen und internationalen Umfeld schafft und damit zu mehr Transparenz führt. Die Rückmeldungen unserer Kunden zeigen uns, dass die ISO-Zertifizierung Vertrauen in unser Unternehmen als auch die Qualität unserer Ergebnisse schafft.
Notwendig für die Zertifizierung und die regelmäßigen Re-Audits ist eine ständige Dokumentation unserer Arbeit. Man muss sich dies vorstellen wie eine Checkliste mit deren Hilfe jeder einzelne Schritt unserer Arbeit überprüft und dokumentiert wird. Auf den ersten Blick mag dies unnötig erscheinen, geht man doch auch nicht jeden Morgen um sein Auto, um zu prüfen ob Blinker und Bremslichter noch funktionieren. Viel eher gehen wir ja alle einfach davon aus, dass dem so ist. Und wissen gleichzeitig, dass dies ein (gefährlicher) Trugschluss sein kann.
So war auch eins unserer Key Learnings, das die fortlaufende Qualitätskontrolle Fehlerquellen eliminieren konnte und wir in Folge die Qualität unserer online Panels deutlich gesteigert haben.
Die aus der Dokumentation generierten Metadaten geben uns zudem einen exakten Rückschluss auf die Abhängigkeit zwischen Fragebogenlänge, Anzahl offener Nennungen, Umfang der Matrixfragen zu der Teilnahmewilligkeit der Panelisten und damit auch der Qualität der Antworten. Dieses Wissen ermöglicht es uns bereits bei der Erstellung des Fragebogens auf die maßgeblichen Stellgrößen zu achten, um am Ende qualitativ hohe Ergebnisse liefern zu können.
Unser Fazit der vergangenen 2 Jahre lautet daher, dass wir zwar einen höheren Dokumentations-Aufwand haben, in Folge aber mögliche Fehlerquellen deutlich reduzieren konnten. Wir haben so durch die ISO-Zertifizierung in jedem Fall Neugeschäft gewinnen können. Was uns einmal mehr darin bestärkt die ISO-Vorgaben nicht als Aufwand zu sehen, sondern als Auftrag auch weiterhin unsere Arbeit auf den Prüfstand zu stellen!
München, am 12. April 2012
Bei Rückfragen wenden Sie sich bitte an:
Marketagent.com online Deutschland GmbH
Ulrike Preiss
Market Research Director
Grünbauerstraße 9
D-81479 München, Germany
u.preiss@marketagent.com
Tel.: +49 89 75 9000 63
Fax: +49 89 74 4953 29
25.04.2012 | Ulrike Preiss
Audio-Unterstützung von Online-Fragebögen steigert Interviewqualität
Im Rahmen eines kürzlich durchgeführten Kooperationsprojekts widmete sich Marketagent.com, eines der führenden Full-Service Online Markt- und Meinungsforschungsinstitute im deutschsprachigen Raum, gemeinsam mit der Kommunikationsagentur Putz & Stingl einem groß angelegten Methodenexperiment zur Audio-Unterstützung von Online-Fragebögen. Im Rahmen des Pilotprojektes wurden drei Online-Studien mit völlig identischem Fragenprogramm bzw. gleichen Stichproben (einmal ohne Vertonung bzw. die anderen beiden mit Audio-Unterstützung mit männlicher bzw. weiblicher Stimme) erhoben. Das Methodenexperiment bringt Licht- und Schattenseiten der Audio-Unterstützung zu Tage: Die Vertonung von Online-Fragebögen ist durchwegs ein interessantes Feature, das – behutsam eingesetzt und wohldosiert – die Interviewqualität steigern kann.
Ulrike Preiss, Market Research Director von Marketagent.com, über die Beweggründe für dieses Pilotprojekt: „Die Online Befragung ist im Prinzip eine schriftliche Befragung, die auf weiten Strecken denselben Gesetzmäßigkeiten wie paper & pencil Erhebungen unterliegt. Die Kommunikation mit den Respondenten erfolgt bei der Marktforschung im Web ausschließlich über das Befragungsmedium selbst. Sprich: Die einzige Motivation geht vom Online Fragebogen aus.“ Dieser muss somit alle, für die Umfrage-Teilnehmer zur Beantwortung nötigen Informationen enthalten. Dadurch nimmt mit der Komplexität der Fragestellung natürlich auch der Umfang der Erläuterungs- und Erklärungstexte zu. „Dies führt uns zur Hypothese“, so Preiss weiter, „dass mit zunehmender Anforderung an den Umfrage-Teilnehmer auch der Bedarf an verbaler Unterstützung während des Interviews steigt. Die professionelle Vertonung von Online Fragebögen ist eine gute Möglichkeit, die Befragungssituation im WWW einfacher und verständlicher zu machen und so die Beantwortungssituation für die Respondenten angenehmer zu gestalten.“
Marketagent.com führte im Rahmen des Methodenexperiments zeitgleich drei Online-Studien mit völlig identischem Fragenprogramm bzw. gleichen Stichproben mit insgesamt mehr als 1.500 Online Interviews durch. Eine Befragung wurde ohne Vertonung, die anderen beiden mit Audio-Unterstützung – einmal mit männlicher und einmal mit weiblicher Stimme – erhoben. Die Vertonung der Online Fragebögen erfolgte durch die Kommunikationsagentur Putz & Stingl. Im Anschluss an die jeweilige Umfrage wurden den Teilnehmern noch ein paar Fragen zum Erleben der Interviewsituation gestellt. Fazit: Das Methodenexperiment bringt Licht- und Schattenseiten der Audio-Unterstützung zu Tage.
Positiver Effekt auf die Interviewqualität bei gleichzeitiger Gefahr der Langatmigkeit
Zu den Vorzügen der Audio-Unterstützung zählt zweifelsohne der positive Effekt auf die Interviewqualität. Im Marketagent.com System werden alle Interviews automatisiert, über einen komplexen Algorithmus, validiert. Dieser Kontrollmechanismus basiert auf den fünf Säulen Speeding, Missings bei offenen Fragen, Straightlining (Muster-Klicker bei Matrix-Fragen), Cheating (False-Answers) und Inconsistency (Widersprüchlichkeit zu den Profil-Daten). Die Bearbeitungszeit gilt als wichtiges Qualitätskriterium bei der Feldarbeit. Diese beläuft sich bei den beiden vertonten Online Fragebögen deutlich höher als bei der Vergleichsstudie ohne Audio-Unterstützung. Die vertonten Befragungen erreichen somit eine bessere Interview-Klassifizierung, was mit einer höheren Interviewqualität gleichzusetzen ist.
Gleichzeitig birgt die Audio-Unterstützung die Gefahr der Langatmigkeit. „Der Effekt des unsichtbaren, unterstützenden Interviewers kann bei der Forschung per Mausklick bei einer weitschweifenden und wortreichen Vertonung kippen und ins Negative umschwenken“, erklärt Ulrike Preiss. Speziell bei Fragestellungen, deren Aufgabenstellung sehr schnell bzw. sogar auf einen Blick erfassbar ist, droht die Gefahr, dass der Ton die eigene Lesedauer überschreitet und die Bearbeitungszeit künstlich nach oben schraubt. Dies kann dazu führen, dass sich die Respondenten in der Befragungssituation aufgehalten, mitunter gelangweilt oder im schlimmsten Fall gar genervt fühlen. Im Rahmen des Methodenexperiments macht sich der erhöhte Zeitbedarf durch die Audio-Unterstützung beispielsweise in der subjektiven Einschätzung der Interview-Länge durch die Umfrage-Teilnehmer („Länge der Umfrage war zu lang“: CAWI mit Audio-Unterstützung 16,7%; ohne Audio-Unterstützung: 7,3%) sowie in der durchschnittlich gemessenen Beantwortungszeit bemerkbar.
Behutsamer Einsatz macht Audio-Unterstützung zu interessantem Feature
Resümierend kann festgehalten werden, dass die Audio-Unterstützung von Online-Fragebögen durchwegs ein interessantes Feature ist, welches – behutsam eingesetzt und wohldosiert – die Interviewqualität steigern kann, sofern sich die Respondenten durch die Vertonung in der Befragungssituation nicht aufgehalten fühlen. Zudem wirkt die Audio-Unterstützung des Online Fragebogens aus Sicht der Respondenten moderner, innovativer und unterhaltsamer. So bewerten zweidrittel der Umfrage-Teilnehmer die Befragung mit Vertonung als innovativ (Top-2-Box: 67%, 5-stufige Skala), während nur knapp über die Hälfte der Umfrage ohne Vertonung dieses Attribut zuschreibt (54%). Ein ähnliches Ergebnis zeigt auch die Analyse des Faktors „Modernität“. Und auch ein gewisser Unterhaltungswert wird tendenziell stärker dem Online Fragebogen mit dem gesprochenen Text zugeschrieben (54% vs. 50%).
Ulrike Preiss fasst die wesentlichen Erkenntnisse des Methodenexperiments wie folgt zusammen: „Die Online Marktforschung kann von einer Audio-Unterstützung profitieren, wenn sie dadurch einen Mehrwert für die Umfrage-Teilnehmer schafft. Gleichzeitig muss sie sich aber der Einschränkung hingeben, dass dieses Feature nicht für jedes Studiendesign bzw. alle Fragetypen geeignet ist. Auf jeden Fall ist ein wohldosierter Einsatz empfehlenswert, der verhindert, dass die Respondenten durch die Vertonung in der Bearbeitungsdauer gebremst werden.“
München, am 24. April 2012
Rückfragehinweis:
Marketagent.com Deutschland GmbH
Grünbauerstraße 9
81479 München
Deutschland
tel. +49 (0)89 759000 63
