CONSULTING.de
PERSONALintern.de
Digitale Transformation Digitale Transformation und Kundenerlebnis: Ein Blick auf verschiedene Branchen
veröffentlicht am
- marktforschung.de
- Marktforschung
- Wie die Demokratisierung der Marktforschung die Qualitätswahrnehmung beeinflusst
Birgit Maier, mafokonzept Wie die Demokratisierung der Marktforschung die Qualitätswahrnehmung beeinflusst
veröffentlicht am
// /re
Wie wird die Qualität von Marktforschung wahrgenommen? Ein kritischer Blick auf DIY-Studien ist wichtig, um die Qualität sicherzustellen. (Bild: picture-alliance / dpa/dpaweb | epa Martial Trezzini)
Nach den Anfängen der Online-Forschung in den Nullerjahren und dem Aufkommen von Big Data ungefähr zehn Jahre später, erlebt die Branche mit DIY und Automatisierung die dritte Welle der großen Veränderungen in diesem noch jungen Jahrtausend. Und die Entwicklung geht weiter, ohne dass eine Stelle in der Marktforschung gestrichen wurde. Denn die Veränderungen sind selten Umbrüche, das Neue steht neben dem Alten und ergänzt es oft. Das sieht man recht gut an der vierten bahnbrechenden Veränderung: die Digitalisierung der qualitativen Forschung. Teststudios, die früher Tempel der Face-to-face-Gruppendiskussionen waren, führen diese nun online durch, und sind als Rekrutierungs- und Organisations-Spezialisten so gefragt wie zuvor.
Ich persönlich begrüße diese Entwicklungen. Unsere Welt ist zwar komplexer, aber auch unendlich viel spannender geworden.
Der 125ste Pretest? Kann schnell und kostengünstig über die DIY-Plattform mit angeschlossenem Panel abgewickelt werden. Ein anlassbezogener Net Promoter Score? Erledigt das interne CX System und liefert die Benchmarks gleich mit dazu. Dabei profitieren alle von standardisierten und vielfach erprobten Fragebögen und leicht erreichbaren Zielgruppen. So verstanden nehmen DIY und Automatisierung uns viel Arbeit ab, so dass wir mehr Zeit für Datenintegration, Analyse und Interpretation haben.
Forschung kann jeder – oder doch nicht?
Was mich jedoch stört, ist dass der „Forscher“ aus unserer Berufsbezeichnung zunehmend verschwindet. Dieser herrliche Begriff, der impliziert: Bei dem Job brauchst du ein entsprechendes Rüstzeug.
DIY suggeriert, dass jeder problemlos forschen kann und wirbt mit der Demokratisierung der Marktforschung. Aber in der Realität müssen nach wie vor Methodendesigns, Stichproben, Fragebögen, Auswertungen und Visualisierung wissenschaftlichen Ansprüchen genügen.
Und diese Ansprüche verschwinden ja nicht, wenn man auf standardisierte Fragebögen, Panels und automatisierte Charts zugreift. Der Fragebogen muss eventuell um Zusatzfragen ergänzt werden oder die angebotene Stichprobe ist viel zu breit definiert. Ein Projektleiter sollte deshalb jederzeit in der Lage sein, die Qualität der Studienabschnitte kontrollieren zu können und gegebenenfalls korrigierend eingreifen. Das kann er oder sie aber nur, wenn die entsprechende Ausbildung und Erfahrung dahinterstecken. Erschwerend kommt hinzu, dass das Fehler-Risiko zunimmt, je weniger standardisiert die Studie ist.
Ein aktuelles und sehr trauriges Beispiel dafür ist die begleitende Marktforschung zum 9-Euro-Ticket. Neben einer deutschlandweit repräsentativen Studie von Forsa und rc research & consulting gibt es einige Umfragen der lokalen Verkehrsgesellschaften, die den Erfolg des 9-Euro-Tickets belegen sollten.
Diese lokalen Verkehrsunternehmen setzten aber jeweils andere Schwerpunkte, stellten unterschiedlichen Stichproben unterschiedliche Fragen und beauftragten verschiedene Dienstleister. So entstand ein riesiger Flickenteppich von Daten ohne Struktur und, abgesehen von den 78.000 bevölkerungsrepräsentativen Interviews von Forsa und rc, auch ohne Aussagekraft.
Was nun folgte und uns noch eine lange Zeit begleiten wird, ist ein Streit unter den einzelnen Auftraggebern. Wer hat die richtigen Fragen gestellt? Warum habt ihr andere Zahlen? Unser Professor hat aber mehr Erfahrung! Mein Verkehrsverbund ist aber besonders! Das geht sogar so weit, dass in laufenden Studien Fragen angepasst wurden, damit das woanders erzielte Ergebnis ebenfalls erreicht wird. Und wo das Ergebnis immer noch nicht passt, dann greifen Gewichtungen.
Das ist dem Föderalismus geschuldet, mag man hier einwerfen. Gute DIY Forschung geht aber genau so nicht. Eine einheitliche Lösung hätte hier einen größeren Erkenntnisgewinn gebracht.
Fragwürdige Studien überfluten die Öffentlichkeit
Ein weiterer Punkt, der mir Sorgen macht, ist die veröffentlichte Studienflut. Nicht ein Wochentag vergeht, an der keine neue Studie vorgestellt wird. Wie arbeitet Deutschland? Wie viel Unternehmen wollen bis 2045 klimaneutral sein? Wie gestresst sind Autofahrer in der Großstadt? Das sind nur drei Fragestellungen, die durch aktuelle Umfragen beantwortet werden.
Dahinter stecken immer häufiger Medien und Unternehmen, die Panel- oder Omnibus-Institute beauftragen. Meistens sind die Stichproben repräsentativ angelegt, was schon mal einen möglichen Problembereich ausklammert. Die meisten der beauftragten Institute können das und belegen es als Wahlforscher eindrucksvoll. Was jedoch zunehmend schwierig wird, ist die Qualität der Fragen. Die Auftraggeber wollen es in die Schlagzeilen schaffen und das gelingt ihnen immer häufiger mit fragwürdigen Mitteln, zum Beispiel durch suggestive Fragen.
Werden fehlerhafte DIY-Studien, manipulierte Auswertungen oder schlechte Fragebögen entlarvt, bleibt vom aufgewühlten Schmutz immer etwas an „der Marktforschung“ oder den „Umfragen“ hängen, das Image leidet. Das kann langfristig zu einem Problem werden, wenn parallel zu einem Imageverlust die Antwortbereitschaft in der Bevölkerung zurückgeht.
Qualitätssicherung: Open Science-Projekt als Vorbild
Was kann man also tun, um die Qualität der Umfragen zu sichern? Da lohnt sich ein Blick an die Hochschulen. Auch die Wissenschaft leidet unter widersprüchlichen Studien. Vor allem sind diese im Lebensmittelbereich zu finden. Da stößt man auf unzählige Veröffentlichungen, welche Lebensmittel gesund sind oder fett, ja sogar krank machen. Viele Hochschulen haben sich deshalb dem „Open Science“ Projekt angeschlossen, bei dem sich die Studierenden verpflichten alle Daten offenzulegen. So kann sich jeder ein Bild von der Versuchsanordnung, der Stichprobe, und den Ergebnissen machen.
Auf unsere Branche bezogen sollte mindestens der Fragebogen und der Studiensteckbrief mit Stichprobengröße und -struktur veröffentlicht werden. Das gehört meiner Meinung nach auch in die Statuten der Verbände. Institute sollten ihre Auftraggeber wiederum zur Veröffentlichung von Studiensteckbrief und Fragebogen verpflichten.
Mehr zum Thema
Schlechte Umfragen wie Fake News behandeln
Vor allem Journalisten als Hauptabnehmer der Umfragewerte müssen sensibilisiert werden und Studiensteckbriefe sowie Fragebögen anfordern. Die Verbände sollten sich auch aktiver an der Ausbildung von Journalisten, besonders von Datenjournalisten, beteiligen.
Weiterhin sind Umfrageergebnisse, die auf schlechten Stichproben, Auswertungen oder Fragebögen beruhen, als Fake News einzuordnen. Viele politische Entscheidungen basieren inzwischen auf Studien. Sind diese Fake News und Teil des politischen Diskurses, freut sich CORRECTIV über Hinweise.
Oder Sie reichen Auffälligkeiten hier ein, vielleicht schafft es die Studie ja an die Spitze der „Unstatistik des Monats“.
Und schlussendlich hat es jeder selbst ein wenig in der Hand: Widersprechen Sie auch mal, wenn jemand auf LinkedIn Zahlen falsch darstellt oder interpretiert. Der gute Ruf der Branche ist es wert!
Über die Person
Birgit Maier, mafokonzept, beobachtet seit 2007 die nationale und globale Insightsbranche und hat ihre Erkenntnisse vorwiegend in der Research & Results veröffentlicht. Die diplomierte Betriebswirtin mit dem Studienschwerpunkt Markt- und Meinungsforschung berät darüber hinaus Institute und Unternehmen bezüglich Fragebogengestaltung, Methoden und Tools.
Kommentare (2)
Um unsere Kommentarfunktion nutzen zu können müssen Sie sich anmelden.
Anmelden