Wie entwerfe ich Experimente für die Marktforschung (mit einem Twist)?

8

Stellen Sie sich eine Art Auktion vor, bei der Ihnen beispielsweise 1000 potenzielle Kunden präsentiert werden. Basierend auf Informationen zu diesen potenziellen Kunden - Alter, Geschlecht, Rasse, Einkommen, Bildungserfolg und dergleichen - können Sie "bieten", um Ihr Produkt auf einen Bruchteil von ihnen zu setzen, beispielsweise 250. (Ignorieren Sie die Kosten für das Bieten.) An Um Ihre Chancen auf die Auswahl der richtigen Teilmenge zu maximieren, würde ich wahrscheinlich ein Modell der "Sympathie" unseres Produkts verwenden, das mithilfe logistischer Regression erstellt wurde. Ich kann mich gut genug durch diesen Teil fummeln.

Um jedoch bauen das Modell der Produkt likability, muss ich einige Marktforschung tun, die Prüfung der Produktabstand zu den Themen , die wir von der breiten Bevölkerung rekrutieren kann. Das ist eigentlich ziemlich teuer. Darüber hinaus sollte es wahrscheinlich auf die Demografie der Bevölkerung abgestimmt sein, aus der die Perspektiven stammen. Zum Beispiel könnte uns ein faktorielles Design dazu auffordern, Testpersonen zu gleichen Teilen über die Ebenen des Rassenfaktors hinweg zu rekrutieren, wenn wir in Wirklichkeit wahrscheinlich nur sehr wenige amerikanische Ureinwohner treffen, etwa in den 1000 Prospekten, und dies einfach können Entscheide dich in der Regel, überhaupt nicht zu ihnen zu werfen. (Traurig aber wahr.)

Wie soll ein solches Experiment aufgebaut sein? Konkret sind die Entwurfsvariablen alle kategoriale und ordinale Faktoren. Der Gebotsanteil ist ein Eingabeparameter (1/4 im oben genannten Beispiel), ebenso wie die maximale Anzahl von Probanden, die rekrutiert werden können. Es scheint, als wäre vielleicht eine Mischung aus experimentellem Design und Zufallsstichprobe angebracht, aber ich bin offen für alle vernünftigen Vorschläge und Hinweise.

Ich sollte auch beachten, dass es angesichts der wahrscheinlichen geringen Effektgrößen und der kleinen Stichproben-Rekrutierungspools, die wir uns leisten können, unwahrscheinlich ist, dass die Marktforschung statistisch signifikante Regressionskoeffizienten liefert. Eine Überoptimierung des experimentellen Designs ist wahrscheinlich albern, und jedes vernünftigerweise nicht verrückte Verfahren wird ausreichen.

shabbychef
quelle
1
Können Sie klarstellen, welche Faktoren des Experiments Sie entwerfen möchten? Ich verstehe, dass Sie ein Produkt an einer Probe testen möchten, aber bisher kann ich die experimentelle Manipulation nicht sehen, außer vielleicht für die Rekrutierung von Schichten aus verschiedenen Bevölkerungsbereichen.
Tomka
1
Ja, mit dem "Experiment" meine ich, wie man den Rekrutenpool auswählt. Wir können Rekruten für (fast) jede Kombination der demografischen Variablen auswählen - Alter, Rasse, Geschlecht, Bildungserfolg usw. - und das ist meine Aufgabe.
Shabbychef
1
Was ist Ihr Hauptgrund, keine einfache Wahrscheinlichkeitsstichprobe aus der Population mit n = 1000 zu verwenden?
Tomka
1
Aus Budgetgründen ist die Anzahl der Rekruten, die wir befragen können, viel geringer - in der Größenordnung von 50. Bei dieser Größe und Anzahl von Entwurfsvariablen sieht eine Zufallsstichprobe aufgrund eines Stichprobenfehlers nicht repräsentativ aus. Ich gehe davon aus, dass ein experimentelles Design besser abschneiden wird.
Shabbychef
2
Ich denke, Sie suchen möglicherweise nach einer geschichteten Stichprobe für einige der Gruppen, aber dies ist kein Experiment. Die Idee wäre, sicherzustellen, dass alle relevanten Gruppen in Ihrem Datensatz vorhanden sind, und dann die Entwurfsgewichtung für die Bevölkerung zu verwenden. Trotzdem ist n = 50 vielleicht zu klein, um für alle von Ihnen erwähnten soziodemografischen Daten geschichtet zu werden. Auch Stichprobenfehler können die Qualität Ihrer Vorhersagen beeinträchtigen, selbst wenn die Assoziationen / Effektgrößen stark wären.
Tomka

Antworten:

4

Ein Ansatz für Ihr Problem ist die Verwendung einer geschichteten Stichprobe. Ein Zweck der Schichtung besteht darin, sicherzustellen, dass bestimmte Domänen (Gruppen) der Bevölkerung in der Stichprobe vertreten sind, die andernfalls für eine gültige Schlussfolgerung zu spärlich dargestellt würden, z. B. aufgrund einer geringen Auswahlwahrscheinlichkeit.

n=50

wi=πsπpop,
πsπpop

n=50n=50

n

n=50

Die Merkmale mit zu geringer Auswahlwahrscheinlichkeit sind die Kandidaten für eine Schichtung, während die Variablen mit einer ausreichend hohen / ausgewogenen Auswahlwahrscheinlichkeit über ihre Kategorien hinweg im Stichprobenentwurf ignoriert werden können. Nachdem Sie die entscheidenden Schichten für Ihre Population und Ihr Modell identifiziert haben , können Sie die Stichprobenentwurfsstrategie darauf aufbauen (dh eine zufällige Stichprobe aus allen relevanten Schichten, um alle "Zellen" zu füllen).

n=50

Tomka
quelle
Dies bringt mich weit dahin, wohin ich gehen muss. Vielen Dank!
Shabbychef