Statistiken und Big Data

Ich berechne einige bedingte Wahrscheinlichkeiten und zugehörige 95% -Konfidenzintervalle. In vielen meiner Fälle habe ich eine einfache Anzahl von xErfolgen aus nVersuchen (aus einer Kontingenztabelle), sodass ich ein Binomial-Konfidenzintervall verwenden kann, wie es binom.confint(x, n,...

Für welche Distributionen x außer Beta ist die X-Binomial-Distribution gut? Die Beta- und Binomialverteilungen sind bekanntermaßen konjugiert, aber ich bin gespannt, ob andere nicht konjugierte Verteilungen vergleichsweise einfache zusammengesetzte pmfs ergeben. Mit nett meine ich, dass die pmf...

Dieser Abschnitt von diesem Artikel sagt: Ronald Fisher führte 1935 eine Referenzinferenz ein, um sie auf dieses Problem anzuwenden. Er bezog sich auf eine frühere Arbeit von WV Behrens von 1929. Behrens und Fisher vorgeschlagen , um die Wahrscheinlichkeitsverteilung zu finden wobeiˉx1undˉx2die...

Ich versuche, die Manifold-Regularisierung in Support Vector Machines (SVMs) in Matlab zu implementieren. Ich folge den Anweisungen in der Arbeit von Belkin et al. (2006), da ist die Gleichung drin: f∗=argminf∈Hk∑li=1V(xi,yi,f)+γA∥f∥2A+γI∥f∥2If∗=argminf∈Hk∑i=1lV(xi,yi,f)+γA‖f‖A2+γI‖f‖I2f^{*} =...

Kennt jemand eine Implementierung (außer dem SAS-Makro) der doppelt robusten Schätzmethode in: Funk, MJ, Westreich, D. et al. (2011). Doppelt robuste Abschätzung der kausalen Auswirkungen. American Journal of Epidemiology, 173 (7): 761 & ndash; 767. [DOI] ?

Ich versuche, Datensatzspalten für die lineare Regression zu standardisieren. Eine der Spalten hat die Standardabweichung = 0. def standardize(X): return (X - mean(X)) / std(X) Dieser Code funktioniert also nicht. Gibt es irgendwelche Tricks, um dieses Problem zu lösen? Ich habe zwei...

Angenommen, ein Aufsichtspersonal vermutet, dass ein Schüler während einer Multiple-Choice-Prüfung Antworten von der Arbeit eines anderen Schülers kopiert. Sie überprüft später ihre Antworten und findet einige Ähnlichkeiten - aber andererseits gibt es aufgrund der Art der Prüfung zwangsläufig...

Ich suche nach einer Art Verteilung über den Simplex, in der Komponenten auf ordinale Weise korreliert werden. Das heißt, wenn p=(p1,...,pJ)p=(p1,...,pJ)p = (p_1, ..., p_J) aus unserer Verteilung auf dem Simplex gezogen wird, ich möchte pipip_i positiv mit seinen Nachbarn korreliert werden und ,...

Kürzlich wurde eine Frage auf einem Listenserver veröffentlicht, den ich abonniere (vielleicht zynisch?), Wenn ein Bayes'scher Ansatz entscheidend für die "Erledigung der Aufgabe" bei der Beantwortung von Fragen im Bereich der Ökologie war. Ich frage mich im Allgemeinen, wann ein Bayes'scher Ansatz...

Nehmen wir zum Beispiel an, wir haben ein logistisches Regressionsmodell, das die Wahrscheinlichkeit ausgibt, dass ein Patient eine bestimmte Krankheit entwickelt, die auf vielen Kovariaten basiert. Wir können uns ein Bild von der Größe und Richtung des Effekts jeder Kovariate im Allgemeinen...

Ich arbeite für eine Organisation, die rund 180 Schulen im ganzen Land beaufsichtigt. Wir sammeln regelmäßig Ergebnisdaten von diesen Schulen und ordnen sie ein. Ich wurde gebeten, eine Umfrage beim nationalen Büro (ca. 100 Personen) durchzuführen, um festzustellen, welche Schulen am besten und am...

Sei eine nichtnegative Funktion. Ich bin daran interessiert, so zu finden, dass Die Einschränkung : Alles was ich tun kann, ist an Punkten in . Ich kann jedoch die Orte, an denen ich zufällig probiere, nach Belieben auswählen . fffz∈[0,1]z∈[0,1]z \in [0,1]∫z0f(x)dx=12∫10f(x)dx∫0zf(x)dx=12∫01f(x)dx...

Jemand brachte im Gespräch vor, dass drei ihrer Freunde aufeinanderfolgende Geburtstage hatten (z. B. 10., 11. und 12. November), und ich wollte herausfinden, wie wahrscheinlich dies für zufällig ausgewählte drei Personen ist, vorausgesetzt, die Geburtstage sind zufällig verteilt und die...

Angenommen, ich erstelle einen logistischen Regressionsklassifikator, der vorhersagt, ob jemand verheiratet oder ledig ist. (1 = verheiratet, 0 = ledig) Ich möchte einen Punkt auf der Präzisionsrückrufkurve auswählen, der mir eine Genauigkeit von mindestens 75% gibt. möchte ich die Schwellenwerte...

Der Satz lautet: "Wenn eine Übergangsmatrix für eine irreduzible Markov-Kette mit einem endlichen Zustandsraum S doppelt stochastisch ist, ist ihr (eindeutiges) invariantes Maß über S einheitlich." Wenn eine Markov-Kette eine doppelt stochastische Übergangsmatrix hat, habe ich gelesen, dass ihre...

Für diskrete Teststatistiken ist die Verteilung des entsprechenden Werts diskret und stochastisch größer als die gleichmäßige Verteilung. Daher ist der entsprechende Hypothesentest basierend auf dem p-Wert (ablehnen, wenn der p-Wert beispielsweise kleiner als 0,05 ist) immer konservativ in dem...

Ich versuche, mithilfe der Regression ein Vorhersagemodell zu erstellen. Dies ist das Diagnosediagramm für das Modell, das ich durch die Verwendung von lm () in R erhalte: Was ich aus dem QQ-Diagramm gelesen habe, ist, dass die Residuen eine starke Verteilung haben, und das Diagramm Residuen gegen...

Ich habe einige Beiträge zur Funktionsauswahl und Kreuzvalidierung gelesen, habe aber noch Fragen zum richtigen Verfahren. Angenommen, ich habe einen Datensatz mit 10 Funktionen und möchte die besten Funktionen auswählen. Angenommen, ich verwende einen Klassifikator für den nächsten Nachbarn. Kann...

Sei ein Vektorraum mit . Eine Standardnormalverteilung auf ist das Gesetz eines Zufallsvektors , der Werte in annimmt und so, dass die Koordinaten von in einer ( in irgendeiner) orthonormalen Basis von ein Zufallsvektor sind hergestellt aus unabhängigen Standardnormalverteilungen .U⊂RnU⊂RnU \subset...

Ich habe ein Problem mit multipler Regression, das ich mit einer einfachen multiplen Regression zu lösen versucht habe: model1 <- lm(Y ~ X1 + X2 + X3 + X4 + X5, data=data) Dies scheint die 85% der Varianz (gemäß R-Quadrat) zu erklären, die ziemlich gut zu sein scheint. Was mich jedoch...