Als «spark-dataframe» getaggte Fragen

Konvertieren Sie die Spark-DataFrame-Spalte in eine Python-Liste

Ich arbeite an einem Datenrahmen mit zwei Spalten, mvv und count. +---+-----+ |mvv|count| +---+-----+ | 1 | 5 | | 2 | 9 | | 3 | 3 | | 4 | 1 | Ich möchte zwei Listen mit MVV-Werten und Zählwert erhalten. Etwas wie mvv = [1,2,3,4] count = [5,9,3,1] Also habe ich den folgenden Code ausprobiert: Die...

Aktualisieren einer Datenrahmenspalte in Spark

Bei Betrachtung der neuen Spark-Datenrahmen-API ist unklar, ob es möglich ist, Datenrahmenspalten zu ändern. Wie würde ich mich über einen Wert in der Zeile zu ändern xSpalte yeines Datenrahmens? In pandasdiesem wäredf.ix[x,y] = new_value Bearbeiten: Wenn Sie das unten Gesagte konsolidieren,...