Als «spark-csv» getaggte Fragen

Wie kann der vollständige Spalteninhalt in einem Spark-Datenrahmen angezeigt werden?

Ich verwende spark-csv, um Daten in einen DataFrame zu laden. Ich möchte eine einfache Abfrage durchführen und den Inhalt anzeigen: val df = sqlContext.read.format("com.databricks.spark.csv").option("header", "true").load("my.csv") df.registerTempTable("tasks") results = sqlContext.sql("select col...

Schreiben Sie eine einzelne CSV-Datei mit spark-csv

Ich verwende https://github.com/databricks/spark-csv . Ich versuche, eine einzelne CSV zu schreiben, kann dies jedoch nicht. Es wird ein Ordner erstellt. Benötigen Sie eine Scala-Funktion, die Parameter wie Pfad und Dateiname verwendet und diese CSV-Datei