preguntar acerca de spark-csv

4
réponses

Parse CSV as DataFrame / DataSet avec Apache Spark et Java

je suis nouveau à spark, et je veux utiliser group-by & reduce pour trouver ce qui suit de CSV (une ligne par employé): Department, Designation, costToCompany, State Sales, Trainee, 12000, UP Sales, Lead, 32000, AP Sales, Lead, 32000, LA …
demandé sur 1970-01-01 00:33:34
7
réponses

Écrire un seul fichier CSV en utilisant spark-csv

j'utilise https://github.com/databricks/spark-csv , j'essaie d'écrire un seul CSV, mais pas capable, il fait un dossier. a besoin d'une fonction Scala qui prendra les paramètres comme chemin et nom de fichier et écrira ce fichier CSV. …
demandé sur 1970-01-01 00:33:35