preguntar acerca de parquet

3
réponses

Quels sont les avantages et les inconvénients du format de parquet par rapport aux autres formats?

Les caractéristiques D'Apache Parquet sont: Auto-décrivant Format colonnaire indépendant de la Langue Par rapport à Avro, fichiers de séquence, fichier RC, etc. Je veux un aperçu des formats. J'ai déjà lu: Comment fonctionne Impala avec les …
demandé sur 1970-01-01 00:33:36
7
réponses

Comment convertir un fichier csv en parquet

Je suis nouveau à BigData.J'ai besoin de convertir un fichier csv/txt au format Parquet. J'ai beaucoup cherché mais impossible de trouver une quelconque façon de le faire. Est-il un moyen d'y parvenir? ... …
demandé sur 1970-01-01 00:33:34
2
réponses

Spark DataFrames avec Parquet et partitionnement

Je n'ai pas été en mesure de trouver beaucoup d'informations sur ce sujet, mais disons que nous utilisons une base de données pour lire dans un fichier de parquet qui est 10 blocs étincelle va naturellement créer 10 partitions. Mais quand le datafram …
demandé sur 1970-01-01 00:33:35