preguntar acerca de scala

2
réponses

Spark RDD — comment fonctionnent-ils

J'ai un petit programme Scala qui fonctionne bien sur un seul nœud. Cependant, je le redimensionne pour qu'il fonctionne sur plusieurs nœuds. C'est ma première tentative de ce genre. J'essaie juste de comprendre comment les RDDs fonctionnent dans Spa …
demandé sur 1970-01-01 00:33:34
2
réponses

Comment construire un multimap à partir d’une liste de tuples dans Scala?

Supposons que j'ai une liste de tuples List[(A, B)]. Quel est le meilleur moyen de le convertir en multimap, qui mappe A à Set[B]? Puis-je construire un immuable multimap ? ... …
demandé sur 1970-01-01 00:33:31
4
réponses

Scala: déballage de tuple dans la liste des arguments

je suis en train d'envoyer le résultat d'un appel de la méthode tuple partie de la liste des arguments pour une autre méthode. méthode de la cible def printResult(title: String, result: Int, startTime: Long, endTime: Long) Retour à partir de la …
demandé sur 1970-01-01 00:33:34
4
réponses

Comment sauvegarder une DataFrame sous forme compressée (gzipped) CSV?

J'utilise Spark 1.6.0 et Scala. je veux enregistrer une base de données en format CSV compressé. Voici ce que j'ai jusqu'à présent (j'ai déjà df et scSparkContext): //set the conf to the codec I want sc.getConf.set("spark.hadoop.mapred.output.com …
demandé sur 1970-01-01 00:33:36
7
réponses

Question sur la performance de Scala

Dans le article écrit par Daniel Korzekwa, il a dit que l'exécution du code suivant: list.map(e => e*2).filter(e => e>10) est bien pire que la solution itérative écrite en utilisant Java. quelqu'un Peut-il expliquer pourquoi? Et quelle e …
demandé sur 1970-01-01 00:33:31
1
réponses

SLICK 3.0-plusieurs requêtes dépendant l’une de l’autre-db.exécuter(action)

je suis nouveau à Slick 3 et jusqu'à présent j'ai compris que db.les appels sont asynchrones. le. carte ou .flatMap est lancé une fois que le futur est retourné. le problème dans mon code ci-dessous est que toutes les requêtes secondaires ne fonctio …
demandé sur 1970-01-01 00:33:35
5
réponses

Algorithme pour calculer le nombre de combinaisons pour former 100

je suis frappé dans une situation délicate où je dois calculer le nombre de combinaisons pour former 100 basé sur des facteurs différents. Ceux qui sont Nombre de combinaisons facteur de Multiplication distance exemple d'entrée 1: (2-10-20) sig …
demandé sur 1970-01-01 00:33:30
1
réponses

Java.lang.Noclassdeffonderror: scala / Product$class

je suis nouveau à scala et je suis en train d'essayer quelques exemples de codes pour le test. Cependant, je suis confronté à certains problèmes lorsque je lance le code de test. Quand j'exécute le test, j'obtiens une erreur [trace] Stack trace supp …
demandé sur 1970-01-01 00:33:37
2
réponses

Quelles polices de caractères pour parcourir le code source scala et le rendre?

J'utilise Eclipse sur Windows 7 pour parcourir le code source Scala. Scala permet d' ⇒ au lieu de => et ← au lieu de ... …
demandé sur 1970-01-01 00:33:32
4
réponses

Comment changer la position d’une colonne dans une base de données spark?

je me demandais s'il était possible de changer la position d'une colonne dans une base de données, en fait de changer le schéma ? Justement si j'ai un dataframe comme [champ1, champ2, champ3], et je voudrais obtenir [champ1, champ3, champ2]. Toute …
demandé sur 1970-01-01 00:33:36