preguntar acerca de tokenize

j'utilise NLTKword_tokenizer pour diviser une phrase en mots. je veux marquer cette phrase: في_بيتنا كل شي لما تحتاجه يضيع ...ادور على شاحن فجأة يختفي ..لدرجة اني اسوي نفسي ادور شيء Le code que j'ai écris: import re import nltk lex = u" في_ب …

je suis en utilisant nltk, donc je veux créer mes propres textes comme ceux par défaut sur nltk.livre. Cependant, je viens d'arriver à la méthode comme my_text = ['This', 'is', 'my', 'text'] j'aimerais découvrir n'importe quelle façon d'entrer mo …

que sont des exemples d'utilisation pratique et quotidienne de Tokenizer PHP ? quelqu'un a utilisé ça? ... …

je viens d'apprendre à propos de la classe de Scanner Java et maintenant je me demande comment il se compare/rivalise avec le StringTokenizer et la chaîne.Split. Je sais que le StringTokenizer et String.Split ne fonctionne que sur les cordes, alors p …

j'ai besoin d'écrire une procédure pour normaliser un enregistrement qui ont plusieurs jetons concaténés par un char. J'ai besoin d'obtenir ces jetons séparant la chaîne et insérant chacun comme un nouvel enregistrement dans une table. Est-ce que Ora …

j'ai la chaîne CSV 100.01,200.02,300.03 que je dois passer à une procédure PL/SQL stockée dans Oracle. À l'intérieur du proc,je dois insérer ces valeurs dans une colonne de nombre dans le tableau. pour ceci, j'ai eu une approche de travail d …

supposons que j'ai la chaîne de caractères 1:2:3:4:5 et que je veux obtenir son dernier champ ( 5 dans ce cas). Comment je fais ça avec Bash? J'ai essayé cut , mais je ne sais pas comment spécifier le dernier champ avec -f . ... …

Java a une méthode de partage pratique: String str = "The quick brown fox"; String[] results = str.split(" "); Est-il un moyen facile de faire cela en C++? ... …