Convertir une chaîne en une liste de mots?

Question

Convertir une chaîne en une liste de mots?

J'essaie de convertir une chaîne en une liste de mots en utilisant python. Je veux prendre quelque chose comme ce qui suit:

string = 'This is a string, with words!'

Puis convertir en quelque chose comme ceci:

list = ['This', 'is', 'a', 'string', 'with', 'words']

Notez l'omission de ponctuation et d'espaces. Quel serait le moyen le plus rapide d'y arriver?

44

list python string text-segmentation words

demandé sur hippietrail 2011-05-31 04:09:24

13 réponses

score 60 · Answer 1

Essayez ceci:

import re

mystr = 'This is a string, with words!'
wordList = re.sub("[^\w]", " ",  mystr).split()

Comment cela fonctionne:

À partir des documents:

re.sub(pattern, repl, string, count=0, flags=0)

Renvoie la chaîne obtenue en remplaçant les occurrences les plus à gauche de pattern in string par le REPL de remplacement. Si le motif n'est pas trouvé, string est retourné inchangé. repl peut être une chaîne ou une fonction.

Donc, dans notre cas :

Pattern est un caractère non alphanumérique.

[\w] signifie tout caractère alphanumérique et est égal au jeu de caractères [A-zA-Z0-9_]

A à z, A à Z, 0 à 9 et soulignement.

Nous faisons donc correspondre n'importe quel caractère non alphanumérique et le remplaçons par un espace .

Et puis nous le divisons () qui divise la chaîne par l'espace et la convertit en une liste

Donc "bonjour-Monde"

Devient 'bonjour le monde'

Avec le feu.sous -

, puis ['bonjour' , 'world']

Après split ()

Faites-moi savoir si des doutes surgissent.

score 53 · Answer 2

Je pense que c'est le moyen le plus simple pour quelqu'un d'autre qui trébuche sur ce post compte tenu de la réponse tardive:

>>> string = 'This is a string, with words!'
>>> string.split()
['This', 'is', 'a', 'string,', 'with', 'words!']

score 27 · Answer 3

Pour le faire correctement est assez complexe. Pour votre recherche, il est connu comme mot tokenization. Vous devriez regarder NLTK si vous voulez voir ce que les autres ont fait, plutôt que de partir de zéro:

>>> import nltk
>>> paragraph = u"Hi, this is my first sentence. And this is my second."
>>> sentences = nltk.sent_tokenize(paragraph)
>>> for sentence in sentences:
...     nltk.word_tokenize(sentence)
[u'Hi', u',', u'this', u'is', u'my', u'first', u'sentence', u'.']
[u'And', u'this', u'is', u'my', u'second', u'.']

score 13 · Answer 4

Le moyen le plus simple:

>>> import re
>>> string = 'This is a string, with words!'
>>> re.findall(r'\w+', string)
['This', 'is', 'a', 'string', 'with', 'words']

score 11 · Answer 5

En utilisant string.punctuation pour être complet:

import re
import string
x = re.sub('['+string.punctuation+']', '', s).split()

Cela gère également les retours à la ligne.

score 4 · Answer 6

Eh bien, vous pourriez utiliser

import re
list = re.sub(r'[.!,;?]', ' ', string).split()

Notez que string et list sont des noms de types intégrés, donc vous ne voulez probablement pas les utiliser comme noms de variables.

score 3 · Answer 7

Une expression régulière pour les mots vous donnerait le plus de contrôle. Vous voudriez examiner attentivement comment traiter les mots avec des tirets ou des apostrophes, comme "je suis".

score 1 · Answer 8

list=mystr.split(" ",mystr.count(" "))

1

répondu sanchit 2015-08-11 15:24:10

score 1 · Answer 9

Inspiré par la réponse de @mtrw, mais amélioré pour éliminer la ponctuation aux limites des mots seulement:

import re
import string

def extract_words(s):
    return [re.sub('^[{0}]+|[{0}]+$'.format(string.punctuation), '', w) for w in s.split()]

>>> str = 'This is a string, with words!'
>>> extract_words(str)
['This', 'is', 'a', 'string', 'with', 'words']

>>> str = '''I'm a custom-built sentence with "tricky" words like https://stackoverflow.com/.'''
>>> extract_words(str)
["I'm", 'a', 'custom-built', 'sentence', 'with', 'tricky', 'words', 'like', 'https://stackoverflow.com']

score 0 · Answer 10

C'est de ma tentative sur un défi de codage qui ne peut pas utiliser regex,

outputList = "".join((c if c.isalnum() or c=="'" else ' ') for c in inputStr ).split(' ')

Le rôle de l'apostrophe semble intéressant.

score 0 · Answer 11

De cette façon, vous éliminez tous les caractères spéciaux en dehors de l'alphabet:

def wordsToList(strn):
    L = strn.split()
    cleanL = []
    abc = 'abcdefghijklmnopqrstuvwxyz'
    ABC = abc.upper()
    letters = abc + ABC
    for e in L:
        word = ''
        for c in e:
            if c in letters:
                word += c
        if word != '':
            cleanL.append(word)
    return cleanL

s = 'She loves you, yea yea yea! '
L = wordsToList(s)
print(L)  # ['She', 'loves', 'you', 'yea', 'yea', 'yea']

Je ne suis pas sûr si c'est rapide ou optimal ou même la bonne façon de programmer.

score 0 · Answer 12

Personnellement, je pense que c'est un peu plus propre que les réponses fournies

def split_to_words(sentence):
    return list(filter(lambda w: len(w) > 0, re.split('\W+', sentence))) #Use sentence.lower(), if needed

score -1 · Answer 13

Vous pouvez essayer de faire ceci:

tryTrans = string.maketrans(",!", "  ")
str = "This is a string, with words!"
str = str.translate(tryTrans)
listOfWords = str.split()

Las etiquetas más populares

Convertir une chaîne en une liste de mots?

13 réponses