redux_test~20171217-171021.py 908 B

123456789101112131415161718192021222324252627282930
  1. #!/usr/bin/env python
  2. # coding: utf8
  3. import re
  4. from nltk.tokenize import sent_tokenize, word_tokenize
  5. from nltk.corpus import stopwords
  6. #source = open("mirabeau.txt", 'r')
  7. #destination = open("mirabeau_redux.txt", "wt")
  8. phrase = "Sous le pont Mirabeau coule la Seine, les choses, la vie, un, une, des, Et nos amours Faut-il qu'il m'en souvienne..."
  9. print("poeme original:", phrase)
  10. phrase = str.lower(phrase)
  11. phrase = phrase.replace("'", " ")
  12. phrase = phrase.replace("-", " ")
  13. print(phrase)
  14. liste_phrase = phrase.split(" ")
  15. print("liste des mots originaux séparés:", liste_phrase)
  16. # liste vide pour recevoir la liste de mots reduits
  17. liste_reduit = []
  18. stopWords = set(stopwords.words('french'))
  19. for w in liste_phrase:
  20. if w not in stopWords:
  21. liste_reduit.append(w)
  22. print("liste des mots réduit", liste_reduit)
  23. poeme_reduit = " ".join(liste_reduit)
  24. print("version réduite du poeme", poeme_reduit)