diff --git a/app/wordfreqCMD.py b/app/wordfreqCMD.py index dcee74e..4a7134d 100644 --- a/app/wordfreqCMD.py +++ b/app/wordfreqCMD.py @@ -8,6 +8,7 @@ import string import operator import os, sys # 引入模块sys,因为我要用里面的sys.argv列表中的信息来读取命令行参数。 import pickle_idea +import re def freq(fruit): ''' @@ -39,12 +40,13 @@ def file2str(fname):#文件转字符 def remove_punctuation(s): # 这里是s是形参 (parameter)。函数被调用时才给s赋值。 - special_characters = '\_©~<=>+/[]*&$%^@.,?!:;#()"“”—‘’{}|' # 把里面的字符都去掉 - for c in special_characters: - s = s.replace(c, ' ') # 防止出现把 apple,apple 移掉逗号后变成 appleapple 情况 - s = s.replace('--', ' ') - s = s.strip() # 去除前后的空格 - + + cop = re.compile("[^-^a-z^A-Z^\\']") # 通过正则表达式保留英文字符和'特殊字符 + s = cop.sub(' ', s) + s = s.strip('--') #去除头尾连字符 + s = s.strip() # 去除前后的空格 + s = s.strip('--') + if '\'' in s: n = len(s) t = '' # 用来收集我需要保留的字符 @@ -60,6 +62,7 @@ def remove_punctuation(s): # 这里是s是形参 (parameter)。函数被调用 return s + def sort_in_descending_order(lst):# 单词按频率降序排列 lst2 = sorted(lst, reverse=True, key=lambda x: (x[1], x[0])) return lst2