python 爬虫数据清洗

最近学习python网络数据获取，看到了关于数据的清洗，觉得很好用，现贴出代码，权当记录。

# Python 数据清洗

#cleanInput() 功能：

#输入input，

#清除input中的'\n', 多余空格，文献标记[ ]， 删除单个字符(除i/a 外)，转化为utf-8编码格式以消除转义字符,

#输出2-grams列表 ngrams

from urllib.request import urlopen
from bs4 import BeautifulSoup
import re
import string

def cleanInput(input):
input = re.sub('\n'," ",input)
input = re.sub('\[[0-9]*\]