python去除常见标点符合以及空格

最新推荐文章于 2024-06-13 09:50:09 发布
最新推荐文章于 2024-06-13 09:50:09 发布
阅读量3.2k 收藏 7
点赞数
分类专栏： python 文章标签： python 标点符号 正则表达式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42670810/article/details/111173398
版权

python去除常见标点符合以及空格

在处理中文语句进行分词前，标点符号比较占位置，可以使用下面方法清空掉。

import re

def drop_punctuation(text):
    punc = '~`!#$%^&*()_+-=|\';"＂:/.,?><~·！@#￥%……&*（）——+-=“：’；、。，？》{《}】【\n\]\[ '
    new_text=re.sub(r"[%s]+" %punc, "",text)
    return new_text

测试：

t1='1    距离川沙公路较近,但是公交指示不对,如果是"蔡陆线"的话,会非常麻烦.建议用别的路线.房间较为简单.'
qt = drop_punctuation(t1)
qt

结果：

'距离川沙公路较近但是公交指示不对如果是蔡陆线的话会非常麻烦建议用别的路线房间较为简单'
mz_老张
关注
  • 0
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
python去除空格标点_使用空格删除标点；属性
weixin_39975486的博客
12-17 407
目前，我正在使用下面的代码对一些使用spaCy的文本数据进行元素化和计算TF-IDF值：lemma = []for doc in nlp.pipe(df['col'].astype('unicode').values, batch_size=9844,n_threads=3):if doc.is_parsed:lemma.append([n.lemma_ for n in doc if not n...
Python删除字符串中的空格和特殊字符
TINA_JING_LIU的博客
01-27 5685
 "Groß - α".casefold()#德语'gross - α' "I am verY love python".casefold()'i am very love python' 删除字符串中的空格和特殊字符 特殊字符指制表符\t 、回车符\r、换行符\n等。 strip() 用于删除字符串左右两侧的空格和特殊字符 语法： str.strip([chars]) chars为可选参数，用于指定要删除的字符串，可指定多个， 如果不指定则默认删除空格、制表符\t、回车符\r、换行符\n等。..
【Python】 去除字符串中的标点符号的最佳方法
最新发布
PythonWeb实践
06-13 803
在Python编程中，经常会遇到需要处理字符串的情况，其中一种常见的任务是去除字符串中的标点符号。Python提供了多种方法来实现这一功能，包括使用字符串方法、正则表达式以及Python标准库中的模块。可能是最简单和直观的方法。而对于需要更复杂模式匹配的情况，正则表达式是一个强大的工具。无论选择哪种方法，理解其背后的原理和适用场景都是非常重要的。去除字符串中的标点符号是一个常见的任务，Python提供了多种方法来实现。的属性，它是一个包含所有标点符号的字符串。方法结合使用，快速去除字符串中的所有标点符号。
python去掉文章标点和空格
h_666666的博客
12-29 2350
参考了很多的办法都没有成功，，最后自己一点点试了出来。。。。 import re temp = "想做/ 兼_职/学生_/ 的 、加,我Q： 1 5. 8 0. ！！？？ 8 6 。0. 2。 3有,惊,喜,哦" #temp = temp.decode("utf8") temp = temp.encode('utf-8').decode('utf-8') string = re.sub...
Python3 分词去掉文本标点(自主定义)并构建tfidf词向量
济舒小柏
09-12 1490
from sklearn.feature_extraction.text import TfidfVectorizer import string corpus=[] punc = &amp;quot;。”；，：—“”（）《》&amp;quot; # punc = punc.encode(&amp;quot;utf8&amp;quot;) python3不用解码成unicode import jieba with open('corpus.txt',encodin
python去除标点符号_Python 程序从字符串中删除标点符号
weixin_39624094的博客
11-29 4891
Python 程序从字符串中删除标点符号该程序从字符串中删除所有标点符号。我们将使用for循环检查字符串的每个字符。如果字符是标点符号，则为它分配一个空字符串。要理解此示例，您应该了解以下Python编程主题：有时，我们可能希望将一个句子分成单词列表。在这种情况下，我们可能首先要清理字符串并删除所有标点符号。下面是一个如何完成此功能的示例。源代码示例# 定义标点符号punctuations = '...
python结巴分词去掉停用词、标点符号、虚词_python 进行结巴分词 并且用re去掉符号...
weixin_39667452的博客
12-09 1893
# 把停用词做成字典stopwords = {}fstop = open('stop_words.txt', 'r',encoding='utf-8',errors='ingnore')for eachWord in fstop:stopwords[eachWord.strip()] = eachWord.strip() #停用词典fstop.close()f1=open('all.txt','...
一行Python代码过滤标点符号等特殊字符
09-18
这个表达式过滤了常见的英文和中文标点符号以及空白字符。 结合`re`模块的`sub`函数，可以将上述正则表达式用于字符串替换操作，从而移除所有匹配的特殊字符。例如： ```python import re text = "Powe,on；the2333...
python使用正则表达式去除中文文本多余空格，保留英文之间空格方法详解
01-21
在pdf转为文本的时候，经常会多出空格，影响数据观感，因此需要去掉文本中多余的空格，而文本中的英文之间的正常空格需要保留，输入输出如下： input：我今天 赚了 10 个亿，老百姓very happy。 output：我今天赚了...
python中string模块各属性以及函数的用法介绍
09-21
在Python编程中，处理字符串是非常常见的需求之一。Python提供了丰富的内置函数来支持字符串的各种操作，包括大小写转换、格式化输出、搜索定位等。此外，Python还提供了一个专门的`string`模块来进一步增强字符串...
python 小说词频统计_Python中文分词及词频统计
weixin_39650756的博客
11-20 971
中文分词中文分词(Chinese Word Segmentation)，将中文语句切割成单独的词组。英文使用空格来分开每个单词的，而中文单独一个汉字跟词有时候完全不是同个含义，因此，中文分词相比英文分词难度高很多。分词主要用于NLP 自然语言处理（Natural Language Processing），使用场景有：搜索优化，关键词提取（百度指数）语义分析，智能问答系统（客服系统）非结构化文本媒体...
Python 中文文本分词（包含标点的移除）
日进一步
04-10 1万+
背景信息本文为构建中文词向量的前期准备，主要实现中文文本的分词工作，并且在分词过程中移除了标点符号、英文字符、数字等干扰项，从而可以得到较为纯净的分词后的中文语料。详细代码import jieba import jieba.analyse import jieba.posseg as pseg import codecs,sys from string import punctuation if ...
我的transformer
jshgz8的博客
11-18 46
构造DataLoader类。
python学习之去除字符串中的空格（6种方法）
分享型博主
02-07 2万+
这篇文章主要介绍了Python 字符串去除空格的6种方法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，来一起学习吧。在处理Python代码字符串的时候，我们常会遇到要去除空格的情况，所以就总结了多种方法供大家参考。
python如何去除文本标点符号_python中如何去除标点符号
weixin_39943370的博客
12-09 4292
python中如何去除标点符号,写法,方法,字符,字母,都是python中如何去除标点符号易采站长站，站长之家为您整理了python中如何去除标点符号的相关内容。Python去掉标点符号的方法如下：方法一：str.isalnum：S.isalnum() -> bool返回值：如果string至少有一个字符并且所有字符都是字母或数字则返回True,否则返回False。实例:>>&g...
Python去除文本所有标点符号
热门推荐
haiziccc的专栏
09-19 3万+
去除标点符号方式多种多样，这里介绍两种自己常用的。 1、python自带punctuation包，可以消除所有中文标点符号。 import re,string from zhon.hanzi import punctuation text = " Hello, world! 这，是：我;第!一个程序\?()（）<>《》 " print(re.sub(r"[%s]+" %punct...
删除符合一定条件的若干行数据
ch206265的博客
10-13 1295
关键： #删除month字段中内容是'1/','2/','6/','7/','8/','9/','10','11','12'的行 data=data[~(data['month'].isin(['1/','2/','6/','7/','8/','9/','10','11','12']))] #仅删除字段名为month的一整列数据 data=data.drop(['month'],axis=1) import pandas as pd import numpy as np #导入数据 #data .
python去除字符串中的空格、特殊字符、指定字符
Thewei666的博客
04-25 9931
去除字符串中的空格、特殊字符、指定字符等，在python中，为我们提供了三种方法： strip()删除字符串前后（左右两侧）的空格或特殊字符 lstrip()删除字符串前面（左边）的空格或特殊字符 rstrip()删除字符串后面（右侧）的空格或特殊字符 注意：python中的str是不可改变的（不可改变指的是：字符串一旦生成，其字符的序列就不能发生改变），因此这三种方法都是返回其改变后的副本，需要另一个量去接受 python strip()方法 strip()方法用于删除字符串左右两边的空格、特殊
python实现具有删除空格、英文标点替换、英文单词大写等功能的文字排版工具
lanheit的博客
04-12 6166
编写代码，实现具有删除空格、英文标点替换、英文单词大写等功能的文字排版工具。原始文本为" 他问,你知道’cba’是什么单词的缩写么 ? " # .文字排版 str = " 他问,你知道'cba'是什么单词的缩写么 ? " print("1.删除空格\n2.英文标点替换\n3.英文单词大写\n4.退出") for i in range(1, 6): add = int(input("请输入功能选项:\n")) if i < 5: if ad
python 去除标点
03-30
可以使用正则表达式库re来去除标点，示例代码如下： ```python import re text = "Hello, World! This is a sample text." # 使用正则表达式去除标点 text = re.sub(r'[^\w\s]', '', text) print(text) # 输出：Hello World This is a sample text ``` 在上面的代码中，使用了re.sub()函数来替换字符串中的标点，其中正则表达式`[^\w\s]`表示除了字母、数字和空格以外的任何字符。这个正则表达式可以匹配所有的标点符号，然后用空字符串来替换它们，从而达到去除标点的效果。
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值