for循环太Low?分享几段我工作中经常使用的for代码!

前言

不管是for循环还是while循环,都是任何一门语言的基础知识,同时也是非常重要的知识。借助于循环的策略,可以将很多重复性的问题完美地解决。在Python中,大家可能对她的印象是“Python不适合使用循环,因为效率低,速度慢!”,但是本文中将重点介绍她,并跟大家分享我工作常用的几段代码示例(如果你想实操,文末有数据下载链接)。

for循环示意图

可以有部分朋友还不太清楚for循环的工作机制,这里画一个简单的示意图,希望读者能够理解她的逻辑。

640?wx_fmt=png

如上图所示,图中包含for循环过程中的三个部分,分别是漏斗、漏斗内的元素以及漏斗以下的结构,这三个部分构成了for循环的核心。读者可以将图中的三个核心内容分别理解为容器对象(即Python中的基础数据结构,如字符串、列表、元组和字典等)、容器内的元素以及循环体。上图中,左右两个示意图的唯一区别在于,for循环的循环体是否包含if分支判断。

案例1:多数据文件的合并

如下图所示,本地目录内包含需要读取的多个数据文件,它们均为csv格式或txt格式,且数据结构相同。该如何基于Python的for循环语句实现数据的读取与合并呢?

640?wx_fmt=png


# 导入第三方模块import pandas as pd  # 用于读取数据import os   # 用于返回目录内的文件名称# 指定待读取数据所在的目录path = r'D:\datas'# 构造空列表datas,用于存储所有文件的数据datas = []for filename in os.listdir(path):    # 判断文件类型是否为txt格式    if filename.find('txt') != -1:        # 读取txt格式的数据        data = pd.read_csv(path + '\\' + filename, sep = '\t')    else:        # 读取csv格式的数据        data = pd.read_csv(path + '\\' + filename)    # 将读取的每一个数据集存储到datas列表中    datas.append(data)# 将所有数据文件做合并final_data = pd.concat(datas)final_data


640?wx_fmt=png

案例2:数据单位的统一处理

如下图所示,数据集中关于APP的下载量和软件大小涉及到不同的数据单位,如APP的文件大小有KB单位也有MB单位。很显然,单位不一致的数据肯定是不能直接用来分析和建模的。所以,该如何借助于for循环的手段将数据做一致性的清洗呢?

640?wx_fmt=png


# 读取数据apps = pd.read_excel('apps.xlsx')# 处理安装量字段install,将数据统一为“万”的单位install_new = []for i in apps['install']:    # 判断安装量是否已“亿”为单位    if i.find('亿') != -1:        install_new.append(str(float(i[:-1])*10000) + '万')        # 判断安装量是否已“万”为单位    elif i.find('万') != -1:        install_new.append(i)    else:        install_new.append(str(int(i)/10000) + '万')# 将install_new转换为序列对象,并替换数据集apps内原始字段install的值apps['install'] = pd.Series(install_new)# 处理软件大小size,将数据统一为“MB”的单位size_new = []for i in apps['size']:# 判断软件大小是否已“KB”为单位    if i.find('KB') != -1:        size_new.append(str(round(float(i[:-2])/1024,2)) + 'MB')    else:        size_new.append(i)# 将size_new转换为序列对象,并替换数据集apps内原始字段size的值apps['size'] = pd.Series(size_new)        # 查看数据转换后的前10行apps.head(10)

640?wx_fmt=png

案例3:词频统计

如下图所示,这是一篇新闻报道,如何基于该报道完成词频统计的操作?由于实际工作中评论数据的分析会涉及到敏感信息,故这里用新闻报道代替,但下文中所介绍的代码核心部分基本类似。:

640?wx_fmt=png


# 导入第三方模块import jieba  # 用于中文句子的切词import collections  # 用于词频的排序# 读入新闻报道fn = open('news.txt', encoding='utf-8')news = fn.readlines()# 将新闻报道的各段内容拼接为一个整体news = ''.join(news)# 删除特殊字符,如“\n”news = news.replace('\n', '')# 对新闻内容切词,并保留1个长度以上的词words = []for i in jieba.lcut(news):    # 通过逻辑判断,保留至少包含两个字符的词    if len(i) > 1:        words.append(i)# 词频统计,并将词频结果存储到字典中wf = {}for i in set(words):    wf[i] = words.count(i)# 对词频结果做排序collections.Counter(wf).most_common()

640?wx_fmt=png

结语

OK,今天的内容就分享到这里,如果你有任何问题,欢迎在公众号的留言区域表达你的疑问。同时,也欢迎各位大咖在留言区分享你们自己的策略,我会第一时间将你的留言分享给大家。

【数据链接】

链接

https://pan.baidu.com/s/18Q8WHJW0etG__pxLv_-rng

提取码zznv


星球伙伴招募

限时招募100个粉丝,我们一起学习和成长!

640?wx_fmt=png

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Sim1480

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值