2020-12-02 技术总结

最新推荐文章于 2021-04-08 19:57:53 发布
最新推荐文章于 2021-04-08 19:57:53 发布
阅读量72 收藏
点赞数
分类专栏： 数据分析日常技术总结 文章标签： python 大数据 机器学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_38395376/article/details/110517714
版权

2号：关于自己过于执着于表的处理的反思

  1. 这几天对于表的处理过于执着，导致了很多代码重复且枯燥，遇到不会的复杂表，更是捉襟见肘，所以应当平稳下心，专注于代码和表的本身，跳出单表处理的思维，上升到高度然后总体分类表的类别，然年后按类处理。
  2. 对于单表处理，尽量先去重
data.drop_duplicates()
  1. 然后将日期转化为datetime 格式
pd.to_datetime(data["日期"])
数据小鱼Rexa
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
2020-11-10
qq_51985243的博客
11-10 1305
文章目录 1.进程基本概述 2.进程的组成部分 3.进程的环境 4.进程状态 5.进程优先级 6.进程管理命令 7.vmstat 8.后台运行作业 1.进程基本概述 进程是已启动的可执行程序的运行中实例。 /proc目录下以数字为名的目录，每一个目录代表一个进程，保存着进程的属性信息。每一个进程的PID是唯一的，就算进程退出了，其它进程也不会占用其PID 2.进程的组成部分 已分配内存的地址空间安全属性，包括所有权凭据和特权程序代码的一个或多个执行线程进程状态 3.进程的环境 本地和全局变量当前调度上下文分
shiro CVE-2020-1957
最新发布
王嘟嘟的博客
02-19 898
也就是说，shiro认为/a/1/是一个不需要授权就可以访问的接口，但是spring认为/a/1/访问的是/a/1需要授权的接口，spring认为shiro是安全的，所以直接放行了。
2020-12-02 NLP新闻文本分类用到的技术总结
杰出的小茄子de博客
01-04 187
1、 2、 3、 4、 5、 6、 7、 8、 9、
2020-12-26
热门推荐
wubaoyu123的博客
12-26 1万+
博客园Logo 首页 新闻 博问 专区 闪存 班级 代码改变世界 搜索 注册 登录 罗西的思考 一手伸向技术，一手伸向生活 博客园 首页 新随笔 联系 订阅 管理 随笔 - 113 文章 - 0 评论 - 14 [从源码学设计]蚂蚁金服SOFARegistry之Data节点变更 [从源码学设计]蚂蚁金服SOFARegistry之Data节点变更 目录 [从源码学设计]蚂蚁金服SOFARegistry之Data节点变更 0x00 摘要 0x02 引子 0x03 业务范畴 3.1 DataServer 数据
2020-12-28
xiexuzhao的专栏
12-28 870
https://www.cnblogs.com/JQKA/p/12172826.html 我现在用的主题是： https://github.com/DONGChuan/Yummy-Jekyll 另外，我这里总结了几个网上比较推崇的主题： 仓库地址：https://github.com/DONGChuan/Yummy-Jekyll 效果：http://dongchuan.github.io/ 效果：https://blog.xinpapa.com/tag/ 仓库地址：https://github.
bugreport-LIO-AN00m-HUAWEILIO-AN00m-2022-09-16-15-08-12.zip
09-16
总结来说，"bugreport-LIO-AN00m-HUAWEILIO-AN00m-2022-09-16-15-08-12.zip"这个压缩包为我们提供了一个全面了解Android设备运行状态的窗口，通过逐一分析这些文件，开发者和技术支持团队能够有效地诊断和解决系统...
芯邦量产工具2019-07到2020-09年所有的.zip
11-26
这个系列的工具主要针对芯邦的CBM209X系列芯片，例如CBM209X UMPToolV7200(2020-03-19)、CBM209X_UMPToolV7200(2019-12-10)以及CBM209X_UMPToolV7200(2020-09-02)_N28等。这些版本的工具可能包含了新的固件更新、...
Ultimate 2021-03-02 16-12-43.zip
03-02
标题中的"Ultimate 2021-03-02 16-12-43.zip"可能指的是一个包含一系列文件的压缩包，创建日期为2021年3月2日的16时12分43秒。这个时间戳表明这是某个项目或工作的一个特定版本或快照，可能是为了备份、分享或记录...
委托单_CEPRI-DC(JZ)-2020-001_武汉市中电检测有限公司1
08-08
收样日期为2020年01月02日，样品状态被标记为完好。 3. **协议内容**： - **检测类别**：选择了委托检验，而非型式试验、抽样检验或其他。这表明委托方要求对特定的工频场强计进行定制化的检测。 - **出具报告...
ISO SAE 21434.DIS 2020.02.12.pdf
09-22
总结来说，《ISO SAE 21434.DIS 2020.02.12.pdf》是汽车行业网络安全领域的一个里程碑，它为车辆电气和电子系统的安全设计、开发和管理提供了全面的指导框架，旨在保障道路车辆在数字化时代下的安全行驶。
数据分析：数据预处理之随机森林特征筛选
qq_38395376的博客
12-07 3713
随机森林特征筛选 关于的特征的筛选，可以利用皮尔逊系数，如果是分类的变量的话可以用卡方检验，这些都是再用具体算法跑之前所做的数据处理。我们还可以用一个算法先跑，然后看数据属性的特征，也就是选择主要的属性。 from sklearn.model_selection import cross_val_score, ShuffleSplit from sklearn.ensemble import RandomForestRegressor from sklearn.pipeline import Pipelin
数据分析：数据预处理之灰度关联分析
qq_38395376的博客
11-30 2569
灰度相关 这个算法其实就是检测其他属性对于主要测的属性的相关性分析，其中最后值在[0,1]之间。 首先需要进行获取数据，利用pandas就可以读取csv或者excel，甚至用数据库导入就可以获取数据 其次进行无量纲化，即标准化，可以用均值法，Z-score，max-min等等方法进行标准化 然后选取主测列和其他列，分析主测列与其他列关系 依据算法带入公式 根据算法的结果形成一个数列Series，然后查看一一对应，选取较大关系的属性，可以以0.8或者0.7为阈值，这个阈值视情况而定，不同项目需求不相同阈值
Problem: MLPClassifier:ConvergenceWarning: Stochastic Optimizer: Maximum iterations (200) reached
qq_38395376的博客
03-05 1287
MLPClassifier:ConvergenceWarning: Stochastic Optimizer: Maximum iterations (200) reached **Background:**Accourding to the description of this problem, it means that this model can not be the best state for trainning data. Solution: When you see warning, as
数据分析：数据预处理之Pearson相关系数
qq_38395376的博客
12-08 1083
Pearson相关系数 corr()函数是python中pandas包的集成函数，返回的是相关系数矩阵 我们假设data是DataFrame格式 data.corr() 返回的就是每一个属性对另一个属性的相关系数 data.corr()["房价"] 即显示房价和其他因素的相关系数 data["工资"].corr()["房价"] 即显示工资和房价的相关系数。 ...
Pandas预处理数据总结
qq_38395376的博客
12-07 541
将用户所自己填写或者爬虫爬下来的日期数据转化为DataFrame中的日期格式 data1["日期"]=pd.to_datetime(data1["日期"]) 将日期属性变为主要排序索引，然后可以利用loc进行以日期为单位的数据查询 data1.set_index(pd.to_datetime(data1["日期"]),inplace= True) iloc是按照真正的行数来取数据，并不管当时数据的index到底是多少 a=data.iloc[1:,:] 获取2018年中每月月初数据.
Keras回归与分类
qq_38395376的博客
04-08 249
Keras 回归与分类 思维导图 使用Dense层进行操作二分类、多分类和回归预测。
01-25 工作&技能总结
qq_38395376的博客
01-25 239
基础能力 目前文本编辑能力精进很多：虽然之前英文论文写作和中文论文写作有不同，但是我还是尽自己最大的努力适应中文写作。 沟通能力有待加强：在英国的时候，沟通的目的是解决问题（没有过多考虑他人感受哈），如今深入职场，过直的言语会导致，某些人的反感（也是正常，毕竟人情社会）。面对专业知识和自己不在一个水平线的人，要求自己尽量不反驳他，大家开开心心最好了，不要浪费时间在不必要的人身上，有心就帮助他补充知识，嫌麻烦也属实正常。告诫自己说话先过脑，在中国，人比事重要！ 英语能力：退化严重，最近仍在听bbc6分钟和t
2020-11-27技术总结
qq_38395376的博客
11-27 232
27号:关于Pandas在Python中的运用 矩阵转置可以用XXXXX.T来完成转置操作 x=x.iloc[:,1:].T pandas切片，可以用正常的list切片操作，也可以用[：，：]，前者操作行，后者操作列，即可操作多维度的表 ck=x.iloc[1,:] cp=x.iloc[0:1,:] cp=cp.append(x.iloc[2:,:]) 若有2个Series要合并，可以用DataFrame强制转换2个Series，然后用merge函数进行表合并，其中参数设置left_index
2021-1-13 技术总结
qq_38395376的博客
01-13 197
关于sklearn包中GridSearchCV的使用方法 具体参数参考：https://scikit-learn.org/stable/modules/generated/sklearn.model_selection.GridSearchCV.html?highlight=gridsearchcv#sklearn.model_selection.GridSearchCV 调度GridSearchCV的方法可以使用 from sklearn.model_selection import GridSear
ESP-12F WiFi模块规格与功能详解
ESP-12F是一款由深圳市安信可...ESP-12F规格说明书是一份详尽的技术文档，包含了模块的硬件特性、接口配置、性能指标以及使用注意事项，对于想要利用该模块进行物联网项目开发的工程师来说，它是不可或缺的参考资料。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值