qq_50626322的博客

一、数据分析方法论主要是二、数据分析思路三、笔试面试问题1.逻辑回归和线性回归区别2.偏差与方差，如何解决3.决策树优点？过拟合怎么办？逻辑回归过拟合怎么办？4.树模型各算法区别及联系？5.SVM6.Kmeans的原理和步骤7.数据分析师和数据挖掘有什么区别？8.数据分析的框架或步骤9.交叉验证10.数据处理时，值缺失怎么处理？11.特征处理12.smote过采样做法13.准确率和召回率的定义14.L1和L2正则项的区别？15.辛普森悖论的问题16.中位数、平均数和众数的区别

之前学的刘顺祥的《python数据分析与挖掘》（清华大学出版社），里面包含十大常用的数据挖掘算法及案例实战，理论通俗易懂，又有大量实战案例，自己学的时候也整理了一下，整本书的思维导图如下。...

福建省城市5年前和现在的空气质量是否有变化，因此以福建省福州市，泉州市，厦门市为代表，分析这三个代表城市近5年来空气质量。 首先收集近5年来三个城市的空气质量数据。分析可知三个城市的AQI的曲线较为一致；5年空气质量优良率超过99.5%；影响福州空气质量的污染物主要是PM2.5和PM10。...

数据分析与数据挖掘的步骤流程：1、明确目标。2、数据搜集。如网上已有数据，爬虫，API。3、数据清洗。4、构建模型。5、模型评估。6、应用部署。利用爬虫爬取某气象网站的天气AQI（Air Quality Index, 空气质量指数）数据，并用图表工具分析数据，来判断福建省福州市，泉州市，厦门市近5年来空气质量是否有某些变化。爬虫四步骤：1、获取链接。2、发送请求。3、筛选数据。re，json,bs4,xpath等。4、保存数据...