关注
分享
数据指北Ai
知名国企开发工程师，目前大数据和后端开发，致力全栈。欢迎交流！！！
展开
-
Python大数据处理方案
Mysql SQLyog导入导出csv文件SQLyog 导出表中数据存为csv文件1. 选择数据库表 --> 右击属性 --> 备份/导出 --> 导出表数据作为 --> 选择cvs --> 选择下面的“更改” --> 字段 --> 可变长度--> 字段终止与 -->输入逗号，(这是重点，否则导出的csv文件内容都在一列中，而不是分字段分...转载 2018-03-26 21:30:37 · 39027 阅读 · 7 评论 -
Anaconda 安装 pydot 绘制决策树
在科学上网的前提下，控制台输入以下命令：首先安装 graphviz，这是计算的核心 packageconda install graphviz 再安装 pydot ，这是 graphviz 的 python 接口conda install pydot 除了上述命令之外，还需要将 graphviz 环境安装在机子上，这才是真正执行渲染的部分，并且要将安装路径加入环境变量中安装包下载地址： https...原创 2018-06-09 21:48:56 · 3074 阅读 · 3 评论 -
京东爬虫记录
一个博主的京东爬虫，自己改写成爬取京东书籍。两个爬虫：1、爬取京东书籍信息。2、爬取京东评论信息公用文件：JingdongspiderItem、MySQLPipeline、settings1、爬取京东书籍信息# -*- coding: utf-8 -*-import requestsfrom jingdongspider.items import Jingdongspider...原创 2019-06-03 21:44:24 · 26319 阅读 · 0 评论 -
数据分析项目实战
数据获取：1.主动获取--》爬虫 2.被动。api接口 股票市场分析实战 通过pandas_datareader来获取数据import pandas_datareader as p...原创 2018-03-14 16:55:39 · 18820 阅读 · 4 评论 -
数据挖掘实战之航空公司客户价值分析
背景与挖掘目标1. 背景航空公司业务竞争激烈，从产品中心转化为客户中心针对不同类型客户，进行精准营销，实现利润最大化建立客户价值评估模型，进行客户分类，是解决问题的办法2. 挖掘目标借助航空公司客户数据，对客户进行分类对不同的客户类别进行特征分析，比较不同类客户的客户价值对不同价值的客户类别提供个性化服务，制定相应的营销策略详情数据见数据集内容中的air_data.csv和客户信息属性说明。分析方...转载 2018-03-15 15:34:35 · 11782 阅读 · 4 评论 -
利用LM神经网络算法自动识别窃电用户
背景与挖掘目标背景传统的防窃漏电方法主要通过定期巡检、定期校验电表、用户举报窃电等方法来发现窃电或计量装置故障。但这种方法对人的依赖性太强，抓窃查漏的目标不明确。通过采集电量异常、负荷异常、终端报警、主站报警、线损异常等信息，建立数据分析模型，来实时监测窃漏电情况和发现计量装置的故障。目标归纳出窃漏电用户的关键特征，构建窃漏电用户的识别模型。利用实时检测数据，调用窃漏电用户识别模型实现实时诊断。分...转载 2018-03-17 16:32:52 · 3658 阅读 · 7 评论 -
初识网络爬虫
网络爬虫已经是一个老生常谈的问题，网上也有很多的资料，不过这里我还是决定记录下自己的学习心得。简单的来说，网络爬虫就是自动从互联网中定向或不定向的采集信息的一种程序。网络爬虫有很多种类型，常用的有通用爬虫，聚焦网络爬虫等。网络爬虫可以做很多事情，比如通用的网络爬虫可以应用在搜索引擎中，而聚焦爬虫可以从互联网中自动采集信息并代替我们筛选出相关的数据。一、通用网络爬虫原理：原创 2017-10-28 10:41:42 · 1767 阅读 · 0 评论