小数点data-CSDN博客

转载超全！我常用的70个数据分析网址

来源丨小蚊子数据分析大家好，我是小F～今天给大家分享的这篇文章，更像是一份数据分析常用网站字典，一共70个，可视化、词频词云、PPT模板等等面面俱到，值得收藏！数据可视化工具百度EChartshttp://echarts.baidu.com/Cytoscapehttp://www.cytoscape.org/图表秀http://www.tubiaoxiu.com/数据观http://shujuguan.cn/微博足迹可视化http://vis.pku.edu.cn/weibova/w

2021-08-05 10:21:50 1060

原创 Python机器学习库和深度学习库总结

Python机器学习库和深度学习库总结[转载]1. Scikit-learn（重点推荐）www.github.com/scikit-learn/scikit-learnScikit-learn 是基于Scipy为机器学习建造的的一个Python模块，他的特色就是多样化的分类，回归和聚类的算法包括支持向量机，逻辑回归，朴素贝叶斯分类器，随机森林，Gradient Boosting，聚类算法和DBSCAN。而且也设计出了Python numerical和scientific libraries Nu

2021-01-28 20:12:27 452

原创 ipynb文件报告自动化执行推送

ipynb文件报告自动化执行推送Jupyter notebook 文件对于数据科学代码执行和富文本报告的输出比较友好（兼容markdown文档，且代码块的结构形式）；但是ipynb文件并非标准的脚本文件，对于挂载定时自动化任务不太方便；还好有nbconvert包的支持，可操做ipynb文件的执行和转化，因此本文纪录如何挂载ipynb定时报告的执行和转化html及报告的推送。参考：nbconvert官方文档1、环境要求：Python3 版本jupyter notebooknbconvert

2021-01-18 13:03:30 894

原创 Python实现钉钉群消息推送

Python实现钉钉群消息推送对于某些自动化任务执行结果反馈，使用钉钉机器人消息替换繁琐的邮件发送方式使用钉钉机器人API，可以将任何你需要的服务消息推送到钉钉参考文档：钉钉机器人API接口文档python代码创建基本步骤Step1：新建钉钉群Step2：群设置>智能群助手>添加机器人Step3：自定义机器人Step4：复制token(token每个机器人具有唯一性【不可外传】)Step5：3种安全设置方式：(1)关键词：所发送的消息必须含有这个关键词；(2)

2021-01-15 09:47:55 688

原创 Typora 配置PicGo图片粘贴自动上传图床

# Typora 配置PicGo图片粘贴自动上传图床> Typora 是富文本写作利器，格式方便转换，博客&笔记创作常用的文本编辑器，可以粘贴图片，但是如果共享文档或者发布网络，经常会出现图片不显示，加载不全的问题（由于图片路径是本地路径）；借助Picgo来设置图片上传图床的功能，实现方便快捷的图片管理，上传，加载。## 一、PicGo 的安装### 1 . 介绍**PicGo个用于快速上传图片并获取图片 URL 链接的工具，丰富的图床及第三方开发的图床插件：**- `七牛

2021-01-14 15:15:10 538

原创 python安装包conda报错AttributeError: module ‘lib‘ has no attribute ‘Cryptography_HAS_SSL_ST‘

问题：python的conda不能安装任何包，报错如下：解决方法：1. 删除site-packages路径下的OpenSSL包即可rm -rf /home/user/anaconda3/lib/python3.6/site-packages/OpenSSL

2020-12-10 17:25:46 1767

原创 MySQL 导入excel、csv、txt 文件到数据库

MySQL学习—快速导入数据复习mysql 的建库、建表, 考虑后期将项目的数据逐渐迁入到服务器数据库，因此尝试着将数据传入到本地mysql数据库，期间碰到一坑；以下记录本次所碰到的坑。此过程中需修改的配置文件my.in.导入文件的路径问题导入数据某些字段中存在空值报错问题注意： mysql 需要很好的掌握my.in. 文件的配置，经常会用到1. 导入数据的步骤（1）建表...

2019-10-19 17:28:08 663

原创 AWS云服务系统配置R studio及anaconda

AWS云服务系统配置使用EDU版AWS 云服务器，搭建数据分析、挖掘平台，安装R 、python及其环境软件，仅供学习与参考。1. R及R studio sever 的安装1. 1 安装最新版的R由于云服务器默认安装的R 版本非最新版本，需要通过修改镜像源索引，才可安装最新版本的R 3.6添加镜像源索引sudo add-apt-repository "deb https://c...

2019-10-10 15:38:58 829 2

原创 X-gboost模型总结整理

一、 X-gboost模型总结整理X-gboost 是将多个树模型（若分类器）集成一个强分类器。可用于分类问题，也可用于预测值问题，只是不同问题使用的树模型不一样: 分类问题：决策树（C4.5,C5.0,CART) 预测问题：回归树（CART...

2019-09-25 16:24:14 4498

原创 R 语言安装 RImpala 包连接hive数据库

由于 Rimpala 已经不更新，从CARN里下架；所以install.packages('RImpala') 无效安装，报错。正确安装方法是从https://cran.r-project.org/src/contrib/Archive/RImpala/下载离线包，直接从本地安装。（其中最新版本是2015版）...

2019-07-24 22:36:39 608

原创 python 读取grb2文件相关配置文件及代码

1.下载wgirb2工具（用于读取grib2文件）网址： ftp://ftp.cpc.ncep.noaa.gov/wd51we/wgrib2【若无法下载或下载不了推荐已整理好直接使用整理好解压后直接使用】2.环境 python33.简单易行的代码：import osos.chdir('C:\\Users\\lvdian\\Desktop\\wgirb2' )#下载解压后wgirb...

2019-01-04 21:01:34 5944 2

原创多元线性回归OLS法求解-R语言自写代码

#######lm 编程实现mlr<-function(Y,X){ ####编写成一个函数mlr 调用格式mlr(Y=Y1,X=X2) Y1为因变量，X1为自变量矩阵 Y=data1[,1] X=data1[,-1] Intercept<-rep(1,nrow(X)) X=cbind(Intercept,X) X=as.matrix(X) Y=as.ma...

2019-01-02 20:50:18 3688

转载 R 语言数据分析/数据挖掘常用包

数据分析的流程主要包括以下几个4大步骤，而熟练掌握以下每个步骤的常用包，就能提高数据科学的效率与质量。1.数据读取2.数据清洗3.数据可视化4.数据挖掘细分为以下流程：1.1 数据导入 1.2 数据整理 1.3 反复理解数据 1.4 数据可视化 1.5 数据转换 1.6 统计建模 1.7 作出推断（比如预测） 1.8 沟通交流 1.9 自动化分析 2.0...

2018-07-30 21:31:33 6471