
BigData/Cloud Computing
本专栏主要撰写BigData、Cloud Computing相关的经典案例。
一个处女座的程序猿
人工智能硕博生,目前兼职国内外多家头部人工智能公司的AI技术顾问。拥有十多项发明专利(6项)和软件著作权(9项),多个国家级证书(2个国三级、3个国四级),先后获得国内外“人工智能算法”竞赛(包括国家级、省市级等,一等奖5项、二等奖4项、三等奖2项)相关证书十多个,以上均以第一作者身份,并拥有省市校级个人荣誉证书十多项。正在撰写《人工智算法最新实战》一书,目前已37万字。
-
原创 Python之pyspark:pyspark的简介、安装、使用方法之详细攻略
Python之pyspark:pyspark的简介、安装、使用方法之详细攻略目录pyspark的简介pyspark的安装pyspark的使用方法pyspark的简介 Spark是一个用于大规模数据处理的统一分析引擎。它提供Scala、Java、Python和R中的高级api,以及一个优化的引擎,该引擎支持用于数据分析的通用计算图。它还支持一组丰富的高级工具,包括用于SQL和DataFrames的Spark SQL、用于机器学习的MLlib、用于图形2018-05-06 14:00:5813042
2
-
原创 DataTransmission:免费薅羊毛,Are you kidding me? 镭速传输 “百日计划”提前大曝光!Raysync传输协议要开放?
DataTransmission:镭速传输 “0元百日计划”提前大曝光!Raysync传输协议要开放?导读:镭速传输Raysync自成立之始便一直专注于为企业提供一站式大文件传输解决方案。作为企业级大文件传输的领军品牌,镭速传输已经为IT互联网、金融、影视、生物基因、制造业等众多领域的2W+企业提供了高性能、稳定安全的数据传输服务。目录镭速传输 “0元百日计划”提前大曝光!Raysync传输协议要开放?0元百日计划Raysync超高速传输协议镭速传输专业版能...2020-09-08 18:04:0110292
0
-
原创 BigData之Storm:Apache Storm的简介、深入理解、下载、案例应用之详细攻略
BigData之Storm:Apache Storm的简介、深入理解、下载、案例应用之详细攻略目录Apache Storm的简介Apache Storm的深入理解1、Storm与hadoop2、Apache Storm的APIApache Storm的下载Current 2.2.x ReleaseApache Storm的案例应用1、Apache Storm集成Apache Storm的简介 Apache Storm是一个免费的2018-05-16 20:10:5610823
4
-
原创 BigData之Hive beeline:beeline的简介、使用方法之详细攻略
BigData之Hive beeline:beeline的简介、使用方法之详细攻略目录beeline的简介beeline的使用方法1、命令行参数解释2、beeline的输出格式2.1、table2.2、vertical2.3、xmlsttrbeeline的简介 Hadoop2的Hive采用了新的HiveServer2,而HiveServer2提供了一个新的命令行工具Beeline,它基于SQLLine CLI的JDBC客户端,因此SQLL...2020-08-03 18:09:483686
0
-
原创 Database之SQLSever:SQLSever数据库管理学习并深入理解SQL命令语句进阶综合篇《初级→中级→高级》(持续更新,建议收藏)
Database之SQLSever:SQLSever数据库管理学习并深入理解SQL命令语句综合篇《初级→进阶中级→高级》(持续更新,建议收藏)SQLSever数据库管理学习并深入理解SQL命令语句综合篇《初级→进阶中级→高级》了解大数据必备技能BigData:大数据开发的简介、核心知识(linux基础+Java/Python编程语言+Hadoop{HDFS、HBase、Hive}+Docker)、经典场景应用之详细攻略进阶数据库Database:Database数...2020-07-27 23:18:003847
2
-
原创 Database之SQLSever:SQL函数(字符串函数、数学函数、文本和图像函数、日期和时间函数、系统函数等)相关概念及其相关案例之详细攻略
Database之SQLSever:SQL函数(字符串函数、数学函数、文本和图像函数、日期和时间函数、系统函数等)相关概念及其相关案例之详细攻略目录SQL函数(字符串函数、数学函数、文本和图像函数、日期和时间函数、系统函数等)相关概念及其相关案例字符串函数数学函数文本和图像函数日期和时间函数系统函数SQL函数(字符串函数、数学函数、文本和图像函数、日期和时间函数、系统函数等)相关概念及其相关案例SQL函数:对输入参数值返回一个具有特点关...2020-07-27 22:48:032659
0
-
原创 Database之SQLSever:T-SQL数据语言操作(数据定义语句DDL、数据操作语句DML、数据控制语句DCL、其他基本语句、流程控制语句、批处理语句)概念及其相关案例之详细攻略
Database之SQLSever:T-SQL数据语言操作(数据定义语句DDL、数据操作语句DML、数据控制语句DCL、其他基本语句、流程控制语句、批处理语句)概念及其相关案例之详细攻略目录T-SQL数据语言操作数据定义语句DDL数据操作语句DML数据控制语句DCL其他基本语句—DECLARE数据声明、SET数据赋值、PRINT数据输出声明两个局部变量并为其赋值流程控制语句BEGIN AND语句条件判断IF ELSE语句GOTO语句批处理...2020-07-27 22:23:483307
0
-
原创 Database之SQLSever:SQL命令实现理解索引、规则、默认概念及其相关案例之详细攻略
Database之SQLSever:SQL命令实现理解索引、规则、默认概念及其相关案例之详细攻略目录SQL命令实现理解索引、规则、默认概念索引规则创建规则、把自定义规则绑定到列、验证规则作用、取消规则绑定、删除规则默认创建默认、把自定义默认绑定到列、验证默认作用、取消默认绑定、删除默认SQL命令实现理解索引、规则、默认概念索引索引即查询,包括聚集索引、非聚集索引;T1、对象资源管理器法:点击数据库下的表,点击表下的索引,右键,新建...2020-07-27 22:07:222666
0
-
原创 Database之SQLSever:SQLSever数据表管理(GUI法/SQL语句命令法两种方法实现建立表、修改表,以及增、删、改、查)之详细攻略
Database之SQLSever:SQLSever数据表管理(GUI法/SQL语句命令法两种方法实现建立表、修改表,以及增、删、改、查)之详细攻略目录一、两种方法建立表、修改表,插入多条数据记录T1、图形化用户界面GUI法T2、SQL命令语句法二、利用SQL命令对数据表实现增、删、改、查1、表的结构层面1.1、insert增加数据2、表的数据层面2.1、增add2.2、删delete、drop2.3、改exec、ALTER、UPDATE2.4...2020-07-27 19:34:202506
0
-
原创 Database之SQLSever:SQLSever数据库管理(GUI法/SQL语句命令法两种方法实现备份(完整备份、差异备份、日志备份)、还原、删除、修改数据库等案例)之详细攻略
Database之SQLSever:SQLSever数据库管理(GUI法/SQL命令语句法两种方法实现备份(完整备份、差异备份、日志备份)、还原、删除、修改数据库、等案例)之详细攻略目录数据库管理数据库管理操作的两种方法T1、图形化用户界面GUI法T2、SQL命令语句法SQL命令语句法及使用大全1、以案例为导向分别采用GUI法和SQL命令法两种方法实现创建数据库(主文件组、次文件组、日志)T1、图形化用户界面GUI法T2、SQL语句命令语句法——先判断再创建2、备份2020-07-26 18:51:162410
0
-
原创 Database之SQLSever:SQLSever基础知识进阶、软件安装注意事项、软件使用经验总结之详细攻略
Database之SQLSever:SQLSever基础知识进阶、软件安装注意事项、软件使用经验总结之详细攻略目录SQLSever基础知识进阶数据库相关基本概念主键/外键、标识符、通配符、数据类型以及数据类型转换函数主键/外键标识符、通配符数据类型以及数据类型转换函数软件安装注意事项SQLSever软件认知软件安装及其注意事项1、登录时的两种方法进行身份验证软件使用经验总结1、以按钮为导向2、对象资源管理器2.1、利用分离、附加某个数据库实2020-07-26 11:00:312903
0
-
原创 Database:Database数据库的简介、类型及其区别(关系数据库VS非关系型数据库)、案例应用之详细攻略
Database:Database数据库的简介、类型及其区别(关系数据库VS非关系型数据库)、案例应用之详细攻略目录Database数据库的简介1、数据库的发展历史:80年代以来的关系型数据库→基于分布式技术云计算和大数据时代的非关系型数据Database数据库的类型1、关系数据库——Mysql、Oracle、SQLServer、Mysql、DB21.1、 数据库的常用的增删改查四种操作:SELECT、INSERT、UPDATE、DELETE2、非关系型数据库(NoSQL2020-07-26 09:35:173827
1
-
原创 BigData之Spark:Spark计算引擎的简介、下载、经典案例之详细攻略
Spark:Spark计算引擎的简介、下载、经典案例之详细攻略目录Spark的简介1、Spark三大特点Spark的下载Spark的经典案例1、Word Count2、Pi Estimation3、Text Search4、Prediction with Logistic RegressionSpark的简介 Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP2020-01-08 14:46:092615
0
-
原创 BigData:大数据开发的简介、核心知识(linux基础+Java/Python编程语言+Hadoop{HDFS、HBase、Hive}+Docker)、经典场景应用之详细攻略
BigData:大数据开发的简介、核心知识(linux基础+Java/Python编程语言+Hadoop{HDFS、HBase、Hive}+Docker)、经典场景应用之详细攻略BigData:大数据简介及以Hadoop生态系统为基础带你了解大数据必须掌握的那些知识(HDFS、HBase、Hive、MongoDB,Spark等等)导读:最近几天,有很多很多的网友留言都在咨询——如何学习大数据开发,以及如何跟上大数据时代而不被抛弃。今天周末,博主花了一段时间,统一采用本文章,以Hadoop生态系统布局进2020-07-25 13:58:146345
0
-
原创 BigData之MongoDB:MongoDB基于分布式文件存储数据库的简介、下载、案例应用之详细攻略
BigData之MongoDB:MongoDB基于分布式文件存储数据库的简介、下载、案例应用之详细攻略目录MongoDB的简介1、MongoDB的主要功能特性2、对MongoDB进行增删改查(CRUD)操作MongoDB的下载MongoDB的案例应用1、MongoDB适用和不适用的场景MongoDB的简介 MongoDB是基于分布式文件存储的数据库,高性能、可扩展、易部署、易使用,存储数据非常方便。由C++语言编写。旨在为WEB2020-01-04 15:08:312073
0
-
原创 BigData之Hive:Hive数据管理的简介、下载、案例应用之详细攻略
BigData之Hive:Hive数据管理的简介、下载、案例应用之详细攻略目录Hive数据管理的简介1、Hive的适用场景——不适合那些需要高实性的应用(不能够在大规模数据集上实现低延迟快速的查询)、不适合用联机(online)事务处理、不提供实时查询2、Hive 的设计特点3、Hive数据存储模型的四类数据模型—Table、External Table、Partition、BucketHive数据管理的下载Hive数据管理的案例应用1、Getting Started2020-03-31 23:03:401518
0
-
原创 BigData之Hbase:Hbase数据管理的简介、下载、案例应用之详细攻略
BigData之Hbase:Hbase数据管理的简介、下载、案例应用之详细攻略目录Hbase数据管理的简介——基于Hadoop的非结构化、基于列的数据存储的数据库1、HBase的架构体现及与HDFS、MapReduce、Zookeeper之间关系2、Hbase的访问接口3、HBase中的所有数据文件都存储在Hadoop HDFS文件系统上,主要包括上述提出的两种文件类型:4、Hbase与传统的mysql、oracle的差别——列式数据与行式数据的区别——NoSql数据库与2020-02-29 23:23:151749
0
-
原创 BigData之Hadoop:Hadoop的简介、深入理解、下载、案例应用之详细攻略
BigData之Hadoop:Hadoop的简介、深入理解、下载、案例应用之详细攻略目录Hadoop的简介1、HDFS体系结构图Hadoop的深入理解0、深入了解Hadoop的其它相关基础知识0.1、Hbase数据管理——Hadoop database0.2、Hive数据管理——建立在Hadoop上的数据仓库基础架构0.3、IDS表0.4、MongDB1、Hadoop的三大特性——可靠、高效、可伸缩2、Hadoop的五大优点——高可靠性、高扩展性、高效性、高容2020-02-29 23:20:321780
0
-
原创 CSDN:借助工具对【本博客访问来源】进行数据图表可视化(网友主要来自美国、新加坡、日本、英德加澳等)——记录数据来源截止日期20200718晚上22点
CSDN:借助工具对【本博客访问来源】进行数据图表可视化(网友主要来自美国、新加坡、日本、英德加澳等)——记录数据来源截止日期20200718目录访客分析实时访客地域分布按照国家进行数据统计按照省市地区进行数据统计系统环境(屏幕分辨率、flash版本、语言环境、网络提供商)性别、年龄、学历、职业、兴趣统计访问时长访客分析实时访客地域分布按照国家进行数据统计按照省市地区进行数据统计系统环境(...2020-07-18 22:02:553384
0
-
原创 BigData/Cloud Computing:购买并登录Windows弹性云服务器之详细攻略(图文教程)—更优惠、更贴心!
BigData/Cloud Computing:购买并登录Windows弹性云服务器导读:弹性云服务器(Elastic Cloud Server)是由CPU、内存、镜像、云硬盘组成的一种可随时获取、弹性可扩展的计算服务器,同时它结合VPC、虚拟防火墙、数据多副本保存等能力,为您打造一个高效、可靠、安全的计算环境,确保您的服务持久稳定运行。 本指南以购买密码登录方式的ECS为例,指导您快速购买并登录密码鉴权方式的Windows弹性云服务器。目录Step1 ...2020-06-20 10:54:234632
0
-
原创 Algorithm之PrA:PrA之LP线性规划算法经典案例剖析+Matlab编程实现
Algorithm之PrA:PrA之LP线性规划算法经典案例剖析目录一、以例题分析步骤理解LP线性规划算法二、Matlab编程实现三、将问题可以转化为线性规划的问题四、建模思路全过程一、以例题分析步骤理解LP线性规划算法1、分析问题 某机床厂生产甲、乙两种机床,每台销售后的利润分别为4000 元与3000 元。生产甲机床需用 ...2018-09-08 10:41:5011000
0
-
原创 ML之ECS:利用ECS的PAI进行傻瓜式操作机器学习的算法
ML之ECS:利用ECS的PAI进行傻瓜式操作机器学习的算法目录ECS的PAI的简介优质、丰富的机器学习算法ECS的PAI的操作攻略ML案例ECS的PAI的简介 阿里云机器学习是基于阿里云分布式计算引擎的一款机器学习算法平台,以极低的代价帮助您的业务从BI时代跨入AI时代,真正实现人工智能触手可及。算法丰富 :100余种算法组...2018-06-28 09:01:147971
0
-
原创 ECS:利用ECS进行深度学习详细攻略
ECS:利用ECS进行深度学习详细攻略目录ECS进行DL详细步骤ECS进行DL详细步骤2018-04-18 10:19:497617
1
-
原创 Colaboratory:手把手教你使用Google免费的云端IDE进行深度学习(免费的GPU加速)的详细攻略
Colaboratory:手把手教你使用Google免费的云端IDE进行深度学习(免费的GPU加速)的详细攻略目录Colaboratory简介Colaboratory使用步骤(1)、首先登陆谷歌云盘(3)、然后取名为ipython notebook(4)、然后就进入IDE(4)、运行时选择软件Python3和GPU加速即可(5)、最后点击保存...2018-03-21 12:40:5823012
3
-
原创 BigData:根据最新2018.07.19《财富》世界500强榜单进行大数据分析
BigData:根据最新2018.07.19《财富》世界500强榜单进行大数据分析目录一、2018《财富》世界500强榜单数据源二、根据大数据进行图表可视化1、数据图表统计2、绘制2018《财富》世界500强公司所属国家坐标地点分布图3、绘制2018《财富》世界500强公司主要分布在的国家3、绘制2018《财富》世界前100强公司主要分布在的国家...2018-07-20 11:44:3411790
0
-
原创 BigData:根据最新2018人工智能行业创新企业Top100名单,绘制AI地区热点图,一目了然,看清哪个是AI最热门城市,以及VC最AI的热门领域
BigData:根据最新2018人工智能行业创新企业Top100名单,绘制AI地区热点图,一目了然,看清哪个是AI最热门城市,以及VC最AI的热门领域目录分析结果视频观看:2018根据最新2018人工智能行业创新企业Top100名单,绘制AI地区热点图,一目了然,看清哪个是AI最热门城市,以及VC最AI的热门领域分析结果上1、北上广深二、再上词云...2018-07-18 17:18:138930
0
-
原创 BigData:绘制2018年福布斯中国富豪榜人根据出生地绘制个人或其家族财富分布热点图
Python:绘制2018年福布斯中国富豪榜人根据出生地绘制个人或其家族财富分布热点图目录输出结果设计思路输出结果values=[453, 390, 303, 31234, 219, 201, 182, 174, 156, 153, 125, 120, 117, 113, 113, 108, 101, 97, 95, 92, 81, 77, 77,...2018-07-19 14:04:358338
0
-
原创 BigData:根据最新2018人工智能行业创新企业Top100名单,绘制AI行业VC最AI的热门领域(投资领域)
BigData:根据最新2018人工智能行业创新企业Top100名单,绘制AI行业VC最AI的热门领域(投资领域)目录AI行业VC最AI的热门领域分布图1、分析结果2、北上广深视频观看:2018根据最新2018人工智能行业创新企业Top100名单,绘制AI地区热点图,一目了然,看清哪个是AI最热门城市,以及VC最AI的热门领域AI行业VC最AI的热门领域...2018-07-19 19:33:388683
0
-
原创 BigData:绘制2018年福布斯中国富豪榜人名坐标地图(解决多个人名显示在同一个家乡地点)
BigData:绘制2018年福布斯中国富豪榜人名坐标地图(解决多个人名显示在同一个家乡地点)目录一、总体设计思路1、思路框图2、最终解决二、挖坑、埋坑1、第一次坑2、第二次坑3、第三次坑4、第四次坑三、最终解决以及由问题深度思考1、深度刨析2、思考扩展一、总体设计思路1、思路框图2、最终解决...2018-07-16 18:41:088101
0
-
原创 BigData:基于python编程—根据中国各个城市地理坐标+人口、GDP大数据进行标记中国地图、热点图、动态图
BigData:基于python编程—根据中国各个城市地理坐标+人口、GDP大数据进行标记中国地图、热点图、动态图目录输出结果1、地理坐标图2、GDP热点图3、人口热力图输出结果1、地理坐标图根据中国各个城市地理坐标标记中国地图2、GDP热点图中国部分城市GDP贡献率(暂不包括港澳台)3、人口热力图中国部分城市...2018-07-15 14:46:4312506
6
-
原创 BigData之matplotlib:爬虫2018年福布斯中国富豪榜进行数据统计分析,大数据告诉你一些不可思议的事情
BigData之matplotlib:爬虫2018年福布斯中国富豪榜进行数据统计分析,大数据告诉你一些不可思议的事情目录数据统计分析1、2018年福布斯中国富豪榜(资产≥60亿美元)财富地区分布情况2、2018年福布斯中国富豪榜(资产≥60亿美元)财富资产来源分布情况3、2018年福布斯中国富豪榜(资产≥60亿美元)财富性别情况4、2018年福布斯中国富豪榜(资...2018-07-13 20:47:049521
0
-
原创 Dataset之CIFAR-10:CIFAR-10数据集简介、下载、使用方法之详细攻略
Dataset之CIFAR-10:CIFAR-10数据集简介、下载、使用方法之详细攻略目录CIFAR-10简介1、与MNIST 数据集中目比, CIFAR-10 真高以下不同点2、TensorFlow 官方示例的CIFAR-10 代码文件3、CIFAR-10 数据集的数据文件名及用途CIFAR-10下载1、下载CIFAR-10 数据集的全部数据CIFAR...2018-09-20 20:29:1657098
8
-
原创 AI之FL:联邦学习(Federated Learning)的简介、入门、应用之详细攻略
AI之FL:联邦学习(Federated Learning)的简介、入门、应用之详细攻略导读 2019 年2 月,微众银行 AI 团队自主研发的全球首个工业级联邦学习框架 FATE(Federated AI Technology Enabler)正式发布,提供基于数据隐私保护的分布式安全计算框架,为机器学习、深度学习、迁移学习算法提供高性能的安全计算支持,此外,FATE 还提供友...2019-04-27 22:13:4115013
0
-
原创 Bigdata之sql+mplot:利用数据库信息和基于mplot将信息数据各种可视化(图表+地图+动态图)
Bigdata之sql+plot:利用数据库信息和基于mplot将信息数据各种可视化目录1、图表可视化1、图表可视化2018-07-25 20:11:328734
0