![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
笔记
NEO-X
这个作者很懒,什么都没留下…
展开
-
pyspark前言说明
更多信息https://blue-shadow.top/书籍<<Python在大数据平台的应用>>更多信息请关注本书附书代码:附书代码Github工程:https://github.com/Shadow-Hunter-X主要内容说明主要按以下3个大点进行说明,也符合进行操作过程种的步骤,读取数据-操作数据-分析保存数据.总结起来就是:从哪里获取数据 ; 如何操作数...2020-02-13 09:35:57 · 216 阅读 · 0 评论 -
Hive数据操作
更多信息https://blue-shadow.top/附书代码Github工程:https://github.com/Shadow-Hunter-X管理表中装载数据使用LOAD命令装载数据,分别可以从本地和HDFS上进行上传。使用的命令分别是 LOAD DATA LOCAL INPATH ‘file://local_path’LOAD DATA INPATH ‘HDFS://hdfs...2020-02-11 22:54:05 · 392 阅读 · 0 评论 -
Hive数据查询
更多信息https://blue-shadow.top/附书代码Github工程:https://github.com/Shadow-Hunter-XSELECT子句针对复合类型列的查询(数组,字典,结构)含有复合类型列的样表:CREATE TABLE IF NOT EXISTS employees_t( name STRING COMMENT 'Employee nam...2020-02-10 20:45:32 · 231 阅读 · 0 评论 -
Hive数据定义
更多信息https://blue-shadow.top/附书代码Github工程:https://github.com/Shadow-Hunter-XHive数据定义HiveQL是Hive查询语言,作为ANSI SQL的一种方言。但是其还是有和关系数据库支持的SQL中有本质的差异。如:Hive不支持事务,且默认情况下不支持行级别插入,更新,删除操作。虽然可以在HiveQL中使用关联子句,但...原创 2020-02-10 13:45:47 · 194 阅读 · 0 评论 -
python-snakebite
更多信息https://blue-shadow.top/附书代码Github工程:https://github.com/Shadow-Hunter-XPython-Snakebite库Snakebite是由Spotify创建的python包, 它提供了python客户端库,运行以编程方式从Python应用程序访问HDFS。客户端库使用 protobuf 消息直接与 NameNode 通信。S...原创 2020-02-08 22:22:25 · 624 阅读 · 0 评论