linux/Hive/python/ES
文章平均质量分 73
linux/Hive/python/ES
BB大王
这个作者很懒,什么都没留下…
展开
-
ElasticSearch
一、ES的简单了解借鉴自:https://blog.csdn.net/laoyang360/article/details/522449171.1 ES定义Elasticsearch是一个开源的高扩展的分布式全文检索引擎;近乎实时的存储、检索数据;扩展性很好,可以扩展到上百台服务器,处理PB级别的数据;使用Java开发并使用Lucene作为其核心来实现所有索引和搜索的功能;但它的目的是通过简单的RESTful API来隐藏Lucene的复杂性,从而让全文搜索变得简单;ES主要解决的问题:1)原创 2022-01-20 12:35:32 · 192 阅读 · 0 评论 -
求求了记在脑子里吧憋搁着查了
json# load 针对文件句柄with open('demo.json', 'r') as f: a_json = json.load(f)# 也可以简写为:a_json = json.load(open('demo.json','r'))# loads 针对内存对象(json字符串)a_json = json.loads('{'a':'1111','b':'2222'}')# 需要读入文件时:with open('demo.json', 'r') as f: a_js原创 2021-03-16 14:09:17 · 832 阅读 · 1 评论 -
Hive 日常小实验
1. joincreate table dist1( bigint,id1 string)row format delimited fields terminated by '\t';insert into dist1 values(1,'a'),(2,'b'),(3,'c'),(4,'a'),(5,'b'),(6,'a');1 a2 b3 c4 a5 b6 acreate table dist2(id2 string,num bigint)row format delimited原创 2020-09-15 19:07:01 · 117 阅读 · 0 评论 -
HIVE常用指令
HIVE学习记录Hive是什么?Hive基本操作:建表查询Hive的执行顺序:Hive空值处理:其他:日常补充:Hive是什么?Hive:解决海量结构化日志的数据统计;基于Hadoop的数据仓库工具,将结构化的数据文件映射为一张表,并提供类SQL查询功能;本质:将HQL转化成MapReduce程序;Hive处理的数据存储在HDFS;Hive分析数据底层的默认实现是MapReduce;Hive执行程序运行在Yarn上;解析器,编译器,优化器,执行器;Hive基本操作:数据库操原创 2020-07-29 11:27:06 · 351 阅读 · 0 评论 -
Linux基本操作
文章目录1. 文件系统1.1 目录和路径1.2 文件权限2. 常用命令2.1 文件管理2.2 用户、权限管理2.3 系统管理3. vi编辑器4.远程操作5. webserver环境搭建6. shell 脚本7.其他Ubuntu快捷键功能Ctrl + Alt + t调出终端Ctrl + c终端中退出锁定Ctrl + Alt + 左右方向键切换工作区Ctrl + Alt + Shift + 左右方向键移动当前窗口移至其他工作区命令功能un原创 2020-06-27 11:45:57 · 398 阅读 · 0 评论