![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop学习
文章平均质量分 95
Edward.W
中二小码农,业界新手,善于学习
展开
-
[SQL系列] 从头开始学PostgreSQL 自增 权限和时间
SQL系列] 从头开始学PostgreSQL 事务 锁 子查询_Edward.W的博客-CSDN博客上一篇介绍了事务,锁,子查询事务有点像是原子操作,需要有完整性,要么全都完成了,要么全都没完成,事情不能只做一半。锁主要两种,共享锁和排它锁,可读不可写以及不可读写,以及细粒度的行级锁。子查询的话,其实就是嵌套的sql查询语句,和with有一定的相似。这次我们来介绍点自增,权限和时间。原创 2023-07-21 22:18:07 · 533 阅读 · 0 评论 -
Ubuntu 10.04蛋疼地配置Hadoop
首先由于我使用的是VMWare进行安装的Ubuntu 10.04的虚拟机比较蛋疼,因此显示的屏幕很小,在虚拟机中显示大屏幕的方法就是通过调整分辨率,然而在可视化界面中并没有找到调整分辨率的方式,因此就对/etc/X11/xorg.conf文件进行修改,蛋疼的是10.04也并没有这个文件,于是就自己创建了一个。首先cd /etc/X11创建文件 sudo touch xorg.conf编原创 2018-05-28 14:40:56 · 156 阅读 · 0 评论 -
Avro简单笔记介绍
Apache Avero是一个独立于编程语言的数据序列化系统,有一个被多种语言处理的数据格式。Avro的特点是,代码生成可选,意味着可以对遵循制定模式的数据进行读写操作。Avro通常采用JSON编写,数据通常用二进制格式编码。 Avro规范精确定义所有实现必须支持二进制格式。它有丰富的数据模式解析能力。在约束条件下,读数据模式不必与写数据模式相同。除此之外,其为一系列对象制定一个对象容器格...原创 2018-07-17 21:06:33 · 370 阅读 · 0 评论 -
Hive读书笔记(Hadoop 生态系统)
Hive是构建在hadoop上的数据仓库工具,可以将结构化的数据文件映射为一张数据库表,也急速hi数据提取转化加载(ETL),并提供简单的SQL查询功能,称为HQL(这边要和Hibernate区别一下),允许熟悉SQL的用户查询数据。它是工作在thrift上的,控制分隔符也允许用户指定数据格式。Hive的特点支持索引,加快数据查询。有不同的存储类型,如HBase中的文件、纯文本文件...原创 2018-07-17 21:08:57 · 828 阅读 · 0 评论 -
HBase学习笔记
HBase是一个分布式的、面向列的开源数据库,利用HBase技术可以在廉价PC服务器上搭建起大规模结构化存储集群。,它是使用MapReduce来处理海量数据,同时利用ZooKeeper协同服务。然而。它是基于列的模式。 特点:线性和模块化可扩展,读取写入严格,表自动配置分片,支持RegionServers之间的自动故障转移,块缓存和布鲁姆过滤器实时查询,Thrift网关和REST-FUL ...原创 2018-07-17 21:10:15 · 213 阅读 · 0 评论