关闭

Zookeeper详解

Zookeeper简介zookeeper是一个为分布式应用所设计的开源协调服务,提供同步,配置管理,分组和命名服务。 设计目标: 简单化 zookeeper允许分布式的进程通过共享体系内的命名空间来进行协调,其组织与标准的文件系统非常相似,是由一些数据寄存器组成,在zookeeper中,这些寄存器称之为znode。zookeeper的数据存放在内存当中,因此其具有高吞吐量和低延迟。 健壮性 z...
阅读(159) 评论(0)

Supervisor配置文件详解

[unix_http_server]             file=/tmp/supervisor.sock   ; socket文件的路径,supervisorctl用XML_RPC和supervisord通信就是通过它进行                               的。如果不设置的话,supervisorctl也就不能用了...
阅读(167) 评论(0)

免费XXX推荐

最近舍友推荐了一个免费的VPN,感觉用起来挺好的,速度很快,youtube视频可以直接看,于是向大家分享一下:如果可以进入Google应用商店,那么直接搜: tunnello然后安装即可。要是无法进入Google应用商店或是无法正常下载安装请点击:https://pan.baidu.com/s/1eScl5J0 密码:2aiw如链接不可用,请邮件联系:zhoupans_mail@163.com下载到...
阅读(242) 评论(0)

初识HBase

HBase是一个开源的,分布式的,多版本的,面向列的存储模型。 面向列:简单来说,就是指在存储数据库中的数据时,以列为单位来存储,把一列的数据串在一起存储起来,而非把一行的数据作为一个单元存储起来。 HBase的特点: HBase是构建在HDFS上的列式存储系统 基于Google的BigTable模型开发,典型的key/value系统 逻辑上,HBase将数据按照表,行和列进行存储 HBase主要...
阅读(137) 评论(0)

行式数据库与列式数据库

开发用了很久的Vertica,知道它是“列式数据库”但一直没有去研究过列式数据库的一些特性,现在来总结一下。 列式数据库是以列相关存储架构进行数据存储的数据库,主要适合于批量数据处理和即时查询。相对应的是行式数据库,数据以行相关的存储体系架构进行空间分配,主要适合于小批量的数据处理,常用于联机事务型数据处理。 数据库以行、列的二维表的形式存储数据,但是却以一维字符串的方式存储,例如以下的一个表: E...
阅读(120) 评论(0)

初识Hive

Hive是什么Hive是一个基于Hadoop文件系统的数据仓库,提供了对数据进行ETL(抽取,转换,加载)的工具、数据存储管理和大型数据集的查询分析能力。Hive提供了类SQL语言-HiveQL,可使用关系数据库提供的的SQL语句来操作Hive。Hive擅长做什么? Hive擅长在不变的、大规模的数据集上执行的批量操作。 Hive具有良好的扩展性,因为其建立在HDFS上,可自动适应机器数目和数据量的...
阅读(115) 评论(0)

Hadoop分布式集群搭建

前面分享了hadoop伪分布式的搭建方法,这次来分享一下分布式方式的搭建方法。 主机安装或虚拟机安装这里就不再赘述,下面直接进入正题:1.下面是网络配置,全部为静态:master : 192.168.80.128 slave-1 : 192.168.80.129 slave-2 : 192.168.80.130 slave-3 : 192.168.80.131 slave-4 : 192.168....
阅读(256) 评论(0)

HDFS的架构设计

HDFS为是Apache Hadoop Core项目的一部分,是Hadoop的核心项目,今天我们就来讨论以下关于HDFS架构设计问题。分布式既然HDFS标榜为一个分布式文件系统,那首要解决的就是分布式的问题。分布式,简单来说就是分布在各个节点,这些节点可能在不同的主机上,也可能在不同的数据中心,甚至还可能跨地区,跨国度。各节点之间通过网络来进行信息交互。DHFS通过Namenode和Datanode...
阅读(259) 评论(0)

Hadoop学习笔记之--Hadoop的安装

由于没有集群环境,只能在一台电脑上进行Hadoop的搭建,因此只能以伪分布式的方式进行搭建。 准备工作 操作系统:CentOS 7 JDK版本:1.8.0_131 Hadoop版本:2.8.0 操作系统安装 系统最好为Linux,推荐CentOS,关于系统安装,这里不赘述。 JAVA环境配置 1.下载jdk $ wget http://download.oracle.c...
阅读(194) 评论(0)

Linux3+1 2018届 开班班会

小组纳新了,为了留出地方给小鲜肉们,我们这一群“老家伙”被暂时流放了,在小组待了两年了,突然搬回宿舍后,感到非常的不适应,突然特别怀念在小组大家一起奋斗的日子。终于,在宿舍待了近一个月后,3+1在本周一开班了,又可以像小组一样,在良好学习环境下,好好努力学习啦,高兴。 Linux3+1起源于周立功先生...
阅读(352) 评论(0)

更新GitHub上自己 Fork 的代码与原作者的项目进度一致

在GitHub上我们会去fork别人的一个项目,这就在自己的Github上生成了一个与原作者项目互不影响的副本,自己可以将自己Github上的这个项目再clone到本地进行修改,修改后再push,只有自己Github上的项目会发生改变,而原作者项目并不会受影响,避免了原作者项目被污染。但经过一段时间, 有可能作者原来的代码变化很大, 你想接着在他最新的代码上修改, 这时你需要合并原作者的最新代码过来...
阅读(287) 评论(0)

CMCC-EDU一个帐号,多设备共享解决方案

用过CMCC-EDU的同鞋都清楚,CMCC-EDU一般情况下只能一个设备连接登陆认证上网,但是如果你只有一个帐号,但是有多个设备,且都对网速要求不是很高的话,你可以选择使用下面方法实现一个帐号,多设备功用 所需硬件设备: 闲置无线路由器一台 下面是步骤: 无线路由器接上电源,重置路由器(一般在路由器背面,有RESET标志,长按即可,视路由器而定) 连接上路由器WIFI,打开浏览器,输...
阅读(948) 评论(0)

参加《Linux桌面发展圆桌会议》后感

2017年5月25日,由“安全可靠联技术和产业联盟”和“国防科学技术大学”主办的,优麒麟社区承办的Linux桌面发展圆桌会议在长沙的国防科学技术大学举行。做为高校Linux社区代表和开源爱好者的身份很荣幸受邀参加了此次会议,在会议中,各界代表踊跃发言,积极表达自己的思想,都在为Linux桌面推广献计献策。我对此次会议的评价是:收获颇丰,不虚此行。先介绍一下此次活动的相关内容,这是UbuntuKyli...
阅读(321) 评论(1)

没无线网连接WIFI

现在很多台式电脑已然没有配备无线网卡,如果想连接WIFI的话,只能再花钱买无线网卡,但是如果你的家里刚好有一台闲置的无线路由器的话,那你就可以省下买无线网卡的钱了。 所需硬件设备: 闲置无线路由器一台 网线一段,长度根据需求自定 下面是步骤: 无线路由器接上电源,重置路由器(一般在路由器背面,有RESET标志,长按即可,视路由器而定) 从路由器接一条网线至电脑,打开浏览器,输入管理I...
阅读(430) 评论(0)

Linux无线网连接解决方案

虽然linux在桌面系统方面已做过很多的努力,我们也可以看到很多在桌面上做的非常优秀的发行版,例如deepin,ubuntu,ubuntukylin,但是总的来说,与windows或Mac OS X 还是相差还是很远。我的电脑是台式的,装的是CentOS 7.3 ,并自配了FAST的无线网卡,但是有个很棘手的问题,就是没有无线网卡驱动,无线网用不了,最近从实验室搬回了宿舍,宿舍只有无线网可以用,但是...
阅读(653) 评论(0)
160条 共11页1 2 3 4 5 ... 下一页 尾页
    个人资料
    • 访问:167351次
    • 积分:2894
    • 等级:
    • 排名:第13496名
    • 原创:124篇
    • 转载:33篇
    • 译文:3篇
    • 评论:22条
    博客专栏
    最新评论