会者定离 一期一祈

那时我们有梦,关于文学,关于爱情,关于穿越世界的旅行, 如今我们深夜饮酒,杯子碰到一起,都是梦破碎的声音. 交往都是初逢,爱情都在心里,往事都在梦中, 希望都带着注释,信仰都带着呻吟. 总有善意的光逃...

技术博客集锦(持续更新)

1、http://blog.chinaunix.net/uid/9688646.html 博文侧重于嵌入式开发,多媒体应用,Linux内核驱动应用,Android开发,项目管理等各方面 2、http://blog.csdn.net/wuzhekai1985 博文侧重于设计模式,算法相...

2017-11-14 09:17:55

阅读数 462

评论数 0

时光切片—我是海康人

每天早上醒来,打开29楼窗户眺望远方,阳光下,HIKVISION大大的名字logo映入眼帘,我知道这就是我想要的未来……

2015-08-08 08:04:07

阅读数 1483

评论数 1

男人不装

墙壁再次被刷白的时候,我知道我们要离开了。与四年前不同,此刻心中多了几分不舍。追逐风景,亦成为风景。我们每个人的故事或许都有所不同,但我们都在这里如竹子拔节般成长起来.

2015-08-06 22:36:21

阅读数 988

评论数 1

来 不 及 认 真 的 年 轻

曾有人说起,上大学的时候,是个文艺青年,理想做个作家或记者,那时候好吃香啊,如果再能写点小诗,谈点吉他,女生们都被迷倒了。你看看现在,女生们再也不中意这些了,她们中意的是……我说,那你们还写点小诗,谈点吉他么?他说,……所以说,这个世界就是这样的,男性改变世界,女性改变男性的世界观,但总有一些世界...

2015-08-02 18:38:08

阅读数 379

评论数 0

常用的谷歌插件

1.Secure Bookmarks 顾名思义,一款加密书签的插件。不过这可不是加密你整个书签,而是在这个插件的私密空间去添加私密的书签。除非输入密码,不然别人看不到你在这个插件里保存的书签。例如你想要给某人买礼物,中意的商品网页不想让人看到,或者你的私人信息页面想要隐藏,你都可以把它们添加到S...

2019-05-14 22:32:15

阅读数 41

评论数 0

Go语言(Golang)的Web框架比较:gin VS echo

Go语言(Golang)的web框架比较之:gin vs echo 由butaixianran在 2016-01-23 22:00 发布 35423 次点击 原文发在:https://771dian.com/cb/topic/41em4_hug Web框架类型 web框架的主流,是采用轻量...

2019-05-14 22:30:03

阅读数 14

评论数 0

面试感悟----一名3年工作经验的程序员应该具备的技能

前言 因为和同事有约定再加上LZ自己也喜欢做完一件事之后进行总结,因此有了这篇文章。这篇文章大部分内容都是面向整个程序员群体的,当然因为LZ本身是做Java开发的,因此有一部分内容也是专门面向咱们Java程序员的。 简单先说一下,LZ坐标杭州,13届本科毕业,算上年前在阿里巴巴B2B事业部的面...

2019-05-11 22:38:57

阅读数 51

评论数 0

Redis--持久化

Redis大家都在经常使用,其功能非常强大,利用其内存存储、存取快的特新能够帮助我们解决很多难题。在项目中,我们可利用Redis:1作为缓存;2作为消息队列;3生成业务唯一键;4分布式锁控制;5内存数据库……可以很好的解决一些高并发、高性能要求的业务场景。 针对Redis的安装,五种数据结构(字...

2019-05-08 22:45:21

阅读数 12

评论数 0

Facebook的c++开源库folly介绍

揭秘Facebook官方底层C++函数Folly Facebook近日公布了其官方底层C++函数Folly,Folly(该缩略语表示Facebook开源代码库)其实是C++11组件库,这些组件在设计时着眼于实用性和高效率。 Folly与Boost、当然还有std等组件库的关系是互为补充,而不是...

2019-05-08 22:40:27

阅读数 23

评论数 0

无代码编程

中台之后,便无代码。 规模化的组织,经常要面临这样的挑战:每个应用的基础设施是相同的,部分的代码也是相同的,甚至于它们可能只是数据模型不同而已。结果却导致了,他/她们要一次又一次地重新编写一个应用。 对于一个新的应用而言,它需要对接大量的三方(非自己团队)服务。服务之间的不断变化 ,导致了对应...

2019-05-08 22:38:23

阅读数 30

评论数 0

Hbase数据模型

HBase 以表的形式存储数据。表由行和列族组成。列划分为若干个列族(row family), 其逻辑视图如下: 几个关键概念: 1) 行键(RowKey)  行键是字节数组, 任何字符串都可以作为行键;  表中的行根据行键进行排序,数据按照 Row key 的字节序(byte or...

2019-04-29 22:57:08

阅读数 17

评论数 0

HBase简介

HBase – Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用 HBase 技术可在廉价 PC Server 上搭建起大规模结构化存储集群。 HBase 是 Apache Hadoop 中的一个子项目,Hbase 依托于 Hadoop 的 HDFS ...

2019-04-29 22:36:24

阅读数 12

评论数 0

Zookeeper访问控制

传统的文件系统中,ACL 分为两个维度,一个是属组,一个是权限,子目录/文件默认继承父目录的 ACL。而在 Zookeeper 中,node 的 ACL 是没有继承关系的,是独立控制的。Zookeeper 的 ACL,可以从三个维度来理解:一是 scheme; 二是 user; 三是 permis...

2019-04-28 22:00:55

阅读数 269

评论数 0

Zookeeper数据模型

ZooKeeper 拥有一个层次的命名空间,这个和标准的文件系统非常相似 从图中我们可以看出 ZooKeeper 的数据模型,在结构上和标准文件系统的非常相似,都是采用这种树形层次结构,ZooKeeper 树中的每个节点被称为—Znode。和文件系统的目录树一样,ZooKeeper 树中的每...

2019-04-27 22:24:52

阅读数 22

评论数 0

MapReduce工作原理

通过 Client、JobTrask 和 TaskTracker 的角度来分析 MapReduce 的工作原理: 首先在客户端(Client)启动一个作业(Job),向 JobTracker 请求一个 Job ID。将运行作业所需要的资源文件复制到 HDFS 上,包括 MapReduce 程...

2019-04-27 22:09:28

阅读数 16

评论数 0

MapReduce 错误处理机制

MapReduce 任务执行过程中出现的故障可以分为两大类:硬件故障和任务执行失败引发的故障。 1) 硬件故障 在 Hadoop Cluster 中,只有一个 JobTracker,因此,JobTracker 本身是存在单点故障的。如何解决 JobTracker 的单点问题呢?我们可以采用...

2019-04-26 23:15:16

阅读数 3

评论数 0

MapReduce 数据本地化(Data-Local)

首先,HDFS 和 MapReduce 是 Hadoop 的核心设计。对于 HDFS,是存储基础,在数据层面上提供了海量数据存储的支持。而 MapReduce,是在数据的上一层,通过编写MapReduce 程序对海量数据进行计算处理。 在前面 HDFS 章节中,知道了 NameNode 是文件...

2019-04-26 23:13:13

阅读数 4

评论数 0

MapReduce执行流程

MapReduce 计算框架的一般流程: 1) 输入和拆分: 不属于 map 和 reduce 的主要过程,但属于整个计算框架消耗时间的一部分,该部分会为正式的 map 准备数据。 分片(split)操作: split 只是将源文件的内容分片形成一系列的 InputSplit,每个 Inpu...

2019-04-26 23:11:51

阅读数 7

评论数 0

MapReduce编程模型

Map 和 Reduce 的概念是从函数式变成语言中借来的,整个 MapReduce 计算过程分为 Map 阶段和 Reduce 阶段,也称为映射和缩减阶段,这两个独立的阶段实际上是两个独立的过程,即 Map 过程和 Reduce 过程,在 Map 中进行数据的读取和预处理,之后将预处理的结果发送...

2019-04-26 23:08:20

阅读数 5

评论数 0

操作HDFS的基本命令

1) 打印文件列表(ls) 标准写法: hadoop fs -ls hdfs:/ #hdfs: 明确说明是 HDFS 系统路径 简写: hadoop fs -ls / #默认是 HDFS 系统下的根目录 打印指定子目录: hadoop fs -ls /package/test/ #HDFS 系统下...

2019-04-26 23:03:02

阅读数 4

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭