大数据
大数据
仑小杰
欢迎关注公众号《仑小杰》
展开
-
HBase 是如何存取数据的
HBase是一个查询极其快速的非关系型数据库,它在实时读写和实时访问上有着巨大的优势,并且非常灵活。 先来看下面这幅图: 这是一个HBase表的存储结构模型,其中有4个字段。分别为Rowkey(主键)、Time Stamp(时间戳)、CF(列族)、CF:xx(列)。这看上去是一个数据表,但是对于HBase而言,这只是一行数据。看到这大家可能会比较迷惑,这明...转载 2018-09-04 15:18:39 · 6095 阅读 · 3 评论 -
任务调度系统浅解
实习生张大胖这是个代码写得很烂的电商系统,只要运行一段时间,服务器就会出现Out Of Memory。别人都忙得四脚朝天,于是实习生张大胖被抓了壮丁去研究为什么会出现OOM。刚入行的张大胖技术水平一般,“装模作样”地看代码,研究日志,请教老员工,一个星期过去了,还是一无所获。周一例行的项目会议上, 大家似乎要看张大胖的笑话了,没想到他却提了一个歪招:“这个OOM问题非常复杂,一时半会儿也解决不了,...转载 2018-09-06 09:49:35 · 215 阅读 · 0 评论 -
淘宝走过的大数据之路
回顾丨13年来,淘宝走过的大数据之路来源:CSDN大数据时间:2016-11-07 10:19:15作者:— 淘宝大数据之路 — 2003年至今淘宝网从零开始飞速发展,走过了13个年头,支撑淘宝业务野蛮式生长背后是一套不断完善的技术平台,淘宝大数据平台,就是其中非常重要的一个组成部分,承担了数据采集、加工处理、数据应用的职责,淘宝大数据平台一路到今天,总共经历了三个大的阶段(...转载 2018-09-06 10:40:34 · 3336 阅读 · 0 评论 -
raid5 磁盘阵列
raid5 架构RAID5RAID5,至少要用3块硬盘。总容量是N-1。比如3块1T的硬盘,组raid5后就成了2T,还有1T是做备份和校验的。简单理解,RAID5至少使用3块硬盘(也可以更多)组建RAID5磁盘阵列,当有数据写入硬盘的时候,按照1块硬盘的方式就是直接写入这块硬盘的磁道,如果是RAID5的话这次数据写入会根据算法分成3部分,然后写入这3块硬盘,写入的同时还会在这3块硬盘上写...转载 2018-09-13 15:36:18 · 9204 阅读 · 0 评论 -
Linux 常用命令
Linux 常用命令虚拟机 ubuntu 命令行中文乱码安装中文字符:sudo apt-get install zhcon 添加用户权限:sudo adduser [xx] video 退出重进:logout –>login 执行命令:zhcon --utf8 --drv=fb 注意:每次进入都要执行zhcon命令才有效SSH 工具连接不上安装ssh服务:sudo a...原创 2018-09-13 18:27:55 · 131 阅读 · 0 评论 -
FastDFS 简单使用教程
FastDFS 简单使用教程安装你问我怎么装,那我就只有问此软件开发者了,要不你也去问他,链接在这https://github.com/happyfish100/fastdfs/wiki安装遇到的问题首先声明,这些问题你不一定会遇到,遇到了也不一定能用我这里提供的方法解决,条条大路通罗马,看缘分了!1、不要用git下载,自己老老实实下载压缩包,然后在服务器上解压(你问我为什么,因为亲测前...原创 2018-10-30 14:46:47 · 5863 阅读 · 0 评论