![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 82
BeautifulGrils
篮球
展开
-
物理cpu与逻辑cpu概述
物理cpu与逻辑cpu概述(本博客属于转载部分内容:主要学习目的用于大数据平台Hadoop之yarn资源调度的配置)一、yarn资源调度器中主要的资源分类 1、memory(内存) 2、cpu(逻辑cpu)配置属性: yarn.nodemanager.res...原创 2018-04-03 10:37:06 · 29084 阅读 · 8 评论 -
Java API 读写 hdfs分布式文件系统 (创建目录、读文件、写文件)
Java API 读写 hdfs 操作一、概述 操作hdfs分布式文件系统的类为FileSystem对象 1、创建文件夹(递归创建):fs. mkdirs() 2、写文件 : fs.create(new Path()),返回FSDataOutputStream对象 3、读文件 : fs.open(new Path()) ...原创 2018-04-03 16:16:59 · 8766 阅读 · 0 评论 -
linux环境下安装protobuf详解
一、Protocol Buffers概述:Protocol Buffers 是一种轻便高效的结构化数据存储格式,可以用于结构化数据串行化,或者说序列化。它很适合做数据存储或 RPC 数据交换格式。可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式。目前提供了 C++、Java、Python 三种语言的 API。 二、Protocol Buffers安装:...原创 2016-10-10 10:14:12 · 9400 阅读 · 1 评论