![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
BigData
ArkMede
这个作者很懒,什么都没留下…
展开
-
阿里云“在家实践”计划测试题答案(部分)
因新冠肺炎疫情,学校延期开学。在家时间不浪费,提高技能好机会。阿里云弹性计算联合开发者社区,推出高校“在家实影”计划,全国高校学生,每人可免领取一台云服务器ECS算力资源,在线实践影课程等资源。阿里云高校——学生“在家实践”计划文章目录1. 云计算时代,客户应该如何应对互网联的安全风险?(A)2. 计算机诞生于(D)年代3. XaaS是(C)的缩写。4. 开发软件时,对提高开发人员工作效率至关重要的是(B)5. HTPS协议在互联网应用中起到的安全作用是(B)6. 软件系统的可维护性评价指标不包括(.原创 2020-06-01 15:21:38 · 4616 阅读 · 0 评论 -
sbt卡住的解决办法,sbt设置代理
My Blog: sbt卡住的解决办法,sbt设置代理文章目录方法一:设置国内源(失败)方法二:设置代理(解决)注意:sbt会自动使用IDEA的代理设置,但这并不代表不需要单独为sbt设置了。1.使用socks代理(未解决)2.使用http+https代理(解决)非常重要!必须同时设置http和https代理,单独一个仍然不行。(或许只用https也行)方法一:设置国内源(失败)创建~...原创 2020-04-16 00:23:32 · 3839 阅读 · 2 评论 -
Hadoop机架感知策略
My Blog: Hadoop机架感知策略官方文档: http://hadoop.apache.org/docs/ 找到对应的版本号/Rack Awareness一栏网络拓扑概念在本地网络中,两个节点被称为“彼此近邻”是什么意思?在海量数据处理中,其主要限制因素是节点之间数据的传输速率——带宽很稀缺。这里的想法是将两个节点间的带宽作为距离的衡量标准。节点距离: 两个节点到达最近的...原创 2020-01-11 20:51:03 · 547 阅读 · 0 评论 -
HDFS读写数据的流程
My Blog: HDFS读写数据的流程读客户端向namenode请求下载文件,namenode通过查询元数据,找到文件块所在的datanode地址。挑选一台datanode(就近原则,然后随机)服务器,请求读取数据。datanode开始传输数据给客户端(从磁盘里面读取数据放入流,以packet为单位来做校验)。客户端以packet为单位接收,先在本地缓存,然后写入目标文件。写...原创 2020-01-11 20:48:20 · 86 阅读 · 0 评论 -
hadoop Java客户端操作
My Blog: hadoop客户端操作基本文件操作package cn.medemede.hadoop;import java.io.FileNotFoundException;import java.io.IOException;import java.net.URI;import java.net.URISyntaxException;import org.apache...原创 2020-01-11 20:46:04 · 227 阅读 · 0 评论