ceph-hadoop

最新推荐文章于 2024-09-03 16:13:28 发布

songdej

最新推荐文章于 2024-09-03 16:13:28 发布

阅读量729

点赞数

分类专栏： hadoop 文章标签：大数据

本文链接：https://blog.csdn.net/songdej/article/details/84494125

版权

hadoop 专栏收录该内容

3 篇文章 0 订阅

订阅专栏

本文详细介绍如何将Ceph作为Hadoop的后端存储系统。主要内容包括：安装Ceph、配置Hadoop使用Ceph、创建Ceph池并进行相关设置等步骤。通过这些步骤，可以实现Hadoop与Ceph的有效集成。

摘要由CSDN通过智能技术生成

1.安装ceph
2.添加hadoop-ceph.jar
3.hadoop 节点上安装ceph-client
4.ceph创建pool
a)
ceph osd pool create hadoop1 100
ceph osd pool set hadoop1 size 1
b)
ceph osd dump | grep hadoop1
$:pool 3 'hadoop1' rep size 1 min_size 1 crush_ruleset 0...
c)
ceph mds add_data_pool 3(pool's id)
d)

5.修改hadoop下core-site.xml
<property>
<name>ceph.data.pools</name>
<value>hadoop1</value>
</property>
ps:
hadoop-ceph 属性列表
----------------------------小--伙----伴-----------------------------

[img]http://dl2.iteye.com/upload/attachment/0090/6743/59f313b8-b1cf-3a61-9798-95c2f730aee6.jpg[/img]