笔记
文章平均质量分 65
杂篇论
夏日先锋小队长
我不懒,可我就是不想留下什么,嘻嘻嘻嘻
展开
-
大数据“全家桶”,快来啃食
大数据“全家桶”,快来啃食1 、 Hadoop HA布置Hadoop HA配置2 、 Sqoop 安装和使用2.1我先介绍sqoop为何物吧? sqoop主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递,可以将一个关系型数据库中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。总之这是一个你传(情书)给我、我传给你(情书)的一个工具。#mermaid-svg-8pn1fyxgNxI9Urx原创 2021-04-15 20:03:44 · 647 阅读 · 2 评论 -
原来你是这样的Hadoop HA?
1 .Hadoop HA 说明1.1 Hadoop HA主备介绍 自Hadoop2.x版本后可以增加多个namenode节点【保存着整个系统的名称空间和文件数据块的地址映射又称“元数据”】,多个namenode有活跃(active)和 准备(Standby)两种状态 , 即一个帮派有一个正一个副,平时都是正帮主主持大局,但如果正帮主遭遇不测被Kill S掉后,这时候副帮主就得出来主持大局了。1.2 Hadoop HA选举介绍 Hadoop HA 的正帮主(active)选举一般都要原创 2021-04-03 12:10:50 · 2537 阅读 · 6 评论 -
openstack虚拟机单结点安装
0 准备事项0.1 CentOs7安装完毕0.2 网络配置完毕vim命令打开"/etc/sysconfig/network-scripts/ifcfg-ens32" 配置IP地址模板:TYPE=“Ethernet” # 网络类型为以太网BOOTPROTO=“static” # 手动分配ipNAME=“ens33” # 网卡设备名,设备名一定要跟文件名一致DEVICE=“ens33” # 网卡设备名,设备名一定要跟文件名一致ONBOOT=“yes” # 该网卡是否随网络服务启动IP原创 2021-03-28 11:12:42 · 295 阅读 · 3 评论 -
ssh免密登录仍然要密码解决思路
ssh免密登录时出现@@@……解决思路用户不一致(例如:结点1用户A发给结点2A,登录时却用结点1用户B,肯定密钥不一致)解决方法:换回用户被登录的节点可能多个用户都存在密钥,导致密钥不一致。解决方法:删除不是要登录的用户的~/.ssh文件以上方法都不行的话,就把主结点生成的密钥复制给从结点,可以通过xssh软件直接拉过去...原创 2021-03-20 09:15:30 · 465 阅读 · 1 评论