mac安装sqoop

最新推荐文章于 2021-10-09 02:53:45 发布
最新推荐文章于 2021-10-09 02:53:45 发布
阅读量638 收藏
点赞数 1
文章标签： sqoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/erlihan/article/details/104184196
版权
本文介绍了在mac环境下，如何在已有的hadoop 3.2.1和hive 3.1.2基础上安装并配置sqoop。过程中遇到brew安装失败的问题，选择直接下载并解决可能的版本冲突。通过配置环境变量、添加hadoop和hive路径、引入mysql jar包以及解决运行时的依赖问题，最终成功完成sqoop的配置并能连接到mysql。
摘要由CSDN通过智能技术生成

在hadoop 3.2.1和hive 3.1.2的基础上，配置sqoop。
下载
brew install sqoop #这个下载遇到了错误
到http://www-eu.apache.org/dist/sqoop/1.4.7/ 链接下载
在这里插入图片描述
这个hadoop-2.6.0不知道与我本地安装的hadoop3.2.1有咩有啥冲突哇。
上面的连接太慢了，可以用这个：http://mirrors.hust.edu.cn/apache/sqoop/1.4.7/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz

配置变量
在这里插入图片描述
验证

sqoop version

在这里插入图片描述
添加hadoop和hive的路径信息
进入/usr/local/Cellar/sqoop-1.4.7.bin__hadoop-2.6.0/conf下面：

cp sqoop-env-template.sh sqoop-env.sh

vi sqoop-env.sh 增加如下所示

最低0.47元/天 解锁文章
这么多圆圈圈
关注
boost::geometry::disjoint用法的测试程序
希望我的博客，能帮上你解决学习中工作中所遇到的问题
06-03 373
boost::geometry::disjoint用法的测试程序实现功能C++实现代码 实现功能 boost::geometry::disjoint用法的测试程序 C++实现代码 #ifndef BOOST_TEST_MODULE #define BOOST_TEST_MODULE test_disjoint_coverage #endif #include <iostream> #include <boost/test/included/unit_test.hpp> #includ
boost::hana::is_disjoint用法的测试程序
希望我的博客，能帮上你解决学习中工作中所遇到的问题
06-06 276
boost::hana::is_disjoint用法的测试程序实现功能C++实现代码 实现功能 boost::hana::is_disjoint用法的测试程序 C++实现代码 #include <boost/hana/assert.hpp> #include <boost/hana/is_disjoint.hpp> #include <boost/hana/map.hpp> #include <boost/hana/not.hpp> #include <
LeetCode——352. 将数据流变为多个不相交区间(Data Stream as Disjoint Intervals)[困难]——分析及代码（C++）
江南土豆的博客
10-09 196
LeetCode——352. 将数据流变为多个不相交区间[Data Stream as Disjoint Intervals][困难]——分析及代码[C++]一、题目二、分析及代码1. 有序映射（1）思路（2）代码（3）结果三、其他 一、题目 给你一个由非负整数 a1, a2, …, an 组成的数据流输入，请你将到目前为止看到的数字总结为不相交的区间列表。 实现 SummaryRanges 类： SummaryRanges() 使用一个空数据流初始化对象。 void addNum(int va
LeetCode352. Data Stream as Disjoint Intervals
李歇特冯-兹拜因巴哈的博客
09-09 175
Given a data stream input of non-negative integers a1, a2, ..., an, ..., summarize the numbers seen so far as a list of disjoint intervals. For example, suppose the integers from the data stream are ...
[leetcode] 352. Data Stream as Disjoint Intervals 解题报告
小榕流光的专栏
06-01 6770
题目链接: https://leetcode.com/problems/data-stream-as-disjoint-intervals/ Given a data stream input of non-negative integers a1, a2, ..., an, ..., summarize the numbers seen so far as a list of di
352. Data Stream as Disjoint Intervals
wilzxu的博客
03-13 149
352. Data Stream as Disjoint Intervals方法1:Complexity易错点：方法2:Complexity易错点： Given a data stream input of non-negative integers a1, a2, …, an, …, summarize the numbers seen so far as a list of disjoint ...
Sonar编译问题对应:File [...] can't be indexed twice.
08-26
Please check that inclusion/exclusion patterns produce disjoint sets for main and test files" 指出，Sonar 在扫描文件时发现重复的索引操作。这可能是由于源代码和测试代码的定义区域重叠，或者是配置文件中...
[leetcode-352]Data Stream as Disjoint Intervals(java)
中华胡杨的专栏
07-05 1045
思路：采用一个TreeMap的数据结构，因为TreeMap内部是红黑树的数据结构，整体是有序的，而且还可以很快的搜索到大于某个元素的项及小于某个元素的项。 但是不清楚为什么，我代码提交后一直提示Memory Limit Exceeded。我在网上找了一份相似的代码，见代码2，就可以AC，有知道原因的望不吝赐教。代码如下：/** * Definition for an interval. * p
352. Data Stream as Disjoint Interval
02-02 81
Given a data stream input of non-negative integers a1, a2, ..., an, ..., summarize the numbers seen so far as a list of disjoint intervals. For example, suppose the integers from the data stream...
leetcode 352. Data Stream as Disjoint Intervals
PaladinDu的专栏
03-17 128
Given a data stream input of non-negative integers a1, a2, ..., an, ..., summarize the numbers seen so far as a list of disjoint intervals. For example, suppose the integers from the data stream are ...
LeetCode—352. Data Stream as Disjoint Intervals
徐玄清的专栏
06-01 740
思路：设定3个map，finsh（装载已add过的数据），before（add的val-1）,end(add的val+1)，list中存储答案 finish中get(val)不为null，则处理，为null则不处理 before和end同时不为null，取出前后Interval，list中删掉前Interval，后Interval的start=前Interval的start。删除end的数据，
LeetCode 352. Data Stream as Disjoint Intervals（数据流区间）
James Pan
06-16 1561
原题网址：https://leetcode.com/problems/data-stream-as-disjoint-intervals/ Given a data stream input of non-negative integers a1, a2, ..., an, ..., summarize the numbers seen so far as a list of dis
Data Stream as Disjoint Intervals
leetcode 解题思路
06-12 175
Given a data stream input of non-negative integers a1, a2, ..., an, ..., summarize the numbers seen so far as a list of disjoint intervals. For example, suppose the integers from the data stream are 1, 3, 7, 2, 6, ..., then the summary will be: [1, 1] [
【leetcode】Data Stream as Disjoint Intervals
业精于勤，荒于嬉
06-01 1786
题目链接：https://leetcode.com/problems/data-stream-as-disjoint-intervals/ Given a data stream input of non-negative integers a1, a2, ..., an, ..., summarize the numbers seen so far as a list of disjo
解释代码class UnionFindSet: def __init__(self, start, n): self.start = start self.n = n self.pre = [0 for i in range(self.n - self.start + 2)] self.rank = [0 for i in range(self.n - self.start + 2)] def init(self): for i in range(self.start, self.n + 1): self.pre[i] = i self.rank[i] = 1 def find_pre(self, x): if self.pre[x] == x: return x else: self.pre[x] = self.find_pre(self.pre[x]) return self.pre[x] def is_same(self, x, y): return self.find_pre(x) == self.find_pre(y) def unite(self, x, y): x = self.find_pre(x) y = self.find_pre(y) if x == y: return False if self.rank[x] > self.rank[y]: self.pre[y] = x else: if self.rank[x] == self.rank[y]: self.rank[y] += 1 self.pre[x] = y return True def is_one(self): temp = self.find_pre(self.start) for i in range(self.start + 1, self.n + 1): if self.find_pre(i) != temp: return False return True
最新发布
06-06
这段代码实现了一个并查集数据结构。并查集是一种树型的数据结构，用于处理一些不相交集合（Disjoint Sets）的合并及查询问题。它支持两种操作： - 查找（Find）：确定元素属于哪一个子集。它可以被用来确定两个元素是否属于同一子集。 - 合并（Union）：将两个子集合并成同一个集合。 并查集可以用于解决很多实际问题，例如： - 判断无向图中是否有环 - 在图像处理中，判断连通区域 - 在游戏开发中，判断游戏中角色的关系 在这段代码中，类 UnionFindSet 的初始化函数 __init__ 接收两个参数：起始点 start 和结束点 n。接着定义了两个列表 pre 和 rank，用于存储每个节点的父节点和树的深度。其中，pre[i] 表示节点 i 的父节点，如果 pre[i] = i，则 i 为该集合的代表元素。 接下来的函数 init 用于初始化并查集，将每个节点的父节点设置为自身，深度为 1。 函数 find_pre 用于查找节点 x 的代表元素，同时实现了路径压缩的优化，即将查找路径上的所有节点都直接连接到代表元素上，减少查找时间。 函数 is_same 用于判断节点 x 和节点 y 是否在同一个集合中，即是否具有相同的代表元素。 函数 unite 用于合并两个集合，即将 x 所在的集合和 y 所在的集合合并为一个集合。首先查找 x 和 y 的代表元素，如果它们已经在同一个集合中，则直接返回 False。否则，将深度较小的集合连接到深度较大的集合上，并更新代表元素和深度。 最后，函数 is_one 用于判断整个并查集是否只有一个集合。它首先找到起始点的代表元素 temp，然后遍历起始点到结束点之间的所有节点，如果存在任意一个节点的代表元素不等于 temp，则说明存在多个集合，返回 False；否则，所有节点都在同一个集合中，返回 True。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值