大数据
文章平均质量分 53
6Apricity6
这个作者很懒,什么都没留下…
展开
-
安装Neo4j
下载neo4j社区版tar -zxvf neo4j-community-4.1.8-unix.tar -C /usr/localcd /usr/local/neo4j-community-4.1.8/bin启动报错sudo ./neo4j console安装jdk11下载这个:安装jdk1. tar -zxvf jdk-11.0.10_linux-x64_bin.tar.gz -C /usr/local2. sudo vim /etc/profile# 输入export JA.原创 2021-04-13 18:04:49 · 181 阅读 · 0 评论 -
sqoop-关系型数据库与hadoop间高效传输工具(阿里DataX)
文章目录一. sqoop官网二. sqoop安装2.1 上传sqoop包2.2 解压2.3 配置环境变量2.4 修改sqoop配置文件2.5 上传mysql连接的jar包2.6 检查sqoop是否成功2.6.1 检查能否连接hive2.6.2 检查能否连接mysql2.7 导入mysql数据到HDFS2.7.1 通过命令行方式2.7.2 通过options文件传递参数2.7.3 通过sql查询数据库,然后导入到hdfs一. sqoop官网https://sqoop.apache.org/二. sqoo原创 2021-01-28 14:38:27 · 282 阅读 · 0 评论 -
Flume
官网地址:https://flume.apache.org/releases/content/1.6.0/FlumeUserGuide.html原创 2021-01-19 15:10:33 · 55 阅读 · 0 评论 -
hash取模
这里是hadoop的mapreduce中的MapTask中的output输出的hash分区代码:package org.apache.hadoop.mapreduce.lib.partition;import org.apache.hadoop.classification.InterfaceAudience;import org.apache.hadoop.classification.InterfaceStability;import org.apache.hadoop.mapreduce.原创 2020-12-15 18:18:14 · 418 阅读 · 0 评论