![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
liliblue
吊儿郎当的混蛋
展开
-
用sqoop将excel数据上传hdfs、hive、hbase
快的不是一点点好吗?我还用什么poi 什么java api,出错到怀疑人生好吗?唉,我这愚蠢的人类。条件有二:首先,在已经搭建好的hadoop环境下安装mysql。其次,安装配置sqoop。过程有二:第一,将excel文件上传到mysql。(本地的mysql连接到了linux下的mysql)在光标所在的“表”出右击,点击导入向导,一步步照做就可以。第二,通过...原创 2019-11-28 18:56:32 · 1836 阅读 · 0 评论 -
ubantu下 solr下载 安装
镜像下载地址:http://archive.apache.org/dist/lucene/solr/下载安装解压 操作简单tar -zvxf solr-7.6.0.tgzbin目录下 ./solr start运行原创 2019-11-19 15:09:40 · 92 阅读 · 0 评论 -
mongodb安装与搭建
下载地址 https://www.mongodb.com/download-center/community?jmp=nav下载成功上传解压将解压包拷贝至指定目录在mongodb的目录下创建data/db文件夹 mkdir -p /home/yfl/software/mongo/data/db在mongodb的bin目录下...原创 2019-11-17 21:21:04 · 221 阅读 · 0 评论 -
spark集群搭建
在搭建好的hadoop集群中挑选三个节点(三台机器)去官网下载对应hadoop版本的spark,如果版本与已安装的hadoop不一致,会报错。http://spark.apache.org/downloads.html下载,上传到一台机器,解压,配置文件,发送到其他机器。需要配置conf/下的spark-env.sh.template、slaves.template,先做一个备份然...原创 2019-11-04 10:44:13 · 120 阅读 · 0 评论 -
hive安装Failed to get schema version报错
schematool -dbType mysql -initSchemaorg.apache.hadoop.hive.metastore.HiveMetaException: Failed to get schema version.看了很多http://www.pianshen.com/article/6770212316/这篇最可以但是不知道为什么,我已经改了而且重...原创 2019-10-16 21:46:36 · 13607 阅读 · 1 评论 -
linux系统ubantu下mysql报错
linux下mysql报错1.Failed to restart mysqld.service: Unit not found2.ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/var/run/mysqld/mysqld.sock'3.ERROR 1045 (28000): Access ...原创 2019-10-16 19:56:34 · 1276 阅读 · 0 评论 -
简单快速入手hdfs
为什么会存在这篇文章,是因为我产生了以下问题,为了理清关系并解决疑惑。什么是hdfs?需要搭建什么样的环境?hdfs只是一个名词,还是需要人为的去搭建环境?很多文章都在说hdfs的原理,我就想知道需不需要我去搭建?来自hadoop官网的截图: 简单点,hadoop处理大数据,那么必然面对数据的存储问题,所以有了hdfs(分布式文件存储系统)。 hdfs是h...原创 2019-10-03 20:19:46 · 136 阅读 · 0 评论