- 博客(13)
- 收藏
- 关注
RSS订阅原创 sqoop1.99.3 create connection --cid 001遇到问题
Warning message: Can’t connect to the database with given credentials: No suitabl e driver found for jdbc:msyql://...
2019-03-27 15:14:57
694
原创 sqoop1.99.3安装
1.解压 tar -zxvf sqoop-1.99.3-bin-hadoop200.tar.gz2.修改环境变量vim ~/.bash_profileexport SQOOP_HOME=/opt/sqoop-1.99.3-bin-hadoop200export CATALINA_BASE=$SQOOP_HOME/serverexport LOGDIR=$SQOOP_HOME/logs/...
2019-03-27 11:47:58
164
原创 oozie4.2.0安装
1.进入/opt目录下解压缩tar -zxvf oozie-4.2.0.tar.gz2.oozie-4.2.0目录下新建libext 目录并拷贝相关jar包到目录cp $HADOOP_HOME/share/hadoop/*/*.jar libext/cp $HADOOP_HOME/share/hadoop/*/lib/*.jar libext/并把mysql-connector-ja...
2019-03-26 16:58:15
289
1
原创 mysql5.7.8字符集改为utf8
`编辑my.cnf文件``vim /etc/my.cnf，复制下面信息[client]port = 3306default-character-set=utf8socket=/usr/local/mysql/mysql.sock[mysql]port = 3306default-character-set=utf8socket=/usr/local/mysql/mysql.so...
2019-03-26 13:32:53
178
原创 Kafka集群搭建教程
1.zookeeper集群搭建成功，查看zookeeper搭建配在哪几台服务器上面2.第一台机器修改kafka配置文件server.properties#指定broker的id，它是唯一标识，不能够重复broker.id=0#指定当前broker的服务地址host.name=node1 #kafka集群数据存放的目录log.dirs=/export/servers/kafka/ka...
2019-03-20 14:56:01
91
原创 HBase集群搭建教程，让你觉得非常轻松
HBase安装手册1.需要准备的，hadoop集群搭建成功，zookeeper集群搭建成功,时间同步。2.解压tar -zxvf hbase-1.1.2-bin.tar.gz3.配置hbase集群，要修改4个文件1）修改hbase-env.shexport JAVA_HOME=/usr/lib/java-1.8.0//告诉hbase使用外部的zkexport HBASE_MANAG...
2019-03-18 14:56:55
263
原创 Hive1.2.1 apache版本安装
今天解决了kafak集群的搭建，hive1.2.1的搭建。嘿嘿~感觉弄环境速度逐步上升啊下面介绍下hive1.2.1的安装过程。以下都是我的安装目录，个人可根据自己公司的要求更改先进入我存放压缩包的路径位置cd /opt/software第一步，当然是解压缩包啦tar -zxvf apache-hive-1.2.1-bin.tar.gz -C …/得到apache-hive-1.2.1...
2019-03-15 16:44:09
553
原创 WARN [Producer clientId=console-producer] Connection to node -2 could not be established. Broker may
测试用kafka生产者发送消息时候警告，因为，kafka集群没有全部起来，第一次只是启动了一个集群，所有有两个connection 节点找不到，第二次开启了节点2，节点2的警告消失，第三次全部节点开启，警告消失。1.[trustfar@bigdata01 ~]$ kafka-console-producer.sh --broker-list bigdata01:9092,bigdata02:90...
2019-03-15 12:05:29
6517
1
原创 小菜鸟的第一天大数据
1.mysql安装之我走过的路学了半年之久的大数据课程，终于走上了公司，已经来公司几天了，昨天是第一天干活，说实话心理太没底了，进来的时候是写的有经验1年半的大数据，公司大数据部门总共就4个人，3个大拿，我一个菜鸟（ps:招我的可能觉得我应该有1年半的经验），项目还在启动阶段，新买的服务器，十台服务器的规模。分配了第一个工作给我，mysql5.7.8搭建，hive1.2.1搭建。msql直接就把...
2019-03-14 11:33:19
112
原创 git入门实用命令总结
1.创建版本库什么是版本库呢？版本库又名仓库，英文名repository，你可以简单理解成一个目录，这个目录里面的所有文件都可以被Git管理起来，每个文件的修改、删除，Git都能跟踪，以便任何时刻都可以追踪历史，或者在将来某个时刻可以“还原”。（readme.txt 是我的一个文件,用来举例）mkdir testgitcd testgit/git initgit仓库创建成功，ll -a...
2019-03-07 14:16:18
100
原创 Successfully created project on Gitee, but initial push failed: Authentication failed for
因为git密码忘记了，修改git密码之后上传到git就报错。解决方法，进入控制面板-管理windows凭证删除git的凭证进入idea重新配置git登录信息，再上传项目到git就会提示输入git账号名密码，上传成功。...
2019-02-21 11:17:21
2897
原创 idea整合gitee如何配置
1.先下载gitee插件登录http://plugins.jetbrains.com/idea ，搜索gitee2.点击Gitee进入选择下载版本页面选择对应的版本进行下载即可。3.打开idea，File-Settings-Plugins安装成功之后点击ok4.重启idea，查看vcs存在git证明插件安装成功5.https://git-scm.com/downloads...
2019-02-21 10:37:43
12555
原创 hive解决注释中文乱码
1、进入数据库 Metastore 中执行以下 5 条 SQL 语句（1）修改表字段注解和表注解alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8；alter table TABLE_PARAMS modify column PARAM_VALUE varchar(4000) charact...
2018-12-17 18:27:36
285
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人