2019年11月_sxjlinux

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 spark通过scala创建 new KafkaProducer[String,String](props)提示Cannot resolve overloaded constructor `Kafk`

1、spark通过scala创建 new KafkaProducer[String,String](props)提示Cannot resolve overloaded constructorKafkaProducer[String,String],如下图所示：2、出现此错误时使用的类型不对，只需要将HashMap更换为：Properties即可，如下图所示：...

2019-11-21 00:38:50 4296 1

原创当通过python3执行kafka时出现return '<SimpleProducer batch=%s>' % self.async的解决办法

1、出错信息如下：Traceback (most recent call last): File "consumer_kafka.py", line 1, in <module> from kafka import KafkaConsumer File "/usr/local/python3/lib/python3.7/site-packages/kafka/__i...

2019-11-18 17:15:52 10694 2

原创 kafka2.2.1+zookeeper3.5.5搭建集群

1、首先配置zookeeper，具体方法请看：https://blog.csdn.net/sunxiaoju/article/details/1030398662、然后从https://archive.apache.org/dist/kafka/2.2.1/位置下载kakfka，如下图所示：3、然后解压到/usr/local/src/目录中，如下图所示：4、配置kafka_2....

2019-11-18 12:09:37 620

原创 CentOS7编译安装thrift工具

1、在https://archive.apache.org/dist/thrift/位置选择相应的版本下载，如下图所示：2、然后选择thrift-0.13.0.tar.gz下载，如下图所示：3、通过wget https://archive.apache.org/dist/thrift/0.13.0/thrift-0.13.0.tar.gz命令下载，如下图所示：4、下载好之后...

2019-11-14 00:15:54 2967 2

原创在启动hbase shell时提示[ERROR] Terminal initialization failed; falling back to unsupported

1、在启动hbase shell时报错，错误与如下：SLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/usr/local/src/hbase-2.0.6/lib/slf4j-log4j12-1.7.25.jar!/org/slf4j/impl/StaticLoggerBi...

2019-11-13 13:14:56 1393

原创 CentOS7自定义安装mysql

1、首先在https://dev.mysql.com/downloads/mysql/地址中下载mysql，然后选择系统和系统版本，如下图所示：2、然后找到对应的版本信息，如下图所示：3、下载好之后通过tar -xzvf mysql-8.0.18-el7-x86_64.tar.gz解压，如下图所示：4、然后通过mv src/mysql-8.0.18-el7-x86_64 ...

2019-11-13 12:09:48 1195

原创 CentOS7安装zookeeper

1、首先从https://archive.apache.org/dist/zookeeper/zookeeper-3.5.5/地址下载zookeeper，如下图所示：注意：一定要下载带有bin的，否则在启动时会出现：Starting zookeeper ... FAILED TO START错误，如下图所示：然后查看zookeeper里的日志显示：错误: 找不到或无法加载主类 or...

2019-11-12 23:35:59 825 5

原创 mac下通过python操作hbase数据库

在开始之前请安装好hadoop hbase，安装方法请参考：https://blog.csdn.net/sunxiaoju/article/details/861834051、首先需要安装Thrift，通过命令brew install thrift安装，如下图所示：2、然后从https://archive.apache.org/dist/hbase/2.0.4/位置下载源码包，注意版本...

2019-11-08 22:21:08 506

原创 mac通过编译安装thrift工具

1、在https://archive.apache.org/dist/thrift/位置选择相应的版本下载，如下图所示：2、下载好解压，如下图所示：3、编译源码才行，执行：./configure --prefix=/Users/sunxiaoju/sunxj/InstallFile/thrift-0.12，会提示Bison错误（注意：安装thrift需要boost和libevent...

2019-11-08 21:38:15 2365 1

转载 Mac 升级新系统导致VMvare Fusion启动黑屏

我的VMvare Fusion的版本号：11.0.1我升级的系统是：10.15.1导致VMvare Fusion启动黑屏。以下是解决方法：第一步：需要在“设置”-“安全与隐私”中设置：“辅助功能”和“屏幕录制”中都添加“VMvare Fusion”。如下图是我修改成功-解决了VMvare Fusion启动黑屏后展示的结果。一般有问题的时候，仅仅可以在“辅助功...

2019-11-08 18:18:14 8741 2