- 博客(7)
- 资源 (9)
- 收藏
- 关注
RSS订阅原创 kafka消费不到消息原因
今天安装chd6.1安装完里面把组件kafka集成到集群里,集群内仅配置一个broker，但是kafka里的offsets.topic.replication.factor=3由于一台机器--replication-factor 超过1会报错，在创建topic时我只能赋值 --replication-factor=1如下kafka-topics --zookeeper...
2019-05-16 18:36:22
27910
1
原创 spark-shell 启动报错org.apache.hadoop.security.AccessControlException: Permission denied: user=root, acc
[root@cm3 ~]# spark-shellSetting default log level to "WARN".To adjust logging level use sc.setLogLevel(newLevel). For SparkR, use setLogLevel(newLevel).19/05/16 17:08:23 ERROR spark.SparkContext:...
2019-05-16 17:21:39
2145
原创 java.lang.IllegalArgumentException: Required executor memory (1024), overhead (384 MB), and PySpark
[root@cm3 ~]# spark-shellSetting default log level to "WARN".To adjust logging level use sc.setLogLevel(newLevel). For SparkR, use setLogLevel(newLevel).19/05/16 16:43:27 ERROR spark.SparkContext:...
2019-05-16 17:18:31
3548
转载 Cloudera Enterprise 6.2.0
Cloudera Enterprise 6.2.0同时也包括很多组件版本的更新，如下： 组件 组件描述 版本 Hadoop 可靠的,可扩展的,分布式的存储和计算平台 v3.0.0 HBase 实时读写访问的可扩展的记录和表的存储 ...
2019-05-15 18:37:21
666
原创 求助：cdh6.2安装到选择存储库后点击继续无反应怎么破
2019-05-15 14:26:34,600 INFO WebServerImpl:org.springframework.aop.framework.CglibAopProxy: Method [int com.cloudera.server.web.cmf.ParcelController.getAvailableConnections()] is package-visible acros...
2019-05-15 14:40:50
5420
24
原创 phoenix 与现有的HBase表关联
首先创建一张HBase表，再创建的Phoenix表，表名必须和HBase表名一致即可。create 'stu' ,'cf1','cf2'put 'stu', 'key1','cf1:name','luozhao'put 'stu', 'key1','cf1:sex','man'put 'stu', 'key1','cf2:age','24'put 'stu', 'key1','c...
2019-05-09 17:11:59
2380
1
原创 shell date
#!/bin/bashdate_today=`date -d '1 day ago' +%Y%m%d`#最近7天date_befor_7day=`date -d '7 day ago' +%Y%m%d`#上一个完整周(周一到周日) OFDAY="`date "+%u"`"STEPOFDAY="`expr $OFDAY + 6`"date_befor_wee...
2019-05-07 16:26:56
111
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人