开发配置
哩哩粗来丸
这个作者很懒,什么都没留下…
展开
-
hadoop(伪分布)+hive采坑集合
今天工作量少,准备玩一下hive,,谁知。。。。一搭一个坑啊 闲话少说 进入正题~配置系统环境的问题就不说了 copy一下就行 系统为centos7 64export HADOOP_HOME=/apps/hadoopexport HADOOP_BIN_DIR=/apps/hadoop/binexport HADOOP_HOME_WARN_SUPPRESS=1export HADOO...原创 2019-11-28 14:59:37 · 290 阅读 · 0 评论 -
MAC+nexus2.x+maven配置本地私服
经过了一天博客的阅读,手动的在Mac上搭建了基于nexus的私服 哈哈哈 以后可以当别人的Maven仓库啦~,接下来介绍一下搭建的过程。。。。。1、官网下载nexus2.x 为什么不下载3.x呢,自我认为2.x对configuration的配置环境和maven的适配性更强,而且在接下来配置setting.xml文件时也很简单。nexus2.x 下载地址: https://help....原创 2019-01-09 21:48:06 · 1166 阅读 · 0 评论 -
Kafka 小细节
在定义cosumer的时候会定义组的概念 把consumer分成几个组在同一个消费者组里,同一时间消息只能有一个消费者在kafka消费消息consumer是与partition进行连接的,消费以partition为单元 要消费就消费一个分区不能重复消费消息1、zookeeper 保存的是集群的状态信息 如果一台机器down了 zookeeper可以告诉第二台机器的...原创 2019-07-09 16:46:55 · 111 阅读 · 0 评论 -
初识elasticsearch 及JAVA API的过滤、管道聚合的使用
简而言之 elasticsearch是一种数据库,用倒排索引的方式,代替了正向索引的方式,更加的利于搜索,在之前已经提及过倒叙索引就不在赘述了。 这里简单介绍一下最近学到的搜索,聚合的java API 首先,要根据remote主机的ip及端口号来创建一个clientSettings settings = Settings.builder().put...原创 2019-07-24 13:39:49 · 474 阅读 · 0 评论 -
Idea Debug about elasticsearch
最近在做ES的aggregation,顺便说一下收获。一:版本问题dependency> <groupId>org.springframework.data</groupId> <artifactId>spring-data-elasticsearch</artifactId> <version>3...原创 2019-07-19 19:37:17 · 175 阅读 · 0 评论