实时大数据
文章平均质量分 85
willyan2007
这个作者很懒,什么都没留下…
展开
-
Spark Streaming状态管理函数
Spark Streaming状态管理函数引用原创 2022-09-07 15:26:29 · 733 阅读 · 1 评论 -
以写Hbase表的方式更新Phoenix索引
索引的主键是原表的字段组合而成的,索引表会把所有索引字段+rowkey拼接起来写进Hbase ,做索引的主键为索引表的RowKey。并且组合的时候还要加上\x00这样的字符串。在插入数据的时候直接以byte[] 的形式往hbase表插。原创 2022-09-07 13:55:32 · 834 阅读 · 0 评论 -
kafka基本操作
一、topic 1.查看全部topic kafka-topics.sh --zookeeper localhost:2181 --list 2.创建topic,指定分区数目和备份因子 kafka-topics.sh --zookeeper localhost:2181 --create --topic topic_name --partitions 3 --replication-factor...原创 2019-04-25 10:27:56 · 182 阅读 · 0 评论 -
ElasticSearch常用命令
1.检测集群是否健康 curl 'es1:9200/_cat/health?v' 绿色表示一切正常, 黄色表示所有的数据可用但是部分副本还没有分配,红色表示部分数据因为某些原因不可用 2.通过如下语句,我们可以获取集群的节点列表: curl 'es1:9200/_cat/nodes?v' 3.通过如下语句,列出所有索引: curl 'es1:9200/_cat/in...原创 2019-04-25 11:11:32 · 192 阅读 · 0 评论 -
ES_kibana客户端_操作
http://localhost:5601 --查看setting-- GET index_user/_settings --mapping-- GET index_user/_mapping --查询全部-- GET index_user/_search { "query": { "match_all": {} } } --根据id查询-- GET inde...原创 2019-04-25 11:21:26 · 677 阅读 · 0 评论