实时大数据
文章平均质量分 85
willyan2007
这个作者很懒,什么都没留下…
展开
-
Spark Streaming状态管理函数
Spark Streaming状态管理函数引用原创 2022-09-07 15:26:29 · 715 阅读 · 1 评论 -
以写Hbase表的方式更新Phoenix索引
索引的主键是原表的字段组合而成的,索引表会把所有索引字段+rowkey拼接起来写进Hbase ,做索引的主键为索引表的RowKey。并且组合的时候还要加上\x00这样的字符串。在插入数据的时候直接以byte[] 的形式往hbase表插。原创 2022-09-07 13:55:32 · 801 阅读 · 0 评论 -
kafka基本操作
一、topic1.查看全部topickafka-topics.sh --zookeeper localhost:2181 --list2.创建topic,指定分区数目和备份因子kafka-topics.sh --zookeeper localhost:2181 --create --topic topic_name --partitions 3 --replication-factor...原创 2019-04-25 10:27:56 · 164 阅读 · 0 评论 -
ElasticSearch常用命令
1.检测集群是否健康curl 'es1:9200/_cat/health?v'绿色表示一切正常, 黄色表示所有的数据可用但是部分副本还没有分配,红色表示部分数据因为某些原因不可用2.通过如下语句,我们可以获取集群的节点列表:curl 'es1:9200/_cat/nodes?v'3.通过如下语句,列出所有索引:curl 'es1:9200/_cat/in...原创 2019-04-25 11:11:32 · 185 阅读 · 0 评论 -
ES_kibana客户端_操作
http://localhost:5601 --查看setting--GET index_user/_settings--mapping--GET index_user/_mapping--查询全部--GET index_user/_search{ "query": { "match_all": {} }}--根据id查询--GET inde...原创 2019-04-25 11:21:26 · 667 阅读 · 0 评论