- 博客(7)
- 收藏
- 关注
原创 websocket和sockjs 的前后端 最简单的
template.convertAndSend("/topic/messages", "测试websocket");
2024-03-05 16:50:12 994
原创 hadoop原理
(3)seen_tsid文件保存的是一个数字,就是最后一个edis_的数字 (4)每次NameNode启动的时候都会将Fsimaee文件读入内存,加Ds里面的更新操作,保证内存中的元数据信自是最新的、同步的,可以看成NameNode启动的时候就将m和文件进行了合并。(1)一个数据块在DataNode上以文件形式存储在磁盘上,包括两个文件,一个是数据本身,一个是元数据包括数据块的长度,块数据的校验和,以及时间戳。(2)如果计算后的CheckSum,与Block创建时值不一样,说明Block已经损坏。
2023-05-09 22:09:07 133
原创 详细离线数仓
粒度是数据的细化程度这个最好选择的是最小粒度,如过说dwd层中只每周或者是每月,那么当初出现统计每天的需求的话就没有办法了,所以我们应选择最小粒度。缺点,不是特别及时。例如 商品维度表主要是将商品表SKU表、商品一级分类、商品二级分类、商品三级分类、商品品牌表和商品SPU表退化为商品表。--------------------------详细流程-----------------------------确认维度就是确认后期需要用到维度,我们这个项目的维度主要有时间维度,地区维度和用户维度,
2023-05-09 20:26:03 237
原创 flinksql table类型数据存入clickhouse-sinkfunction版本
首先在click中进行创建表格。ospv为table数据。
2023-04-08 12:17:26 211 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人