![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 93
rookie19_
这个作者很懒,什么都没留下…
展开
-
宏观行业心得
做大数据实习时的一些宏观认知。原创 2024-02-08 18:00:45 · 852 阅读 · 0 评论 -
zstd字典压缩的大数据生产实践 & ctf逆向出题启发
当然,刚刚提及的所有压缩算法,对hash值这种都没法压缩,因为hash的灵魂就是防碰撞,每个都是低频。在一定范围内,字典越大,压缩越慢,压缩率越高,也需要配合更高的压缩等级。一句话一般来说以分号结尾,在分号之前加上一个问号,其实是一种match的简写,如果ok就正常返回,如果报错就返回error。unwrap()也是异常处理,相当于把result解包,如果ok就会返回正常结果,如果出错,就panic崩溃。rust函数往往返回一个复合的result类型,它里面的内容可能是好消息,也可能是坏消息。原创 2024-02-07 13:57:00 · 1145 阅读 · 0 评论 -
flink知识与理解
flink常用知识点。原创 2023-09-26 09:50:07 · 178 阅读 · 1 评论 -
kafka知识与理解
看producerRecord的构造函数可以发现,可以指定partition,可以指定key,都没有则黏性分区(一直用一个分区,batch满了或者linger到了就换)。Partition 分区内每条消息都会被分配一个唯一的消息 id,即偏移量 Offset,因此kafka 只能保证每个分区内部有序性,并不能保证全局有序性。用于Hbase,Cassandra,LevelDB(big table实现),RocksDB,MongoDB,TiDB等NoSQL,选举时看ar队列,,谁在前面选谁,前提是在isr中。原创 2023-09-26 09:39:00 · 141 阅读 · 1 评论 -
大数据内容建设分享
一次大数据内容建设分享会的简要总结,四位老师讲了四个部分。原创 2021-07-04 00:31:41 · 190 阅读 · 2 评论