- 博客(71)
- 收藏
- 关注
RSS订阅原创 最新【详解】手撕 一维、二维、三维差分数组原理(1)，从零开始系统化学大数据开发
{(n -1)}S( [t- 1]的组合形式)，\color{CadetBlue}n~为 -1的个数。S(t)=a[t]+n=1∑∞(−1)(n−1)S([t−1]的组合形式)，n 为−1的个数。O(ntt)** 的，但在此不展开讨论，因为在算法竞赛中很少遇到3维以上的前缀和，而对于。O(nt2t)**，即随着维度的升高，时间复杂度增大的很快，不过是可以优化到 **O。的前缀和，即原点坐标 (1，1)和 坐标(i，j)围成的矩阵面积。把每个a[][] 看成总面积，把每个b[][]看成小格子的面积。
2024-05-16 07:58:23
730
原创 最新【精选】数据资产目录管理实战——如何构建数据资产目录，计算机专业必看
元数据信息在收集环节可以不完全依赖技术元数据、管理元数据和操作元数据的划分来区分，根据调研的不同对象，可以按照部门元数据和数据中台元数据两个方向来收集，这样通过元数据的收集，可以记录不同的数据对象分别来源哪个应用系统，数据库及部门等信息。数据分级主要是从数据的保护措施角度考虑，通过数据定级让数据管理者意识到当前的数据资产当中有哪些数据安全等级是比较高的，应如何针对性的管理，当然说到数据分级，就要谈到相关的法律法规。数据资产盘点主要分为：收集元数据信息、数据分类划分、数据分级划分、数据共享属性确定。
2024-05-16 07:57:50
728
原创 最新【算法基础】(一)基础算法 --- 二分(2)，2024年最新面试阿里的时候一定会问到的
综上我们可以看出两个模板之间差别并不大，主要在于mid取值俩边界的和要不要+1，那什么时候+1呢？从上我们可以看出当模板中 if 语句判断为true时，l = mid 的时候，如果不+1，此时出现 l = r - 1 的时候，我们的mid是永远等于 l 的，就会一直进入死循环，达不到边界，+1之后mid变成r停止循环了。在这里再提及一下二分模板的实现，其实就是让左右边界确定中间值，然后对我们要找的元素进行比较，看情况通过 l 或者 r 的变化带动mid值找寻起始位置和终止位置。
2024-05-16 07:57:17
715
原创 最新【算法】剑指offer-青蛙跳台阶&；&；矩形覆盖，大数据开发面试必看书籍
方法2:直接迭代,细看这个方程,本质就是斐波那契数列注意:此处是从i=2开始,计算到 i=number,i=2开始计算的f3是跳第三级台阶的。
2024-05-16 07:56:44
361
原创 微服务实战 Eureka注册中心及集群搭建_注册中心部署应用服务器集群(1)
是Netflix开发的服务发现框架，SpringCloud将它集成在自己的子项目spring-cloud-netflix中，实现SpringCloud的服务发现功能。Eureka包含和两个组件。
2024-05-15 23:10:56
760
原创 开源、云原生且实时分析型的现代数据仓库DataBend的介绍，及其与其它开源文件存储的结合使用实例_databend功能
网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化资料的朋友，可以戳这里获取一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！为了在容器重启后仍能保留数据，可以创建本地主机上的目录用于持久化存储元数据和服务数据：3. 运行 Databend Meta 服务这里， 参数将主机上的目录映射
2024-05-15 23:10:23
919
原创 开源SPL,WebService Restful广泛应用于程序间通讯，如微服务、数据交换、公共或私有的数据服务等。_webserivce接口应用广吗
早期，没有专业的json/XML的后处理技术，Java开发者通常要采取硬写代码或入库再用SQL的方式。硬写代码工作量巨大，计算能力几乎为零，开发效率极低。SQL虽然可以提供部分计算能力，但存在明显的架构缺陷，不仅会因为引入SQL而制造额外的耦合性，而且会因为入库过程导致额外的系统延迟。此外，数据库只适合计算二维表，多层结构化数据的计算能力并不强。
2024-05-15 23:09:50
993
原创 开源SPL,WebService Restful广泛应用于程序间通讯，如微服务、数据交换、公共或私有的数据服务等。_webserivce接口应用广吗(3)
第1层的单个字段的集合：A2.(Client)第1层的多个字段的集合：A2.([Client,Name])第2层所有记录的集合：A2.conj(Orders)第1层第10条记录：A2(10)第1层第10条记录的Orders字段（即所有下层记录）：A2(10).Orders第1层第10条件记录Orders字段的单个字段的集合：(A2(10).Orders).(Amount)第1层第10条件记录Orders字段的第5条记录：(A2(10).Orders)(5)
2024-05-15 23:09:17
652
原创 大数据最全java程序员一定要学会的骚操作“Redis的五大数据类型实现原理”，这可能是目前最全的
hashtable 编码的集合对象使用 字典作为底层实现，字典的每个键都是一个字符串对象，这里的每个字符串对象就是一个集合中的元素，而字典的值则全部设置为 null。对于 embstr 编码，由于 Redis 没有对其编写任何的修改程序（embstr 是只读的），在对embstr对象进行修改时，都会先转化为raw再进行修改，因此，只要是修改embstr对象，修改后的对象一定是raw的，无论是否达到了44个字节。注意集合和列表的区别：集合中的元素是无序的，因此不能通过索引来操作元素；集合中的元素不能有重复。
2024-05-15 12:34:03
367
原创 大数据最全Java知识点--IO流（下）(3)，2024年最新看这篇足矣了
/5.关闭外层流，只需要关闭 BufferedReader，因为底层会自动的去关闭节点流。//2. 不要去操作 二进制文件[声音，视频，doc, pdf], 可能造成文件损坏。//4.按行读取，当返回 null 时，表示文件读取完毕。//关闭流 , 关闭外层的处理流即可，底层会去关闭节点流。//字节流可以操作二进制文件，也可以操作文本文件。//2.引入BufferedReader。//2.引入BufferedWriter。//当返回 -1 时，就表示文件读取完毕。//每读取一行，就写入。
2024-05-15 12:33:27
296
原创 大数据最全Java数据结构基础——泛型、通配符_java通配符和泛型，深度剖析原理
*由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新****[需要这份系统化资料的朋友，可以戳这里获取](https://bbs.csdn.net/topics/618545628)****[需要这份系统化资料的朋友，可以戳这里获取](https://bbs.csdn.net/topics/618545628)**// 此时使用通配符"?// 此时使用通配符"?
2024-05-15 12:32:51
274
原创 大数据最全Java数据结构基础——泛型、通配符_java通配符和泛型(1)，2024年最新大数据开发基础面试题及答案
注意：泛型时在编译的时候的一种机制，在运行时是没有泛型的概念的。
2024-05-15 12:32:15
248
原创 【数据结构与算法】选择排序的实现_x选择排序是一种简单的排序方法,请给定任一列表lst实现以上过程
选择式排序也内部排序法，是从想要进行排序的数据中，按指定的规则选出某一元素，再依规定交换位置后达到 排序的目的。
2024-05-15 03:55:16
310
原创 【数据结构与算法】选择排序的实现_x选择排序是一种简单的排序方法,请给定任一列表lst实现以上过程(2)
它的基本思想是：第一次从 arr[0]~arr[n- 1]中选取最小值， 与 arr[0]交换，第二次从 arr[ 1]~arr[n- 1]中选取最小值，与 arr[ 1]交换，第三次从 arr[2]~arr[n- 1]中选取最小值，与 arr[2] 交换，…, 第 n- 1 次从 arr[n-2]~arr[n- 1]中选取最小值， 与 arr[n-2]交换，总共通过 n- 1 次，得到一个按排序码从小到大排列的有序序列。第一次排序后：[1, 5, 2, 12, 4]2.先假定该当前这个数是最小的数。
2024-05-15 03:54:40
203
原创 【数据结构与算法】选择排序的实现_x选择排序是一种简单的排序方法,请给定任一列表lst实现以上过程(1)
选择式排序也内部排序法，是从想要进行排序的数据中，按指定的规则选出某一元素，再依规定交换位置后达到 排序的目的。
2024-05-15 03:54:04
235
原创 Python大数据之PySpark(二)PySpark安装_支持 依赖项 ‘python pyspark‘ 的插件 spark 当前尚未安装。(5)
def pi(times): # times的意思是落入到正方形的次数x_time = 0。
2024-05-14 18:33:52
950
原创 Python大数据之PySpark(二)PySpark安装_支持 依赖项 ‘python pyspark‘ 的插件 spark 当前尚未安装。(4)
Python作为Spark的主流开发语言PySpark安装1-如何安装PySpark？Linux的Anaconda安装2-如何安装anconda？3-Anaconda有很多软件4-Anaconda中可以利用conda构建虚拟环境5-如何查看conda创建的虚拟环境？PySpark安装查看启动结果简单的代码演示在虚拟环境下的补充webuiJupyter环境设置监控页面运行圆周率或者def pi(times): # times的意思是落入到正方形的次数x_time = 0。
2024-05-14 18:33:16
827
原创 Python大数据之PySpark(二)PySpark安装_支持 依赖项 ‘python pyspark‘ 的插件 spark 当前尚未安装。(3)
Worker角色, 干活节点，启动一个名为 Worker的进程., Worker进程****最少1个, 最多不限制****Worker进程负责干活, 向Master汇报状态, 并听从程序Driver的安排,创建Executor干活。Master进程负责资源的管理, 并在有程序运行时, 为当前程序创建管理者Driver。
2024-05-14 18:32:40
568
原创 Python大数据之PySpark(二)PySpark安装_支持 依赖项 ‘python pyspark‘ 的插件 spark 当前尚未安装。(2)
5-如何查看conda创建的虚拟环境？PySpark安装查看启动结果简单的代码演示在虚拟环境下的补充webuiJupyter环境设置监控页面运行圆周率或者def pi(times): # times的意思是落入到正方形的次数x_time = 0。
2024-05-14 18:32:03
694
原创 2024年最新RabbitMQ进阶学习(1)，2024年最新2024大数据开发不死我不倒
每个只能配置一个因此我们可以在配置类中统一设置。@Slf4j@Overridelog.error("触发return callback,");});由于每个消息发送时的处理逻辑不一定相同，因此ConfirmCallback需要在每次发消息时定义。具体来说，是在调用RabbitTemplate中的convertAndSend方法时，多传递一个参数：id：消息的唯一标示，MQ对不同的消息的回执以此做判断，避免混淆：回执结果的Future对象将来MQ的回执就会通过这个。
2024-05-14 09:55:13
205
原创 2024年最新Rabbitmq入门与应用(三)-RabbitMQ开发流程(1)，2024年最新2024年大数据开发开发陷入饱和
在配置类中创建队列对象。
2024-05-14 09:54:37
287
原创 2024年最新Qt for WebAssembly 环境搭建 - Windows新手入门，2024年最新双非本科字节跳动大数据开发面试题分享
到D:/WASM/Git文件夹，一路Next就可以。使用CMD、PowerShell等。出现这么一堆就是安装好了Git。
2024-05-14 09:53:23
290
原创 2024年大数据最新大数据技术原理与应用-林子雨版-课后习题答案(1)，阿里面试官必问
答：①Pig是Hadoop生态系统的一个组件，提供了类似SQL的Pig Latin语言（包含Filter、GroupBy、Join、OrderBy等操作，同时也支持用户自定义函数），允许用户通过编写简单的脚本来实现复杂的数据分析，而不需要编写复杂的MapReduce应用程序，Pig会自动把用户编写的脚本转换成MapReduce作业在Hadoop集群上运行，而且具备对生成的MapReduce程序进行自动优化的功能，所以用户在编写Pig程序的时候，不需要关心程序的运行效率，这就大大减少了用户编程时间。
2024-05-14 01:16:20
1020
原创 2024年大数据最新大数据技术分享 - 话题挑战跳大开团_技术话题分享 比赛，2024年最新干货精讲
对于不同的业务场景，可能需要使用完全不同的技术架构，如离线计算、实时计算、私有云、公有云，以及是否需要对数据进行脱敏处理等等细节上的考虑。在这里建议大家不要再去泛泛的写一些介绍大数据的文章，可以具体的去解读某个数据分析场景、剖析某个框架的特点、介绍大数据的市场需求、分享个人学习路线等。不过好在挑战与机遇一直都是并存的，在你战胜自己的同时，也许你也同样PK掉了一批和你同赛道的人，这也就是技术和学习的魅力。要为大家把路铺好，做好导引，希望有更多的小伙伴能够加入进来，在下能做的也就只有抛砖引玉了。
2024-05-14 01:15:43
673
原创 2024年大数据最新大数据技术分享 - 话题挑战跳大开团_技术话题分享 比赛(1)，2024年最新大数据开发面试题内存优化
整个过程持续了21天，不过最让小编开心的是结识了优秀上进的小伙伴，博主也会通过的方式给大家讲解，并回答大家提出的一些问题，包括：面试准备、博客优化、学习路线等。小编更希望通过这次活动结识到更多的小伙伴，一同营造一个不断前进的技术氛围，与相同领域的小伙伴一起交流。至于奖品什么的，我想顺带着也就入手了🐶，毕竟活动只是一个助力，才是更实际的。
2024-05-14 01:15:08
517
原创 2024年大数据最新大数据技术入门：impala查询引擎(1)，2024年最新大数据开发研发岗面试复盘总结
— 新时代的农民工 🙊—— 换一种思维逻辑去看待这个世界 👀今天是加入CSDN的第1221天。
2024-05-14 01:14:30
338
原创 零基础自学网络安全？劝你还是别做梦了，你可能不知道这行门槛有多高
冷水泼完了，上点热菜~~**这个行业的前景还是不错的。因为有政策的鼓励，**网安以后会是一个非常重要的产业。至少从短期来看，这个行业没有前后端、移动端等业务开发那么卷。长期来看，人才市场空间还是很大的。据腾讯安全《》显示，**我国网络安全整体投入不高。**网络安全建设方面，国内网络安全投入占信息化的投入比例大概不到百分之3%，而欧美等发达国家均在10%以上，甚至有的超过了15%。我们无论是在投资规模，应对网络安全的认知等方面，我们与国外差距非常大。这与我们数字化依赖程度相比，还是一个非常大的反差。
2024-05-12 22:10:22
344
原创 零基础自学网络安全？劝你还是别做梦了，你可能不知道这行门槛有多高(1)
第二种：究极资深安全大佬，天赋异禀，一个人即可搞定企业的安全体系。茅与盾的结合体，进可攻退可守的全能型人才。这样的人， 在国内连0.1%都不到。普通网安工程师的这里给还在学校的同学解释一下社会的残酷现实：为什么网络安全工程师普遍薪资区间低于其他开发类目？因为网络安全部门，在一个公司里不是业务部门，通俗的说，它无法给公司创造直接收益。还有原因就是现阶段国内企业对网络安全领取的重视程度还不那么高。以上理论仅限于非一线互联网巨头企业，大厂的安全领域专家薪资待遇是远高于其他开发领域的（比如蚂蚁金服，京东金融）
2024-05-12 22:09:46
344
原创 零基础小白如何自学 Unity 游戏开发？(送 Unity 教程)_unity如何自学
近年来，越来越多的游戏开发爱好者开始关注 Unity 引擎，相比于其他引擎，Unity 有强大的资源商店和跨平台能力，而且容易上手，目前已成为游戏开发行业的主流选择，受到了大量开发者的青睐。本书共有 10 章内容，以认识 Unity 引擎开始，从 0 到 1 突破，循序渐进地介绍了 Unity 游戏开发的方方面面。
2024-05-12 22:09:10
324
原创 零基础小白如何自学 Unity 游戏开发？(送 Unity 教程)_unity如何自学(1)
近年来，越来越多的游戏开发爱好者开始关注 Unity 引擎，相比于其他引擎，Unity 有强大的资源商店和跨平台能力，而且容易上手，目前已成为游戏开发行业的主流选择，受到了大量开发者的青睐。本书共有 10 章内容，以认识 Unity 引擎开始，从 0 到 1 突破，循序渐进地介绍了 Unity 游戏开发的方方面面。
2024-05-12 22:08:33
275
原创 我用Echarts图表分析巴西队历年战绩，预测卡塔尔世界杯能否夺冠_足球echarts表(2)
symbol: “image://+base64编码”,研究，那么很难做到真正的技术提升。
2024-05-12 05:00:01
368
原创 我用Echarts图表分析巴西队历年战绩，预测卡塔尔世界杯能否夺冠_足球echarts表(1)
设置symbol为base64编码的图片，并设置通过symbolSize设置大小series: [symbol: "image://+base64编码",
2024-05-12 04:59:25
500
原创 想做自动驾驶技术的入，这回分享一个简单好用的开放平台_自动驾驶开放平台有哪些
整个引入软件包管理是个非常好的想法，真心的，如果大数据这方面能借鉴就好了，现在整个安装部署时间从原来的按天算，降低到现在30分钟内，而且还更易扩展，你说多带劲，也就是我们想跑让整个环境跑起来再也不用那么费劲的挨个搞环境了，这回使用安装管理的这个方式我们可以根据我们的具体需要求进行选择性的安装，仅仅安装我们需要的内容，30分钟内也就安装完毕了，我们可以进行我们的学习或者是测试工作了，你想想多方便，不然跑环境，你搭建了一天，啥结果看不到，你晚上的日报都不好写。**、感知模型与开发流程升级：**
2024-05-12 04:58:49
631
原创 想做自动驾驶技术的入，这回分享一个简单好用的开放平台_自动驾驶开放平台有哪些(2)
整个引入软件包管理是个非常好的想法，真心的，如果大数据这方面能借鉴就好了，现在整个安装部署时间从原来的按天算，降低到现在30分钟内，而且还更易扩展，你说多带劲，也就是我们想跑让整个环境跑起来再也不用那么费劲的挨个搞环境了，这回使用安装管理的这个方式我们可以根据我们的具体需要求进行选择性的安装，仅仅安装我们需要的内容，30分钟内也就安装完毕了，我们可以进行我们的学习或者是测试工作了，你想想多方便，不然跑环境，你搭建了一天，啥结果看不到，你晚上的日报都不好写。**、感知模型与开发流程升级：**
2024-05-12 04:58:13
795
原创 大数据最全大数据技术4：Lambda和Kappa架构区别_lambda架构和kappa架构区别，2024年最新腾讯T3面试官透露
Lambda架构通过批处理层和速度层的组合，兼顾了低延迟和复杂分析，但系统较复杂，存在数据冗余和延迟不一致问题。Kappa架构只通过流式系统实现所有处理，简化了架构，但历史数据分析相对复杂，需要流式系统保证精确一次语义。两者都有各自的优缺点，需要根据具体场景进行技术选型和设计权衡。
2024-05-11 20:21:43
611
原创 大数据最全大数据开发（Java面试真题-卷一）(1)，2024年最新太爽了
JVM垃圾回收指的是当Java应用程序运行时，自动释放不再使用的对象内存空间，并进行资源回收和整理过程。标记-清除算法：首先标记所有被引用对象，在清除阶段将未标记的对象释放。复制算法：将内存分为相同大小的两块，每次只使用其中的一块。当一块内存用完了之后，将活着的对象复制到另一块内存上，并清除原来使用过的内存。标记-整理算法：先标记所有被引用对象，然后将活着的对象移动到一端，最后清除边界以外的对象。分代收集算法：根据对象生命周期划分为不同代，在垃圾回收时更关注年轻代，因为大多数新生的对象很快就会死去。
2024-05-11 20:21:07
931
1
原创 大数据最全大数据开发项目-电信项目1-生产数据(1)，别再说自己不会了
phoneNameMap.put(“18549641558”, “施梅梅”);phoneNameMap.put(“17005930322”, “金虹霖”);phoneNameMap.put(“15978226424”, “华啟倩”);phoneNameMap.put(“15542823911”, “仲采绿”);phoneNameMap.put(“15422018558”, “戚丽红”);phoneNameMap.put(“17269452013”, “何翠柔”);
2024-05-11 20:20:31
596
原创 大数据最全大数据开发简历模版_大数据开发社招简历模板(1)，2024年最新大数据开发端简单易用的SPI框架
5. 熟悉linux开发环境，编写跑数据的shell脚本；3. 依据业务需求进行 dm集市层的开发，使用 pl/sql 工具编写存储过程,实现数据的同步,创建自定 义函数,完成报表各指标的计算及对 sql 的调优. 4. 使用 Sql 和 FineReport 报表工具完成报表的开发 5. 进行测试,验证功能实现和指标的准确性，转测后协助测试同事的工作,及时修改问题缺陷 || 工作年限 | 5 | 相关工作年限 | 5 | 手机号 | Xxx || 年龄 | x | 性别 | x | 邮箱 | xx |
2024-05-11 20:19:55
763
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人