- 博客(216)
- 收藏
- 关注
RSS订阅原创 算法竞赛入门【码蹄集新手村600题】(MT1351-1400）_马蹄级考试题(2)
/第i行第j列的值等于第i-1行第j列与第i-1行第j-1列的和。
2024-05-16 11:59:30
364
原创 最全大数据技术学习笔记（五）—— MapReduce，2024年最新大数据开发程序员必备
（1） 需求过滤输入的 log 日志，包含atguigu的网站输出到 atguigu.log，不包含 atguigu 的网站输出到 other.log。log.txt（2）代码编写@Override// 直接写出@Override// 遍历直接写出自定义/\*\*\* 自定义的LogOutputFormat需要继承Hadoop提供的OutputFormat\*//\*\*\* 返回一个RecordWriter对象\* @return\*/
2024-05-16 04:13:03
998
原创 最全大数据开发项目-电信项目2-传输数据(4)，2024年最新让你明明白白的使用RecyclerView
网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化资料的朋友，可以戳这里获取一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！/root/soft/apache-flume-1.6.0-bin/bin/flume-ng agent --conf /root/soft/apache-flume
2024-05-16 04:12:30
921
原创 最全大数据开发岗面试复习30天冲刺 - 日积月累，每日五题【Day30】—，程序员工作2年月薪12K
今天我们复习了面试中常考的数据倾斜相关的五个问题，你做到心中有数了么？其实做这个专栏我也有私心，就是希望借助每天写一篇面试题，督促自己学习，以免在面试期间尴尬！平时不流汗,面试多流泪!对了，如果你的朋友也在准备面试，请将这个系列扔给他，网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化资料的朋友，可以戳这里获取一个人可以走的很快，但一群人才能走的更远！
2024-05-16 04:11:57
815
原创 最全大数据开发岗面试复习30天冲刺 - 日积月累，每日五题【Day10】—，2024年最新带你玩转自定义view系列
大家好，我是程序员manor。作为一名大数据专业学生、爱好者，深知面试重要性，很多学生已经进入暑假模式，暑假也不能懈怠，正值金九银十的秋招接下来我准备用30天时间，基于大数据开发岗面试中的高频面试题，以每日5题的形式，带你过一遍常见面试题及恰如其分的解答。相信只要一路走来，日积月累，我们终会在最高处见。道阻且长，行则将至；行而不辍，未来可期！本栏目大数据开发岗高频面试题主要出自大数据技术专栏的各个小专栏,由于个别笔记上传太早,排版杂乱,后面会进行原文美化、增加。
2024-05-16 04:11:24
886
原创 大数据最新【高阶数据结构】AVL树（动图详解）_avl tree(4)，2024年最新华为大神花费5个月打造的这份714页学习笔记系列
【代码】大数据最新【高阶数据结构】AVL树（动图详解）_avl tree(4)，2024年最新华为大神花费5个月打造的这份714页学习笔记系列。
2024-05-15 19:25:00
213
原创 大数据最新【项目精选】病历管理系统设计与实现（源码+视频，2024年最新字节大数据开发高级岗
在医生修改页面中，将初始化该医生的所有信息，并将信息一一对应填充到对应编辑栏中。其中yisheng包含字段：名字,账号,密码,科室,简介，使用addyishengact将该医生对象存入数据库中，在yishengMapper中定义了insert方法，匹配数据库中的insert into yisheng语句实现将医生数据存入数据库的操作。id=将id传入到后台中，通过deleteyisheng接收医生id。int(11) DEFAULT NULL COMMENT ‘医生id’,PRIMARY KEY (
2024-05-15 19:24:28
220
原创 大数据最新【项目精选】医院管理住院系统的研究与实现（源码+论文，非科班生金九银十求职经历
由于它的实现，大大的方便了医院的管理，并且为医生和病人提供了很大的便利，缩短了病人求医的时间，为病人和医生之间快速的建立联系提供了一种保障。但是在一些医院，还没有这样的系统，医生、病人和医院之间的关系比较独立，这就大大的影响了医院的效率，给医院的长久发展带来了很不利的因素。在经济全球化的影响下，我国医疗行业不断借鉴外来经验，不断创新医院的运营模式，改善医院的管理体制，取得了良好的社会反映，发展速度不断加快，给人们的生活带来了很大的便利。，医生、病人和医院的管理人员都可以通过此系统寻找出自己所需要的信息。
2024-05-15 19:23:55
242
原创 大数据最新【项目精选】俄罗斯方块项目（视频+论文(2)，2024最新大数据开发高频精选面试题讲解
包括：熟悉Eclipse开发工具，Java 语言基础,类和对象，包装类，数字处理类，接口、继承与多态，类的高级特性，异常处理，Swing程序设计，集合类，I/O输入输出，反射，枚举类型与泛型，多线程，网络通信，数据库操作，Swing表格组件，Swing树组件，Swing其他高级组件，高级布局管理器，高级事件处理，AWT绘图与音频播放等。同时，在如今社会的各式各样的行业中都有计算机软件的应用，包括工业，农业，银行，航空，政府部门等等，能有效的促进经济和社会的发展，提高人们的工作效率和生活效率。
2024-05-15 19:23:22
228
原创 助力工业物联网，工业大数据之服务域：定时调度使用【三十四】_工业物联网定时任务(1)
了解AirFlow中如何实现邮件告警原理：自动发送邮件的原理：邮件第三方服务AirFlow配置：airflow.cfg。
2024-05-15 08:25:19
295
原创 助力工业物联网，工业大数据之服务域：安装主题分析实现【三十】(2)
既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上大数据知识点，真正体系化！由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新需要这份系统化资料的朋友，可以戳这里获取构建小结目标：了解物料域主题的设计模型路径实施小结目标：掌握DM层的设计路径实施DM层设计运营部门主题实现构建既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习
2024-05-15 08:24:07
791
原创 助力工业物联网，工业大数据之服务域：安装主题分析实现【三十】(1)
网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化资料的朋友，可以戳这里获取一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！构建小结目标：了解物料域主题的设计模型路径实施小结既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上
2024-05-15 08:23:31
422
原创 【Kafka从成神到升仙系列 三】你真的了解 Kafka 的元数据嘛_kafka是基于netty吗
而元数据的获取，是通过Sender线程来获取的Sender 线程是一个不断轮询的线程，类似我们之前提到的 EventLoop 线程我们首先解释一下如果你感觉参数有点多，难以看懂，就记住一个cluster和needUpdate就好了，其他的不太重要我们进一步看下cluster。
2024-05-14 23:44:03
745
原创 【Kafka从成神到升仙系列 三】你真的了解 Kafka 的元数据嘛_kafka是基于netty吗(2)
如果你刚接触 HashMap，你刚有兴趣去看其源码，在看 HashMap 的时候，有一个知识：当链表长度达到 8 之后，就变为了红黑树，小于 6 就变成了链表，当然，还和当前的长度有关。最重要的还是慢慢地打击你的积极性，说我的学习怎么那么不 happy 啊，怎么那么没劲那，因为你的学习方法错了，大体读明白，先拿来用，用着用着，很多道理你就明白了。你如果进到庐山里头，二话不说，蹲下头来，弯下腰，就对着某棵树某棵小草猛研究而不是说先把庐山的整体脉络研究清楚了，那么你的学习方法肯定效率巨低而且特别痛苦。
2024-05-14 23:43:27
819
原创 【Kafka从成神到升仙系列 三】你真的了解 Kafka 的元数据嘛_kafka是基于netty吗(1)
一共两个原因：1、由于性能问题，kafka 的通信过程并不需要 netty 那么庞大的通信体系2、kafka客户端原始时期，需要让用户将整个东西作为依赖项包含其内，如果引入了 netty，那么每个人依赖的版本号不同，将会产生巨大的兼容问题3、kafka的安全层和一些另外的问题，需要 kafka 自己来解决，而这些烦恼的问题，netty 中已经解决了。
2024-05-14 23:42:51
436
原创 【Kafka】（二十四）轻量级流计算 Kafka Streams 实践总结_轻量级流式计算处理
而 Spark Streaming 基于 Apache Spark，可以非常方便与图计算， SQL 处理等集成，功能强大，对于熟悉其它 Spark 应用开发的用户而言使用门槛低。第一，Spark 和 Storm 都是流式处理框架，而 Kafka Streams 提供的是一个基于 Kafka 的 流式处理类库。第四，使用 Storm 或 Spark Streaming 时，需要为框架本身的进程预留资源，如 Storm 的 supervisor 和 Spark on YARN 的 node manager。
2024-05-14 23:42:13
615
原创 Apache DolphinScheduler征稿--大数据神器来了_apache dolphinscheduler java定时任务(2)
目前诸多行业都将数字化转型的任务提上了日程，系统上云也是如火如荼，在这样的大背景下未来大数据的量级肯定还会不断创出新高，比如在上周阿里云的峰会上，Caffe之父贾扬清就指出阿里存储的数据量级正在以年化80%左右的速度增长，不过这样的数据增长速度，却成为大数据工程师的甜蜜负担，传统数据库与数仓用到数据湖三套体系的兼容性很差，能让他们整体协同工作运转就非常不易了，想提高效率真是难比上青天。
2024-05-14 14:24:14
704
原创 Apache DolphinScheduler征稿--大数据神器来了_apache dolphinscheduler java定时任务(1)
数据要在这里搬动三次，复制三份冗余，还要管理数据一致性，每天数据中心运维的大量工作在做数据搬家。目前诸多行业都将数字化转型的任务提上了日程，系统上云也是如火如荼，在这样的大背景下未来大数据的量级肯定还会不断创出新高，比如在上周阿里云的峰会上，Caffe之父贾扬清就指出阿里存储的数据量级正在以年化80%左右的速度增长，不过这样的数据增长速度，却成为大数据工程师的甜蜜负担，传统数据库与数仓用到数据湖三套体系的兼容性很差，能让他们整体协同工作运转就非常不易了，想提高效率真是难比上青天。
2024-05-14 14:23:38
684
原创 Android开发人员必看的 Handler 消息处理机制（源码实战）_android 大量数据handle主线程处理
【代码】Android开发人员必看的 Handler 消息处理机制（源码实战）_android 大量数据handle主线程处理。
2024-05-14 14:23:02
155
原创 Android Spider Frida-Dexdump 脱壳工具下载使用以及相关技术介绍_frida-dexdump下载
本案例使用的App是：引力播.apk，涉及到查壳、脱壳、反编译；提示：以下是本篇文章正文内容，下面案例可供参考。
2024-05-14 14:22:25
786
原创 2024年最全【一起学Java-第六篇】详解数组与字符串_java 解析字符串数组(2)，2024最新大数据开发面试真题解析
Java中定义数组的语法有两种//一般用这个type 为Java中的任意数据类型，包括基本类型和组合类型，arrayName为数组名，必须是一个合法的标识符，[ ] 指明该变量是一个数组类型变量。这两种形式没有区别，使用效果完全一样，读者可根据自己的编程习惯选择。**与C、C++不同，Java在定义数组时并不为数组元素分配内存，因此[ ]中无需指定数组元素的个数，即数组长度。其中，arraySize 为数组的长度，type 为数组的类型。//为一个整型数组分配3个int 型整数所占据的内存空间。
2024-05-14 05:46:12
585
原创 2024年最全【SQL屠夫系列】leetcode-180(3)，阿里快手拼多多等7家大厂大数据开发面试真题
编写一个 SQL 查询，查找所有至少连续出现。返回的结果表中的数据可以按 任意顺序 排列。
2024-05-14 05:45:36
455
原创 2024年最全【SQL Server】数据库开发指南（二）MSSQL数据库开发对于库(1)，普通二本的辛酸大数据开发面试之路
以下是一个使用GOGO必须单独一行，不能和其他语句或命令在同一行。另外，GO 后面可以指定一个可选的参数，表示要执行多少次批处理。例如，GO 5表示要执行当前批处理 5 次。但是这个功能只能在某些客户端应用程序中使用，而在 SQL Server Management Studio 中不支持。GO 是用于将 T-SQL 批处理分成多个批次的分隔符，通常在一个脚本中或一个事务中使用。
2024-05-14 05:45:00
706
原创 2024年最全【Spark】Spark SQL 数据类型转换_spark 字段类型，2024年最新大数据开发性能优化和内存优化面试
说明默认都是StringType类型。
2024-05-14 05:44:19
341
原创 2024年大数据最全无痕修复：优雅修改本地及远程Commit信息，保持项目历史整洁(1)，2024年最新阿里P8大牛手把手教你
请确保在执行强制推送操作前，与你的团队成员沟通，告知他们你将修改最近的提交，以避免产生不必要的冲突或丢失他人的工作。在多人协作的项目中，修改已公开的历史提交通常应尽量避免，除非确实必要且团队成员达成共识。
2024-05-13 20:57:45
380
原创 2024年大数据最全斜说数据结构“树”，青年才俊告别网页pdf，2024年最新5214页PDF的进阶架构师学习笔记
gggggggg//将这一行选择一下（去除的意思）拷贝的内容粘贴到此。难道是一个告知一个，一股脑都进来了，我房间里本来就没有这么多蚊子，他们是怎么通过重重的关卡，难道他们是算法导论的先知？可是蚊子兄弟咋不知道跑呢。看来这个二叉树是有缺陷的。一夜之间到达我的蚊帐里。这吞噬血也是真可以的。
2024-05-13 20:57:09
309
原创 2024年大数据最全数据结构基础入门之【顺序表】详解(1)，文末领取面试资料
在定义结构体时，我们可以用typedef进行数组类型简化，同时方便我们后期更改存储类型的时候直接更改typedef处即可。同时我们也用typedef进行结构体类型简化，方便我们以后编辑代码。int size;通过上面的代码我们可以发现，当我们不想存储int型数据时，我们只需把‘typedef int SQDataType’改为‘typedef double SQDataType’即可。极大的提高了代码的维护性。
2024-05-13 20:56:33
986
原创 2024年大数据最全数据结构与算法——线性表（顺序表篇）_顺序建立线性表的理解(1)，2024年最新95%大数据开发开发者已收藏的十大开源库
线性表(linear list)是最常用且最简单的一种数据结构，一个线性表是n个数据元素的有限序列。线性表中的数据元素可以是各种各样的，但同一线性表中的元素必定具有相同的性质（占用相同的空间大小），即属于同一种数据对象，相邻数据元素之间存在着序偶关系（序:就是有序的意思 偶:一对儿. 序偶:一对有序的数），若用L表示线性表的话，可以将线性表记为：📌La1ai−1aiai1an则表中ai−1ai-1ai−1领先于aiaiai,aiaiai领先于。
2024-05-13 20:55:56
1000
1
原创 2024年大数据最全28、抽象类官方教程学习_抽象类 教程(3)，2024年最新字节大数据开发面试必问
合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上大数据知识点，真正体系化！* Animal 是一个抽象类。* eat() 是一个抽象方法。// 获取当前时间的毫秒值。
2024-05-13 15:23:51
230
原创 2024年大数据最全23篇大数据系列（二）scala基础知识全集（史上最全，建议收藏(1)，2024年最新大数据开发内存优化面试题
变量模式和通配符模式，都可以匹配任意值，他们之间的区别是，变量模式匹配成功后，该变量中会存储匹配成功的值，在后续的代码中还可以引用，而通配符模式匹配成功后，不能再引用匹配到的值。在java中使用void来声明无返回值的方法，而在scala里，这种情况也会有返回值，会返回一个Unit，这是一个特定的值，表示忽略方法的返回值。举个例子，我们在定义方法时，会和声明变量一样，使用等号(=)连接，等号左侧是函数名、参数列表和返回值类型（可以省略），而等号右边便是一个由大括号({})包裹的多行表达式。
2024-05-13 15:23:15
893
原创 2024年大数据最全23篇大数据系列（一）java基础知识全集（2万字干货，建议收藏(3)，2024年最新【干货
2014年3月，马云曾经在北京的一次演讲中说道：“人类正从IT时代走向DT时代”。7年过去了，正如马云预想的那样，大数据时代已经到来了。而大数据时代，有一个关键性的岗位不得不提，那就是大数据工程师。想必大家也会好奇，大数据工程师，日常是做什么的呢？基于用户的各方面数据，建立对用户的全方位理解，构建每个特定用户的画像，以便针对每个个体完成精细化运营。那么，问题来了，如果想成为一名大数据工程师，胜任上述工作内容，需要具备什么样的条件？拥有什么样的知识呢？分类子分类技能描述技术能力编程基础。
2024-05-13 15:22:40
878
原创 2024年大数据最全23篇大数据系列（一）java基础知识全集（2万字干货，建议收藏(1)，2024年最新2024最新百度、头条等公司大数据开发面试题目
主要讲述类（子类和父类）中各成员变量的初始化顺序。**：常见的集合及方法**主要简述Collection和Map两个接口以及各集合的常用方法。**：常用的字符串处理方法**这部分会对每种方法进行详细说明并通过示例帮助小伙伴们加深理解。**：日期处理方法**主要通过示例代码对最常用到的日期处理类java.util.Date、java.util.Calendar、java.text.SimpleDateFormat进行介绍。**：json的解析与操作**
2024-05-13 15:22:02
746
原创 最新时序分析、时序约束和时序收敛（3）--基础概念（下）_xlinx(3)，大数据开发面试必看书籍
数据需求时间–建立时间实际上是一种对数据到来之前保持稳定的最极端的时间要求，比如为了满足目的寄存器的建立时间要求，计算得到上级寄存器的输出必须至少在时间刻度3ns之前即保持不变，这也就意味着上级数据能到达的最晚时间是3ns，那么1ns、2ns到达自然是可以的。数据需求时间–建立时间，实际上是一种对数据到来之前数据保持稳定的最极端时间要求。路径3约束的是FPGA内部的源寄存器（起点）和下游器件的目的寄存器（终点）的数据路径，其目的是要满足前端即FPGA内部寄存器的建立时间要求和保持时间要求。
2024-05-12 18:01:04
367
原创 最新数据结构与算法：终于可以用三种语言（C，C#，JavaScript(4)，2024年最新讲的真详细
在C#文件夹中可以找到“Graph0.cs”，这个文件中包含着深度优先遍历、广度优先遍历等程序中的所有图类程序，现在，我们就要在这个类中补充新的方法。首先复制这个类到Graph.cs，然后用C#建立一个Windows应用程序，然后在资源管理器中添加这个类，这个类和在深度优先遍历中的类完全一致，但去掉了命名空间说明，这样，这个类就可以使用在其他工程中了。找到这个类中的最后一个方法：DSFTraverse()，然后开始在这个方法后补充新方法：DFS()，由于算法和C语言完全一致，此处算法问题不在介绍。
2024-05-12 18:00:28
439
原创 最新数据结构与算法之《二叉树》详解(3)，2024年最新超通俗解析
定义结构体时，由上面的链式存储结构我们直到该结构体应该包含一个存储数据的变量，和指向左右分支节点的指针；我们看代码实现。}BTNode;首先我们自己要有一个二叉树，简单的二叉树即可。因为下面的操作都是在二叉树上进行的。
2024-05-12 17:59:52
741
原创 最新数据结构——单链表的基本操作_数据结构单链表的相关操作(1)，大数据开发面试试题
(img-qvKaEQiJ-1715507915789)]//判断开始时链表是否只有一个元素。//判链表开始是否为空。//在pos之前插入。
2024-05-12 17:59:15
963
原创 最全大数据技术入门：MapReduce（分布式计算框架）(3)，2024年最新作为大数据开发程序员
概念"Map（映射）“和"Reduce（归约）”，是它们的主要思想，都是从函数式编程语言里借来的，还有从矢量编程语言里借来的特性。当前的软件实现是指定一个Map（映射）函数，用来把一组键值对映射成一组新的键值对，指定并发的Reduce（归约）函数，用来保证所有映射的键值对中的每一个共享相同的键组。Hadoop 集群常驻进程，根据要处理的输入数据量，命令 TaskTracker生成相应数量的Map和Reduce进程任务，并管理这个作业生命周期的任务的调度和监控。负责管理 Map 进程和 Reduce 进程。
2024-05-12 09:29:20
795
原创 最全大数据技术之Shell增强（附带代码解析）(1)，【面试总结
fi或者if [ 条件判断式 ] then 程序fi注意事项：（1）[ 条件判断式 ]，中括号和条件判断式之间必有空格（2）if后要有空格。
2024-05-12 09:28:44
602
原创 最全大数据技术与应用（Spark），三年经验月薪50k我是怎么做到的
1.spark基于内存，mapreduce基于磁盘。2.更加通用，spark提供了transformation和action这两大类的多个功能api，另外还有流式处理sparkstreaming模块、图计算GraphX等等；mapreduce只提供了map和reduce两种操作，流计算以及其他模块的支持比较缺乏。3.mapreduce任务调度和启动开销大，spark线程池模型减少task启动开销。
2024-05-12 09:28:08
908
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人