- 博客(71)
- 收藏
- 关注
RSS订阅原创 最新【1024节日快乐！】LeetCode--分发饼干(1)，2024年最新系列篇
对每个孩子 i，都有一个胃口值 g[i]，这是能让孩子们满足胃口的饼干的最小尺寸；2）将接收的两个数组的值进行从小到大的排序，因为要使用尽量小的饼干去满足胃口需求小的孩子。虽然你有两块小饼干，由于他们的尺寸都是1，你只能让胃口值是1的孩子满足。你有三个孩子和两块小饼干，3个孩子的胃口值分别是：1,2,3。你有两个孩子和三块小饼干，2个孩子的胃口值分别是1,2。输入: g = [1,2,3], s = [1,1]输入: g = [1,2], s = [1,2,3]你拥有的饼干数量和尺寸都足以让所有孩子满足。
2024-05-16 06:57:57
302
原创 最新【(11)，字节大牛教你手撕大数据开发学习
枚举描述FileAccess指定对文件的读取和写入访问权限。FileShare指定已在使用的文件所允许的访问级别。FileMode指定是保留还是覆盖现有文件的内容，以及创建现有文件的请求是否会引发异常。Read1对文件的读访问。可从文件中读取数据。与Write组合以进行读写访问。ReadWrite3对文件的读写访问权限。可从文件读取数据和将数据写入文件。Write2文件的写访问。可将数据写入文件。与Read组合以进行读写访问。
2024-05-16 06:57:24
742
原创 最新《Redis实战篇》五、分布式锁-redission(3)，2024年最新为什么大公司一定要使用微服务
锁的自动释放时间。– 代码走到这里,说明获取锁的不是自己，获取锁失败。return Result.fail(“不允许重复下单~”);– 大于0说明不能释放锁，重置有效期然后返回。– 存在, 获取锁，重入次数+1。
2024-05-16 06:56:17
844
原创 大话数据结构—顺序表、有序表、线性索引查找_大话数据结构顺序表代码(1)
有序表查找的三种方法中，二分进行加法与除法运算，插值查找进行复杂的四则运算，而斐波那契查找只是进行最简单加减法运算，在海量数据的查找过程中，这种细微的差别可能会影响最终的查找效率。二分基础上修改，low+1/2(high-low)中1/2–>(key-a[low])/(a[high]-a[low])（插值公式）由于不是有记录来确定属性值，而是有属性值来确定记录的位置，因而叫倒排索引。根据要查找的关键字key与查找表中最大最小记录的关键字比较后的查找方法。查找时，可用二分，插值等从索引表中查找关键码。
2024-05-15 22:10:04
477
原创 大环境之下软件测试行业趋势能否上升？_大数据背景下软件测试市场的规模和增长趋势如何
但是测试行业这些年就没形成对这个领域的正确测试方法， 结果最后丢失了这个市场。现在都是研发自己保证了。因为找不到合格的测试工程师去保证这个业务。一定要记住， 业务空间决定QA的生存空间， 这是所有行业都通行的道理。如果你不能满足业务需求， 就会被淘汰出局， 要么选择退守防御要么选择勇于接受挑战那测试行业的未来是什么样的？我个人必要还是持乐观态度的，且听后面分析。从业人员规模跟生产力负相关， 跟业务规模正相关。以后能有多大取决于技术和业务规模的双重因素。
2024-05-15 22:09:31
1659
原创 大模型（LLMs）算法工程师的面试题_大模型开发工程师 面试问题(1)
系统化资料的朋友，可以戳这里获取](https://bbs.csdn.net/topics/618545628)**
2024-05-15 22:08:58
779
原创 大数据驱动的工业互联网平台在工厂生产中的应用与创新_制造工厂 大数据
嘿，朋友们！这里是艾斯视觉，我们拥有超过10年的UI设计和前端开发经验。我们希望通过我们的分享，能给您带来一些帮助和启发。如果您有任何问题或建议，请随时留言、关注并私信我们，让我们一起交流学习！感激不尽！大数据驱动的工业互联网平台是一种基于云计算、物联网和大数据技术的综合性解决方案，它能够实现对工厂生产过程的全面监控、数据收集和分析，从而提高生产效率、降低生产成本、优化产品设计、提升产品质量和客户满意度。
2024-05-15 22:08:24
469
原创 大数据时代使用Python做数据分析有什么优势_python作为大数据分析处理工具的优点(1)
看了这么多Python在使用数据分析时的优势，大家心动了吗？心动不如行动，现在就开始学习Python吧~掌握了这一个利器，大家就可以下数据的海洋里游刃有余的遨游。
2024-05-15 11:27:21
338
原创 大数据技术原理与应用实验报告--HDFS分布式文件系统_分布式文件系统 hdfs实验
5.在本地文件系统创建文件，文件名为自己学号，使用API方式上传该文件到/mytestdir中，并将其下载到本地/home/hadoop下。2.在本地文件系统创建文件，文件名为自己名字拼音全拼，使用put命令将该文件上传到HDFS的/mytestdir/ch04中。命令语句：hadoop fs -cat /mytestdir/ch04/liangwanying.txt。命令语句：hadoop fs -mkdir -p /mytestdir/ch04。3.使用 –cat命令查看刚刚上传的文件内容。
2024-05-15 11:26:46
334
原创 大数据技术—Hadoop之搭建Linux虚拟机（桥接模式下）_haddop虚拟机
这里根据自己的需要进行设置，需要注意的是处理器内核总数不能高于你的本机配置。这里也根据自己的需要进行设置选择桥接模式，然后点击下一步。然后一直选择默认选项，来到以下页面：选择最大磁盘大小，可根据自己的需要进行设置，注意不能太小！这里的文件名也可以自己设置！后面均不需要修改了。到此，虚拟机就创建完成，启动该虚拟机即可。第一次会有点慢，等待即可。
2024-05-15 11:26:10
334
原创 大数据技术—Hadoop之搭建Linux虚拟机（桥接模式下）_haddop虚拟机(7)
主机里面填写的是你获得的动态IP值，用户名和密码是你之前自己设置的，填入即可。这里的用户名还可用，一般不建议使用，因为它具有最高权限点击确认后，连接即可，如果连接不上，可多尝试几次。出现该页面就代表连接成功，后续一直在该页面操作即可。这里最后的地方也可能不是ens33，可根据你的实际情况进行调整，如可先进入目录查看具体是什么，如果通过上面命令可直接进去，那就不用管。**注意：如果你是以普通用户登录的，执行该命令时可能无法对该文件进行修改，需要进入到root用户，获取最高权限，命令为：**
2024-05-15 11:25:33
235
原创 【实时数仓篇】（02）基于 Flink 的典型 ETL 场景实现_买蓉 美团(3)
本文是学习Flink中文社区实时数仓篇的总结，课程地址讲师：讲师：买蓉（美团点评 高级技术专家）。资源和运维成本较高，所以发展为kappa架构。
2024-05-15 02:48:44
422
原创 【实时数仓篇】（02）基于 Flink 的典型 ETL 场景实现_买蓉 美团(2)
将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新**资源和运维成本较高，所以发展为kappa架构。
2024-05-15 02:48:08
273
原创 【实时数仓篇】（02）基于 Flink 的典型 ETL 场景实现_买蓉 美团(1)
本文是学习Flink中文社区实时数仓篇的总结，课程地址讲师：讲师：买蓉（美团点评 高级技术专家）。资源和运维成本较高，所以发展为kappa架构。
2024-05-15 02:47:32
382
原创 【实时数仓篇】（01）美团 Flink 实时数仓应用_实时数仓建模 美团
本文是学习Flink社区在B站的实时数仓篇第一节课程的总结，1. Flink 实时数仓的应用讲师：黄伟伦（美团点评 数据系统研发工程师）。
2024-05-15 02:46:56
607
原创 Kafka指定分区消费及consumer-id,client-id相关概念解析_kafka clientid(1)
查看kafka的server.log文件发现确实是在日志中起到标识作用的实际上是consumer-id,而并不是client-id,而client-id相当于只是consumer-id的一部分,但是由于consumer-id对使用者来说是不可见的,用户能够配置的只是consumer-id的前缀,即client-id,所以官方的解释本质上来说并没有太大问题。这样做的目的是通过允许在服务器端请求日志中包含逻辑应用程序名称，能够跟踪不仅仅是ip/端口的请求源。至于client-id的作用,官方给出的描述如下。
2024-05-14 17:27:01
1074
原创 JSON解析 -- java实用向 -- 关于JSON基础，看这一篇就够了_fromjson
1、Object Notation, JS 对象简谱) 是一种轻量级的数据交换格式。2、它基于(欧洲计算机协会制定的js规范)的一个子集，采用完全独立于编程语言的文本格式来存储和表示数据。简洁和清晰的层次结构使得 JSON 成为理想的数据交换语言。
2024-05-14 17:26:25
731
原创 JSON解析 -- java实用向 -- 关于JSON基础，看这一篇就够了_fromjson(1)
Gson（又称Google Gson）是Google公司发布的一个开放源代码的Java库，主要用途为序列化Java对象为JSON字符串，或反序列化JSON字符串成Java对象。{“id”:“99”,“name”:“牛顿的苹果”,“info”:“牛顿在树下被苹果砸到”}{“id”:“99”,“name”:“牛顿的苹果”,“info”:“牛顿在树下被苹果砸到”}JSON是一种前后端交流的语言格式，它使得不同的语言的内容可以相互转换和理解。3.1.2 fastjson是什么。3.1.3 区别与特性。
2024-05-14 17:25:49
771
原创 JDBC的两种开源的数据库连接池详解_用于foxpro的开源jdbc驱动程序 开源
/(4)等待数据库连接池分配连接的最长时间. 单位为毫秒. 超出该时间将抛出异常.//(4)等待数据库连接池分配连接的最长时间. 单位为毫秒. 超出该时间将抛出异常.//(3)指定最小活跃的连接数: 在数据库连接池中保存的最少的空闲连接的数量。//(3)指定最小活跃的连接数: 在数据库连接池中保存的最少的空闲连接的数量。//(2)指定最大的连接数: 同一时刻可以同时向数据库申请的连接数。//(2)指定最大的连接数: 同一时刻可以同时向数据库申请的连接数。//(1)指定数据库连接池中初始化连接数的个数。
2024-05-14 17:25:12
684
原创 2024年最新Elasticsearch 分组分页排序查询_elasticsearch分组查询(2)，腾讯、字节跳动面经已发
【代码】2024年最新Elasticsearch 分组分页排序查询_elasticsearch分组查询(2)，腾讯、字节跳动面经已发。
2024-05-14 08:48:25
320
原创 2024年最新eclipse配置mapreduce全教程(2)，最新2024年大数据开发大厂面试经验
将下载好的plugin包，放在你的eclipse的plugin目录下（我放在plugin没有效果，放着dropins，就可以了）**
2024-05-14 08:47:49
411
原创 2024年最新EasyPlane小游戏，C语言初学者练习项目(5)，2024年最新大数据开发中级工程师面试题
/如果按下E或e，结束本次游戏。if (isfire && plane_x == target_x)//如果击中目标，生成下一个目标。//用来接受1或0，以判断是否开始游戏。printf(“输入错误，请重新输入\n”);void test()//判断是否开始游戏。switch (key)//判断按键信息。void game()//游戏主程序。void menu()//打印菜单栏。
2024-05-14 08:47:13
352
原创 2024年最新DolphinScheduler-3，2024年最新大数据开发开发热门前沿知识
服务端：192.168.0.31 客户端：192.168.0.32、192.168.0.33，服务端在31执行，客户端在32、33执行。，本文安装 ZK 版本为 3.8.3。参考教程中是 3.4.14，安装步骤都是一样样儿的，对应着来就可以了。，将该驱动移动至 DolphinScheduler 的每个模块下的 libs 目录下。 此处使用 MySQL 8.2.0版本，对应使用 JDBC 驱动为。用户，推荐单独创建一个用户。
2024-05-14 08:46:37
400
原创 2024年大数据最新【云原生】开源数据分析 SPL 轻松应对 T+0_开源spl，大数据开发码农是如何进入腾讯的
而且，我们知道，用于交易的生产库大多使用能够保证事务一致性的RDB，而分离出来的冷数据（量大且不再修改）则会更多使用专门的分析型数据库或数据平台存储，即使是关系数据库也很可能与原来的生产库类型不同，这就不仅涉及跨库，还需要跨异构库（源）查询。遗憾的是，当前实现跨库查询的技术都存在这样那样的问题。这种方式虽然灵活，但使用难度却很大，尤其对于当前大部分应用的开发语言Java来说，缺少足够的结构化数据计算类库使得完成跨库查询后的计算很难完成，通常只能做简单的列表式查询，而涉及到统计汇总类的运算就会异常麻烦。
2024-05-14 00:08:42
1502
原创 2024年大数据最新【Spark Graphx 系列】图分区策略原理场景示例详解(1)，大数据开发面试回忆录
总的来说，PartitionStrategy在Spark GraphX中起到了优化图分区和并行计算的作用，通过合理选择和使用PartitionStrategy，可以提高图算法的性能和扩展性。在实际应用中，可以根据图的大小、稀疏程度、计算负载以及希望达到的顶点复制限制等因素综合考虑，选择最适合的策略。在使用时，可以根据具体的需求和场景，通过调整参数和测试不同的策略，来评估和选择最优的分区策略，以获得最佳的图计算性能。根据用户指定的分区策略，将图的顶点和边分布到不同的分区中。
2024-05-13 23:59:34
600
原创 2024年大数据最新【R语言文本挖掘】：文本挖掘（以特朗普推文数据为例(2)，2024年最新一线互联网架构师360°全方面性能调优
tidytext包帮助我们将自由格式的文本转换为整洁的表格。拥有这种格式的数据极大地促进了数据可视化和统计技术的使用。使用安装我们首先使用函数将文本划分为单个单词，并删除一些常见的“停用词”。这个函数将获取一个字符串向量并提取标记，以便每个标记在新表中都有一行。现在我们看一下推文的第一条数据默认的unnest_tokens会接下来我们要做的另一个小调整是，得到提取的接下来我们来看一下哪些单词出现的次数最多不难理解这些词出现的次数最多。但是这些词没有提供信息。stop_words。
2024-05-13 23:58:57
889
原创 2024年大数据最新【Rust指南】use关键字妙用 模块内容拆分_rust use，2024年最新自学大数据开发
因此没有加pub关键字的第二个函数无法被调用，这就是遵循私有权限的体现。用法类似，想必此时的你定是头一歪，脑子里蹦出两个字——阶课程，涵盖了95%以上大数据知识点，真正体系化！没错，看完本篇文章心里会更加敞亮，变得自信满满。，但是我们知道公共模块里的内容也需要有。或者是java、python中的。模块中嵌套了一个公共模块。
2024-05-13 23:58:20
697
原创 给大家整理了几个好用的远程软件真实测评，大学生和打工人必备~用好远程，效率翻倍【建议收藏】_远程软件哪个好用(1)
向日葵也同样，针对不同的账户提供了不同等级的连接质量选择，如果是免费账户，就只能享受位于苏州的电信机房，所以在操作的时候网络延迟明显，而且很容易出现连接失败的情况，需要尝试多次。在同一个网络环境下，todesk算是这4款软件中连接速度最快的，并且在测试文档操作或者是网页浏览、观看视频、玩游戏等场景时，网络整体呈现都很稳定，没有出现过中途掉线的情况。如果是付费的账户，则可以使用 BGP 云服务器机房，对于网络的优化会有比较明显的改善，对于高难度的远程操作也能很好的支持，但必须购买高价版本，入门版本依旧限速。
2024-05-12 21:03:20
680
原创 终于有人把云计算、大数据和 AI 讲明白了【深度好文】_ai替代云计算
因此亚马逊是需要一个云平台的。通俗一点说，就是有一个调度中心，几千台机器都在一个池子里面，无论用户需要多少CPU、内存、硬盘的虚拟电脑，调度中心会自动在大池子里面找一个能够满足用户需求的地方，把虚拟电脑启动起来做好配置，用户就直接能用了。现在好了，有了这样一个开源的云平台OpenStack，所有的IT厂商都加入到这个社区中来，对这个云平台进行贡献，包装成自己的产品，连同自己的硬件设备一起卖。信息是很多的，但有人看到了信息相当于白看，但有人就从信息中看到了电商的未来，有人看到了直播的未来，所以人家就牛了。
2024-05-12 21:02:44
704
原创 索引的数据结构（2）_各个存放 用户记录的页 也是根据页中用户记录的主键大小顺序排成一个 双向链表
【代码】索引的数据结构（2）_各个存放 用户记录的页 也是根据页中用户记录的主键大小顺序排成一个 双向链表。
2024-05-12 21:02:08
911
原创 索引的数据结构（2）_各个存放 用户记录的页 也是根据页中用户记录的主键大小顺序排成一个 双向链表(1)
【代码】索引的数据结构（2）_各个存放 用户记录的页 也是根据页中用户记录的主键大小顺序排成一个 双向链表(1)
2024-05-12 21:01:32
732
原创 实战模拟│企业微信机器人实时报错预警_企业微信机器人webhook服务器拒绝请求
【代码】实战模拟│企业微信机器人实时报错预警_企业微信机器人webhook服务器拒绝请求。
2024-05-12 03:53:29
285
原创 学会Python等于拥有整个世界 来看下智能视觉视频识别吧_python智慧视觉
左边程序生成的彩色位图，跟右边的猫咪也没有挺像的。但是就是这个意思吧！所以，雷学委推荐读者下载一些分辨比较清晰的，这样生成的位图轮廓会更清晰呢。
2024-05-12 03:52:53
947
原创 学会Python等于拥有整个世界 来看下智能视觉视频识别吧_python智慧视觉(3)
这里是衔接ffmpeg的方法读取视频流：https://github.com/HypoX64/ShellPlayer/blob/master/util/ffmpeg.py。整个项目就是调用ffmpeg（可以命令行调用的流媒体处理工具）加载图片/视频，再用opencv来识别图像，生成彩色位图的。发现这个挺简单的，基于opencv这个开源视觉库，嗯，这个项目只是一个壳（当然也有一些贡献的，还不赖吧！雷学委认为：太简单的东西，一点也不好玩，所以这个东西才有玩的价值，您觉得呢？想要玩一些炫酷的东西，需要耐心的。
2024-05-12 03:52:16
612
原创 大数据最全【大数据实时数据同步】超级详细的生产环境OGG(GoldenGate)12，2024大数据开发开发社招面试总结
调用出来的结果如下：剩下的安装步骤就一样了和前面。发现相关的文件夹都存在了。不需要再手动create subdirs接下来进入到OGG12，不过进入之前应该先用ldd命令检查一下ggsci需要的库文件都存在不？发现都存在，如果之前环境变量export LD_LIBRARY_PATH=$ORACLE_HOME/lib不设置。检查的结果会有一部分为notfound,而且执行./ggsci命令会报缺少库文件的错。
2024-05-11 19:14:57
422
原创 大数据最全【大数据实时数据同步】超级详细的生产环境OGG(GoldenGate)12(1)，2024年最新面经解析
博主所在单位目前使用Oracle GoldenGate将各个业务生产库汇聚到一起做数仓实时ODS平台，源端库可能涉及Oracle、Mysql、达梦、Guassdb库。之前写过一系列关于GoldenGate异构同步Mysql、Kafka、Kylin、Flink做实时计算的场景文章。但是突然发现，卧槽最最最应该第一个做的Oracle->Oracle的实时异构同步文档竟然没写！来弥补一下这个空白！！！好了，扯远了，回归技术！
2024-05-11 19:14:21
934
原创 大数据最全【大数据】Kafka高频面试题（三）_kafka高平面试题(1)，2024年最新美团大数据开发开发工程师岗位职能要求
Kafka集群可以透明的扩展，增加新的服务器进集群： Kafka每个Partition数据会复制到几台服务器，当某个Broker失效时，Zookeeper将通知生产者和消费者从而使用其他的Broker。
2024-05-11 19:13:45
728
原创 大数据最全【剑指 Offer 03(2)，2024年最新大专生面试阿里P7居然过了
【代码】大数据最全【剑指 Offer 03(2)，2024年最新大专生面试阿里P7居然过了。
2024-05-11 19:13:09
128
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人