- 博客(63)
- 收藏
- 关注
RSS订阅原创 最新使用gs_probackup进行openGauss数据库物理备份与恢复(3)，死磕原理
如果命令行、PGDATABASE环境变量或pg_probackup.conf配置文件中没有指定此参数，则gs_probackup会尝试从PGUSER环境变量中获取该值。在备份路径_backup-path_内初始化一个新的备份实例，并生成pg_probackup.conf配置文件，该文件保存了指定数据目录_pgdata-path_的gs_probackup设置。使用PTRACK增量备份，需在postgresql.conf中手动添加参数“enable_cbm_tracking = on”。2.初始化备份路径。
2024-05-16 08:12:16
715
原创 最新从0到1项目搭建-框架搭建(附源码)_从零到一搭建一个项目(1)，2024年最新面试中Handler这些必备知识点你都知道吗
4.0.0/*** 返回状态码*//*** 操作成功*//\*\** 对象创建成功*//\*\** 请求已经被接受*//\*\** 操作已经执行成功，但是没有返回数据*//\*\** 资源已被移除*//\*\** 重定向*//\*\** 资源没有被修改*//\*\** 参数列表错误（缺少，格式不匹配）*//\*\** 未授权*//\*\** 访问受限，授权过期*//\*\** 资源，服务未找到。
2024-05-16 08:11:43
740
原创 最新今日指数项目之FlinkCEP介绍_flink cep的优势(1)，靠着这份面试题跟答案
FlinkCEP是在Flink之上实现的复杂事件处理（CEP）库，它是Flink的一个分支, CEP库（即Complex Event Processing库）。它允许你在无界的事件流中检测事件模式，让你有机会掌握数据中重要的事项。它允许你指定要在流中检测的模式，然后检测匹配事件序列并对其进行操作。复杂事件处理实际上就是基于事件流进行数据处理，把要分析的数据抽象成事件，然后将数据发送到CEP引擎，得到事件处理结果。
2024-05-16 08:11:10
570
原创 最新什么是OneData？阿里数据中台实施方法论解读，2024年最新那些年我们一起踩过算法与数据结构的坑
规范定义主要定义指标体系，包括原子指标、业务限定、统计周期、派生指标。时间周期用来明确数据统计的时间范用或者时间点，如最近 30 天、自然周、截至当日等。业务限定是对业务的一种抽象划分。业务限定从属于某个业务域，如日志域的访问终端类型涵盖无线端、 PC端等修饰词。度量 / 原子指标原子指标和度量含义相同，基于某一业务事件行为下的度量，是业务定义中不可再拆分的指标，具有明确业务的名词，如支付金额。维度维度是度量的环境，用来反映业务的一类属性，这类属性的集合构成一个维度，也可以称为实体对象。
2024-05-16 08:10:36
1408
原创 想做自动驾驶技术的入，这回分享一个简单好用的开放平台_自动驾驶开放平台有哪些(1)
整个引入软件包管理是个非常好的想法，真心的，如果大数据这方面能借鉴就好了，现在整个安装部署时间从原来的按天算，降低到现在30分钟内，而且还更易扩展，你说多带劲，也就是我们想跑让整个环境跑起来再也不用那么费劲的挨个搞环境了，这回使用安装管理的这个方式我们可以根据我们的具体需要求进行选择性的安装，仅仅安装我们需要的内容，30分钟内也就安装完毕了，我们可以进行我们的学习或者是测试工作了，你想想多方便，不然跑环境，你搭建了一天，啥结果看不到，你晚上的日报都不好写。**、感知模型与开发流程升级：**
2024-05-15 23:24:50
1040
原创 惊爆！GitHub上出现一周就被标星120k的核心大数据算法1000页文档，手慢无
虽然这些错误看起来微不足道，但正所谓“差之毫厘，谬以千里”，特别是在某些场景(比如外交场合），即使很小的语言错误也可能带来非常恶劣的影响。互联网初期，因为数据较少，因此需要一个内容聚合的地方，人们才能够快速的找到信息。自然语言处理常见的任务包括词法分析，句法分析，语义计算等，这些任务·要取得理想的结果，输入数据的准确性是基本前提，因此从NLP的整体技术角度来说，文本纠错起着保驾护航的作用。导读:做算法的人常说"数据为王"，而对于做广告的人来说，内容理解则是广告投放的基础。内容理解在新浪微博广告中的应用。
2024-05-15 23:24:17
789
原创 惊爆！GitHub上出现一周就被标星120k的核心大数据算法1000页文档，手慢无(2)
虽然这些错误看起来微不足道，但正所谓“差之毫厘，谬以千里”，特别是在某些场景(比如外交场合），即使很小的语言错误也可能带来非常恶劣的影响。互联网初期，因为数据较少，因此需要一个内容聚合的地方，人们才能够快速的找到信息。有时间一定要刷一下哦！自然语言处理常见的任务包括词法分析，句法分析，语义计算等，这些任务·要取得理想的结果，输入数据的准确性是基本前提，因此从NLP的整体技术角度来说，文本纠错起着保驾护航的作用。-多类型的覆盖多种类型错误，错字，多字，少字，乱序等。
2024-05-15 23:23:43
657
原创 惊爆！GitHub上出现一周就被标星120k的核心大数据算法1000页文档，手慢无(1)
虽然这些错误看起来微不足道，但正所谓“差之毫厘，谬以千里”，特别是在某些场景(比如外交场合），即使很小的语言错误也可能带来非常恶劣的影响。互联网初期，因为数据较少，因此需要一个内容聚合的地方，人们才能够快速的找到信息。此后，文本分类技术发展迅速。自然语言处理常见的任务包括词法分析，句法分析，语义计算等，这些任务·要取得理想的结果，输入数据的准确性是基本前提，因此从NLP的整体技术角度来说，文本纠错起着保驾护航的作用。-多类型的覆盖多种类型错误，错字，多字，少字，乱序等。广告算法在阿里文娱用户增长中的实践。
2024-05-15 23:23:10
865
原创 【牛客刷题】每日一题——初始Java语言练习_牛客网java入门题目(1)
本题num=2，所以匹配到 case2，执行++num，num的值变为3。但此时因为没有break关键字，case被穿透，程序会继续向下执行。进入case3执行++num，num值变为4，case3中也没有break关键字，那么程序继续执行进入default又一次++num，num变为5，这是才遇到break关键字跳出。线、讲解视频，并且后续会持续更新**
2024-05-15 04:10:38
400
原创 【牛客刷题--SQL篇】分组查询SQL18分组计算练习题&；&；SQL19分组过滤练习题&；&；SQL20分组排序练习题_sql分组查询练习题
INSERT INTO user_profile VALUES(3,6543,‘female’,20,‘北京大学’,3.2,12,3,30);INSERT INTO user_profile VALUES(3,6543,‘female’,20,‘北京大学’,3.2,12,3,30);INSERT INTO user_profile VALUES(1,2138,‘male’,21,‘北京大学’,3.4,7,2,12);female|北京大学|1|12.0|3.0。
2024-05-15 04:10:02
750
原创 【牛客刷题--SQL篇】分组查询SQL18分组计算练习题&；&；SQL19分组过滤练习题&；&；SQL20分组排序练习题_sql分组查询练习题(1)
⛔，💯👩👩👦👦。
2024-05-15 04:09:25
681
原创 【牛客刷题--SQL篇】SQL9查找除复旦大学的用户信息&；&；SQL10用where过滤空值练习_现在运营想要查看除复旦大学以外的所有用户明细,请你取出相应数据
INSERT INTO user_profile VALUES(4,2315,‘female’,23,‘浙江大学’,‘ZheJiang’);INSERT INTO user_profile VALUES(3,6543,‘female’,20,‘北京大学’,‘BeiJing’);INSERT INTO user_profile VALUES(3,6543,‘female’,20,‘北京大学’,‘BeiJing’);6543|female|20|北京大学。6543|female|20|北京大学。
2024-05-15 04:08:49
614
原创 Python案例篇：某短视频采集（不用等着大数据给你推送了）_python短视频获客开源源代码
发送请求获取的数据为json数据信息转换成字典数据，从中提取出你想要的数据信息，筛选出我们想要的视频标题，以及视频的播放地址，对视频地址发送请求就行，想实现翻页效果需要注意，我们下一页的页面数据是在他上个数据的接口里，提取数据了时候一起提取出来。开发环境：python3.7， Windows10。
2024-05-14 18:49:18
324
原创 Python案例篇：某短视频采集（不用等着大数据给你推送了）_python短视频获客开源源代码(2)
发送请求获取的数据为json数据信息转换成字典数据，从中提取出你想要的数据信息，筛选出我们想要的视频标题，以及视频的播放地址，对视频地址发送请求就行，想实现翻页效果需要注意，我们下一页的页面数据是在他上个数据的接口里，提取数据了时候一起提取出来。开发环境：python3.7， Windows10。
2024-05-14 18:48:43
383
原创 Python案例篇：某短视频采集（不用等着大数据给你推送了）_python短视频获客开源源代码(1)
发送请求获取的数据为json数据信息转换成字典数据，从中提取出你想要的数据信息，筛选出我们想要的视频标题，以及视频的播放地址，对视频地址发送请求就行，想实现翻页效果需要注意，我们下一页的页面数据是在他上个数据的接口里，提取数据了时候一起提取出来。开发环境：python3.7， Windows10。
2024-05-14 18:48:07
234
原创 python机器学习 一元线性回归 梯度下降法的实现 【Python机器学习系列（四）】_一元线性回归python梯度下降法
使用均方误差 MSE （Mean Square Error）来作为性能度量标准假设共有m个样本数据，则均方误差：MSE1m∑i1mkxib−yi22将该公式定义为代价函数，此外为例后续求导方便，则使结果在原mse的基础上，再乘以1/2。# 为方便求导：乘以1/2。
2024-05-14 18:47:31
589
原创 2024年最新Zookeeper基础入门-1【集群搭建】(1)，2024年最新2024年阿里大数据开发面试题精选
（3）服务器3启动，发起一次选举。此时服务器1和2都会更改选票为服务器3。此次投票结果：服务器1为0票，服务器2为0票，服务器3为3票。此时服务器3的票数已经超过半数，服务器3当选。此时服务器1，2，3已经不是LOOKING状态，不会更改选票信息。交换选票信息结果：服务器3为3票，服务器4为1票。此时服务器4服从多数，更改选票信息为服务器3，并。（1）服务器1启动，发起一次选举。服务器1投自己一票。此时服务器1票数一票，不够半数以上（3票），此时服务器1票数0票，服务器2票数2票，没有半数以上结果，
2024-05-14 10:11:22
283
原创 2024年最新web前端面试高频考点——JavaScript 篇（一），2024年最新997页字节跳动大数据开发面试真题解析火爆全网
示例：函数作为返回值。
2024-05-14 10:10:45
343
原创 2024年最新tried to access method com(1)，2024年最新大数据开发面试项目全代码
做了几个测试，其他版本不变，hadoop.version 为 2.4.0，2.4.1，2.5.2，2.6.1，2.6.4 都会报上面的错误，不知道是不是hadoop的bug，有人说将hadoop的源码重新编译一下就行，但我没试。可以走的很快，但一群人才能走的更远！把hadoop version改成2.2.0就可以了，测了一下2.7.2也可以，所以估计是hadoop的一个坑，2.7.2就修复了。
2024-05-14 10:10:09
298
原创 2024年大数据最新学习CSS3，使用双旋转实现福到了的迎春喜庆特效_css 福(2)，最新大数据开发通用流行框架大全
这就是css3关于transform的简单使用，从而实现一个福到了的效果。网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化资料的朋友，可以戳这里获取一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！一个人可以走的很快，但一群人才能走的更远！
2024-05-14 01:31:55
405
原创 2024年大数据最新嬛嬛喊你学Spark、Scala的安装_scala生态系统(1)，颠覆认知
1、快速一般情况下，对于迭代次数较多的应用程序，Spark程序在内存中的运行速度是Hadoop MapReduce运行速度的100多倍，在磁盘上的运行速度是Hadoop MapReduce运行速度的10多倍。Spark数据存放于中，有更高的迭代运算效率；Mapreduce数据存放于中2、易用可以使用多种编程语言快速编写应用程序，例如Java、Scala、Python、R和SQLSpark提供了80多个高阶函数，可以轻松构建Spark任务3、通用。
2024-05-14 01:31:19
353
原创 2024年大数据最新天气炎热，给大佬们找几棵树乘凉——数据结构树_天气热找棵树(1)，精选大数据开发面试真题集锦
今天天气很热，我找了几棵树给大家乘凉希望大佬们在暑假过的愉快啊。
2024-05-14 01:30:43
355
原创 2024年大数据最新大话备考之数据结构综合题_大话数据结构习题(2)，2024大数据开发常见面试题分享
既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上大数据知识点，真正体系化！由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新需要这份系统化资料的朋友，可以戳这里获取B10C001D110E111F0000G0001平均长度等于，（长度×权值）的和除以权值的和2×9+2×11+3×5+3×7+3×8+4×2+4×3=120120/45=8/3设有一组关键字{32,13
2024-05-14 01:30:06
480
原创 面试题 Hive-SQL查询连续活跃登录用户思路详解_sql查询连续登录两天的用户(4)
1、再用row_number() over(partition by _ order by _)函数将用户id分组，按照登陆时间进行排序。2、计算登录日期减去第二步骤得到的结果值，用户连续登陆情况下，每次相减的结果都相同。3、按照id和日期分组并求和，筛选大于等于2的即为连续活跃登陆的用户。
2024-05-12 22:25:46
361
原创 面试题 Hive-SQL查询连续活跃登录用户思路详解_sql查询连续登录两天的用户(3)
1、再用row_number() over(partition by _ order by _)函数将用户id分组，按照登陆时间进行排序。2、计算登录日期减去第二步骤得到的结果值，用户连续登陆情况下，每次相减的结果都相同。因为每天用户登录次数可能不止一次，所以需要先将用户每天的登录日期去重。3、按照id和日期分组并求和，筛选大于等于2的即为连续活跃登陆的用户。连续活跃登陆的用户指至少连续2天都活跃登录的用户。
2024-05-12 22:25:10
345
原创 面试题 Hive-SQL查询连续活跃登录用户思路详解_sql查询连续登录两天的用户(2)
连续活跃登陆的用户指至少连续2天都活跃登录的用户解决类似场景的问题。
2024-05-12 22:24:35
403
原创 面试题 Hive-SQL查询连续活跃登录用户思路详解_sql查询连续登录两天的用户(1)
1、再用row_number() over(partition by _ order by _)函数将用户id分组，按照登陆时间进行排序。2、计算登录日期减去第二步骤得到的结果值，用户连续登陆情况下，每次相减的结果都相同。因为每天用户登录次数可能不止一次，所以需要先将用户每天的登录日期去重。3、按照id和日期分组并求和，筛选大于等于2的即为连续活跃登陆的用户。
2024-05-12 22:23:57
353
原创 技术选型-Apache DolphinScheduler VS Xxl-Job_任务调度工具 xxl dolphin 2024 选型(2)
都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！
2024-05-12 05:15:23
666
原创 技术选型-Apache DolphinScheduler VS Xxl-Job_任务调度工具 xxl dolphin 2024 选型(1)
都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！
2024-05-12 05:14:47
656
原创 批量插入千万数据到Elasticsearch之bulkProcessor_bulkprocessor使用
System.out.println(“操作” + request.numberOfActions() + “条数据”);
2024-05-12 05:14:11
372
原创 批量插入千万数据到Elasticsearch之bulkProcessor_bulkprocessor使用(3)
System.out.println(“操作” + request.numberOfActions() + “条数据”);视频，并且后续会持续更新**
2024-05-12 05:13:35
379
原创 大数据最全如何保障服务的高可用：提升可观测性_服务保障高可用，大数据开发开发社招面试总结
既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上大数据知识点，真正体系化！由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新需要这份系统化资料的朋友，可以戳这里获取在可观测性的内容中，可以抽象出三大元素：日志（Logs）、跟踪（Traces）、指标（Metrics），这三大元素就是可观测性的三大支柱。日志收集、链路追踪和度量指标都是遥测体系的重要组成部分，它们一起构成了观测系统运
2024-05-11 20:37:08
798
原创 大数据最全如何从零开始学Java_java从零开始(1)，2024年最新面试必会
是的，到这里开始，了解Java学习路线才有意义。2、学习资源：买书，找视频，对新手来说初期的资源很重要，最好有认识的人给你，出现BUG要百度查，学习到了后期遇到问题会比较难搞，不要听别人说什么很简单很容易之类的，他们都学过了当然觉得很容易，我们要站在一个初学者的角度看问题。6、选择你自己觉得合适自己的几本书籍（这里不是要你购买，而是要你选择基本书籍而已）7、观看你选择的几本书籍的大约内容（这里就是对比书籍内容了，其实很多书初学者里面内容有60-70%都相同相识，这里只的大约内容就是不相同的部分）
2024-05-11 20:36:32
829
原创 大数据最全大话数据结构--算法概述，大数据开发工程师面试题目
在进行算法分析时，语句总的执行次数T(n)是关于问题规模n的函数，进而分析T(n)随n的变化情况并确定 T( n )的数量级。算法的时间复杂度，也就是算法的时间量度，记作: T (n)= O(f(n))。在生活中，人们都希望花最少的钱，用最短的时间，办最大的事，算法也是一样的思想，最好用最少的存储空间，花最少的时间，办成同样的事就是好的算法。函数的渐近增长:给定两个函数f(n)和g(n),如果存在一个整数N,使得对于所有的n>N, f(n)总是比g(n)大，那么，我们说f(n)的增长渐近快于g(n)。
2024-05-11 20:35:57
701
原创 大数据最全大话数据结构--树(3)，2024年最新经验总结
其中:ltag为0时指向该结点的左孩子，为1时指向该结点的前驱。rtag为0时指向该结点的右孩子，为1时指向该结点的后继。如下：6.9.2线索二叉树结构实现二叉树的二叉线索存储结构定义/* Link=-0 表示指向左右孩子指针*/ /* Thread==1 表示指向前驱或后继的线索*/typedef struct BiThrNode /二叉线索存储结点结构结点数据左右孩子指针左右标志线索化的实质就是将二叉链表中的空指针改为指向前驱或后继的线索。
2024-05-11 20:35:20
712
原创 【Hive】笔试题 01（自连接与窗口函数分别实现）_1 有一张表,现有这么一批数据,现要求出 每个用户截止到每月为止的最大单月访问次(3)
第一次遇到这样的查询难免有些手忙脚乱，我们可以将这道题拆分为三张表，进行分析 🤳。用户 月份 最大访问次数 总访问次数 当月访问次数。用户 月份 最大访问次数 总访问次数 当月访问次数。经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新**先开始第一张简单的表，一起来看看吧 😁。
2024-05-10 22:03:17
863
原创 【Hive】笔试题 01（自连接与窗口函数分别实现）_1 有一张表,现有这么一批数据,现要求出 每个用户截止到每月为止的最大单月访问次(2)
【代码】【Hive】笔试题 01（自连接与窗口函数分别实现）_1 有一张表,现有这么一批数据,现要求出 每个用户截止到每月为止的最大单月访问次(2)
2024-05-10 22:02:40
109
原创 【Hive】笔试题 01（自连接与窗口函数分别实现）_1 有一张表,现有这么一批数据,现要求出 每个用户截止到每月为止的最大单月访问次(1)
第一次遇到这样的查询难免有些手忙脚乱，我们可以将这道题拆分为三张表，进行分析 🤳。用户 月份 最大访问次数 总访问次数 当月访问次数。用户 月份 最大访问次数 总访问次数 当月访问次数。先开始第一张简单的表，一起来看看吧 😁。
2024-05-10 22:02:04
265
原创 【hive】- 使用insert into insert overwrite插入数据到静态分区、动态分区、动静态分区_hive insert into
既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上大数据知识点，真正体系化！由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新需要这份系统化资料的朋友，可以戳这里获取insert overwrite table test_1partition(city_code=‘200’,cur_day=‘20231111’)selectt.id,t.name,t.classes,
2024-05-10 22:01:28
397
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人