程序员
文章平均质量分 86
普通网友
这个作者很懒,什么都没留下…
展开
-
【面经】- 上汽新能源车企JAVA&;大数据架构师实战面经分享_车企大数据开发
这块的话,只要你面试过几次,项目烂熟于心后,这时候介绍的节奏完全可以自己把握,比如哪个地方停顿,留给面试官思考,哪些地方抑扬顿挫,哪些地方留下悬念与包袱,但注意技术吹比的程度请依据面试官的反馈进行动态调整,别给自己挖坑,也别浮夸过度。以上的技巧只是让你将这块面试题分数提升,核心还是在于你的项目是否有技术难题,是否企业带来真正的价值(通过技术赋能企业,带来市值的提升)等等。。。数据治理每家具体的实施其实都不一样,没有统一的标准,但总体的打法以及设计都是一样的。首先你需要了解车企数据业务主要是啥?原创 2024-05-15 04:42:13 · 965 阅读 · 0 评论 -
【面经】- 上汽新能源车企JAVA&;大数据架构师实战面经分享_车企大数据开发(1)
这块的话,只要你面试过几次,项目烂熟于心后,这时候介绍的节奏完全可以自己把握,比如哪个地方停顿,留给面试官思考,哪些地方抑扬顿挫,哪些地方留下悬念与包袱,但注意技术吹比的程度请依据面试官的反馈进行动态调整,别给自己挖坑,也别浮夸过度。以上的技巧只是让你将这块面试题分数提升,核心还是在于你的项目是否有技术难题,是否企业带来真正的价值(通过技术赋能企业,带来市值的提升)等等。。。数据治理每家具体的实施其实都不一样,没有统一的标准,但总体的打法以及设计都是一样的。首先你需要了解车企数据业务主要是啥?原创 2024-05-15 04:41:37 · 966 阅读 · 0 评论 -
【零钱问题】C语言贪心算法分析(文末彩蛋)_c语言贪心算法付款问题
小远手里只有10元,5元,2元的硬币,聪明的小朋友,你能告诉小远他该如何去付钱吗?小远手里有足够的钱,最大金额是10元。我们就应该先去考虑最大金额的10元,然后顺次去考虑5元,最后就是去考虑最小金额2元,顺次遍历枚举去递增。第一层是我们最小面值的计数,然后第二层就是我们中等面值的计数,然后最内层是我们最大面值的计数。最外层的i,m,n分别对应,c,b,a的个数。当我们的金额money与sum相等的时候就退出循环,并打印输出i,m,n的数值。然后明确我们需要三个变量,来作为我们的计数器,用于各个面值的遍历。原创 2024-05-15 04:41:01 · 567 阅读 · 0 评论 -
【零钱问题】C语言贪心算法分析(文末彩蛋)_c语言贪心算法付款问题(1)
第一层是我们最小面值的计数,然后第二层就是我们中等面值的计数,然后最内层是我们最大面值的计数。最外层的i,m,n分别对应,c,b,a的个数。当我们的金额money与sum相等的时候就退出循环,并打印输出i,m,n的数值。这是一个很简单的例子,仅仅是涉及到了贪心算法的入门,在后期我将会对文章进行优化,深度挖掘贪心算法的使用场景和我们的案例分析。接下来就是我们对sum进行求解了,我们将计数器的个数乘以面值再相加就是我们的面值了。然后明确我们需要三个变量,来作为我们的计数器,用于各个面值的遍历。原创 2024-05-15 04:40:25 · 681 阅读 · 0 评论 -
SeaTunnel 海量数据同步工具的使用(连载中……)_seatunnel 数据监控转发
命令: tar -zxvf apache-seatunnel-2.3.2-bin.tar.gz。原创 2024-05-14 20:00:29 · 843 阅读 · 0 评论 -
SeaTunnel 海量数据同步工具的使用(连载中……)_seatunnel 数据监控转发(1)
命令: ./bin/seatunnel.sh --config /home/seaTunnel/apache-seatunnel-2.3.2/config/zy_test.config -e local。🚨🚨🚨🚨🚨🚨🚨🚨**目前执行时报错,卡在这里,待解决……2、再次执行下载插件命令 ./bin/install-plugin.sh。4、将 jar 包放到 ${SEATUNNEL_HOME}/lib 下。原创 2024-05-14 19:59:53 · 1035 阅读 · 0 评论 -
SD-WAN不断冲击传统WAN架构_sd-wan变得更加复杂,更加多样化,单一技术已无法满足
SD-WAN从诞生于2015年,到现在市场上已经拥有大批量的SD-WAN服务商,例如:光联网络,中企通信和夽谷科技的SD-WAN《夽易联》等,这些都是SD-WAN服务中的佼佼者,有多年的服务经验和技术沉淀,并且不仅仅停留在了最初的组网,嵌入了安全机制,完善了企业的各种需求。原创 2024-05-14 19:59:16 · 757 阅读 · 0 评论 -
RabbitMQ【部署 01】一篇学会RabbitMQ服务依赖的下载安装及简单使用(首次登录 User can only log in via localhost 问题处理)
来自官网的部分介绍:简单翻译一下:RabbitMQ是部署最广泛的开源消息代理。是轻量级的,易于在本地和云中部署。它支持多种消息传递协议。可以部署在分布式和联邦配置中,以满足大规模、高可用性的需求。运行在许多操作系统和云环境上,并为大多数流行语言提供了广泛的开发工具。原创 2024-05-14 19:20:07 · 513 阅读 · 0 评论 -
Qt for WebAssembly 环境搭建 - Windows新手入门_qtforwebassembly
会成生id_rsa和id_rsa.pub两个文件,用笔记本打开id_rsa.pub,复制全部内容。这里是产生rsa的目录,笔者这里是D:/WASM/rsa。笔者用的是Qt6.6,所以安装3.1.37。粘贴到下面这个Key里面。原创 2024-05-14 19:19:31 · 825 阅读 · 0 评论 -
PyTorch深度学习实战 基于多层感知机模型和随机森林模型的某地房价预测_使用感知器实现房价预测
在预处理过数据集后,构建MLP模型,并设置模型的超参数,并在训练集上训练模型。代码清单2 训练多层感知机模型。原创 2024-05-14 19:18:55 · 713 阅读 · 0 评论 -
PyTorch深度学习实战 基于多层感知机模型和随机森林模型的某地房价预测_使用感知器实现房价预测(4)
首先是载入需要的各种包以及数据集,与前面使用树模型等不同的地方在于,使用多层感知机模型需要对数据集的X和y都根据最大最小值进行归一化处理。下图所示程序使用了线性归一化的方法,即这种归一化方法比较适用在数值比较集中的情况。这种方法有个缺陷,如max和min不稳定,很容易使得归一化结果不稳定,使得后续使用效果也不稳定,实际使用中可以用经验常量值来替代max和min。sklearn库中提供了归一化的接口,如代码清单1所示为加载数据集并进行归一化处理的代码实现。代码清单1 加载数据集并进行预处理操作。原创 2024-05-14 19:18:19 · 823 阅读 · 0 评论 -
2024年最新【Three,手持4个大厂offer的我
【使用 Three.js 实现的效果】原创 2024-05-14 10:42:10 · 282 阅读 · 0 评论 -
2024年最新【SQL屠夫系列】leetcode-180(2),高并发系统基础篇
编写一个 SQL 查询,查找所有至少连续出现。返回的结果表中的数据可以按 任意顺序 排列。原创 2024-05-14 10:41:35 · 301 阅读 · 0 评论 -
2024年最新【Spark】Spark SQL 数据类型转换_spark 字段类型(1),学习大数据开发开发只要这些东西
说明默认都是StringType类型。原创 2024-05-14 10:40:59 · 314 阅读 · 0 评论 -
2024年最新【Spark ML】(二)Spark ML 分类算法_spark分类算法(1),2024年最新大数据开发编程基础教程
既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新需要这份系统化资料的朋友,可以戳这里获取|0.0| 0.14035087719298245||0.0| 0.15789473684210525||0.0| 0.17543859649122806||0.0| 0.19298245614035087||原创 2024-05-14 10:40:23 · 357 阅读 · 0 评论 -
2024年大数据最新洽谈 “会话技术” 纯干货赶紧收藏吧_回话的技术(2),BAT这种大厂履历意味着什么
cookie是小饼干的意思,在这里是用户在浏览器访问网址的时候,服务器给访问的客户端下达命令,在客户的计算机的硬盘里存储了cookie文件。我们新建01.php文件,自己设置cookie,格式setcookie(‘name’,’值’);我们打开谷歌浏览器,点击设置—高级—网站设置点开cookie,可以看到自己刚设置的,如果你访问了其他网站,也会很多cookie文件。原创 2024-05-14 02:02:42 · 791 阅读 · 0 评论 -
2024年大数据最新每天学习几道面试题|Kafka(二)架构设计类,阿里中间件
Kafka 的消息传递模型是基于发布/订阅(publish/subscribe)模式的,生产者将消息发布到主题,消费者从主题订阅并消费消息。与传统消息队列不同的是,Kafka 的消息传递是持久化的,消息存储在磁盘上,并且支持多个消费者组对同一主题的并行消费。如果消费者的消费速率低于生产者的生产速率,则 Kafka 会保留未被消费的消息,并在消费者准备好时重新发送这些消息。在 Kafka 集群中,Controller 是一个特殊的 broker,负责管理集群中的分区和副本的分配、故障检测和恢复等工作。原创 2024-05-14 02:02:06 · 665 阅读 · 0 评论 -
2024年大数据最新架构师的核心能力_架构师 核心业绩(1),2024年最新大数据开发面试
一般来说,传统企业在开始考虑做服务治理时,已经积累了大量接口。接口改造和测试的耗费巨大而且周期长,其中部分系统可能是外包出去的,难以控制。综合企业环境和团队人员等因素,服务治理分阶段执行是比较合适的。下面以传统企业几年前的服务治理为例,分析企业机构服务治理的过程。原创 2024-05-14 02:01:30 · 320 阅读 · 0 评论 -
2024年大数据最新极速体验DolphinScheduler 3,BAT大厂最爱问的大数据开发核心面试百题详细解析
Standalone 仅建议 20 个以下工作流使用,因为其采用内存式的 H2 Database, Zookeeper Testing Server,任务过多可能导致不稳定,并且如果重启或者停止 standalone-server 会导致内存中数据库里的数据清空。如果你是新手,想要体验 DolphinScheduler 的功能,推荐使用 Standalone 方式体检。如果你想体验更完整的功能,或者更大的任务量,推荐使用。二进制压缩包中有 standalone 启动的脚本,解压后即可快速启动。原创 2024-05-14 02:00:53 · 340 阅读 · 0 评论 -
2024年大数据最全ES实战-熔断器(1),大数据开发Apk安装过程
ES通过断路器的设置,来保护集群内存不超过设定值,从而保证集群的稳定性。原创 2024-05-13 17:16:10 · 333 阅读 · 0 评论 -
2024年大数据最全ELFK 分布式日志收集系统(2),2024年最新闭关60天学懂NDK+大数据
到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。原创 2024-05-13 17:15:34 · 310 阅读 · 0 评论 -
2024年大数据最全Elasticsearch数据库_es数据库(4),计算机专业必看
Elasticsearch和MongoDB/Redis/Memcache一样,是非关系型数据库。是一个接近实时的搜索平台,从索引这个文档到这个文档能够被搜索到只有一个轻微的延迟,企业应用定位:采用Restful API标准的可扩展和高可用的实时数据分析的全文搜索工具。可拓展:支持一主多从且扩容简易,只要cluster.name一致且在同一个网络中就能自动加入当前集群;本身就是开源软件,也支持很多开源的第三方插件。原创 2024-05-13 17:14:58 · 1007 阅读 · 0 评论 -
2024年大数据最全Elasticsearch学习-索引操作及Mapping映射_es建索引建mapping(3),2024年最新真服了
doc_values:为了提升排序和聚合效率,默认true,如果确定不需要对字段进行排序或聚合,也不需要通过脚本访问字段值,则可以禁用doc值以节省磁盘空间(不支持text和annotated_text)6. fielddata:查询时内存数据结构,在首次用当前字段聚合、排序或者在脚本中使用时,需要字段为fielddata数据结构,并且创建倒排索引保存到堆中。设置text类型以后,字段内容会被分析,在生成倒排索引(默认)以前,字符串会被分析器分成一个一个词项,text类型的字段不用于排序,很少用于聚合。原创 2024-05-13 17:14:22 · 803 阅读 · 0 评论 -
2024年5个前端练手项目(html css js canvas),2024年最新疯狂涨知识
搭建html结构,创建canvas标签绑定设置的结构比如+,-,颜色改变动态设置并获取他的值,然后将这些值动态的设置为canvas语法中设置渲染的宽度,以及设置颜色的属性。原创 2024-05-13 11:40:35 · 346 阅读 · 0 评论 -
2024年5-6年面试(上海清美1)(2),金三银四我带你去BAT面试现场
需要注意的是,不同的数据库管理系统(DBMS)可能采用不同的实现方式和技术来支持可重复读隔离级别,因此在具体使用时需要参考相应的DBMS文档和规范。keepAliveTime:当线程池中的线程数量大于核心线程数量时,多余的空闲线程在等待新任务到来时能够存活的最长时间。当工作队列已满,且正在执行的线程数量达到corePoolSize时,线程池会创建新的线程来处理任务,但线程的数量不会超过这个值。在一个事务内,无论其他事务如何修改数据,该事务看到的数据始终是一致的,即多次读取同一数据的结果相同。原创 2024-05-13 11:39:58 · 838 阅读 · 0 评论 -
2024年4本入门Python必读的书籍,你收藏了吗?_python大数据开发书籍,2024年最新2024大数据开发笔试题总结
这本书内容涉及的范围较广,既能为初学者夯实基础,又能帮助程序员提升技能,适合各个层次的Python开发人员阅读参考。是经典的Python入门教程书籍,本书层次鲜明,结构严谨,特别是在最后几章中,作者将前面讲述的内容应用到项目中,并以模板的形式介绍了项目的开发过程,手把手教授Python开发,让读者从项目中领略Python的真正魅力。这本书既适合初学者夯实基础,又能帮助Python程序员提升技能,即使是Python方面的技术专家,也能从书里找到耳目一新的内容。原创 2024-05-13 11:39:22 · 541 阅读 · 0 评论 -
最新Flink 调度源码分析1:拓扑图创建与提交过程(1),2024年最新作为大数据开发程序员应该怎样去规划自己的学习路线
注:并不是每一个 StreamTransformation 都会转换成 runtime 层中物理操作。有一些只是逻辑概念,比如 union、split/select、partition等。原创 2024-05-12 14:19:44 · 601 阅读 · 0 评论 -
最新ES数据库学,一个月成功收割腾讯、百度、美团、网易offer
然无法修改mapping中已有的字段,但是却允许添加新的字段到mapping中,因为不会对倒排索引产生影响。 倒排索引结构,一旦数据结构改变(比如改变了分词器),就需要重新创建倒排索引,这简直是灾难。官方文档对模糊匹配:编辑距离是将一个术语转换为另一个术语所需的一个字符更改的次数。官方文档对模糊匹配:编辑距离是将一个术语转换为另一个术语所需的一个字符更改的次数。查询是直接通过倒排索引指定的 词条,也就是精确查找。按照读个分词term匹配,它们是or的关系。按照读个分词term匹配,它们是or的关系。原创 2024-05-12 14:19:09 · 661 阅读 · 0 评论 -
最新ELK日志分析,最新“美团+字节+腾讯”三面问题
日志分析是运维工程师解决系统故障,发现、定位问题的主要途径。日志主要包括系统日志、应用程序日志和安全日志系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及错误发生的原因。经常分析日志可以了解服务器的负荷,性能安全性,从而及时采取措施纠正错误。elk 日志分析的工具(一般会给研发/开发+测试使用),管理的权限范围,不一定所有人全有。通常,日志被分散的储存在不同的设备上。如果你管理数十上百台服务器,你还在使用依次登录每台机器的传统方法查阅日志,即繁琐又效率低下。原创 2024-05-12 14:18:32 · 408 阅读 · 0 评论 -
最新ElasticSearch相关知识,2024年最新2024必看
版本号(version)只是其中一个实现方式,我们还可以借助外部系统使用版本控制,一个常见的设置是使用其它数据库作为主要的数据存储,使用 Elasticsearch 做数据检索, 这意味着主数据库的所有更改发生时都需要被复制到 Elasticsearch ,如果多个进程负责这一数据同步,你可能遇到类似于之前描述的并发问题。乐观锁的好处是不需要互斥锁的参与。如果你要重新运行此请求时,它将会失败,并返回像我们之前看到的同样的冲突错误,因为指定的外部版本号不大于 Elasticsearch 的当前版本号。原创 2024-05-12 14:17:56 · 317 阅读 · 0 评论 -
数据接口工程对接BI可视化大屏(五)数据接口发布_时序数据库 对接 大屏
/从ES中查询行业信息//从hbase中查询各省份今日的订单数和销售额//从hbase中查询各省份的目标完成进度。原创 2024-05-12 05:46:05 · 869 阅读 · 0 评论 -
数据接口工程对接BI可视化大屏(五)数据接口发布_时序数据库 对接 大屏(2)
使用@RestController注解可以标识当前类为控制器,并且可以将处理方法的返回值作为数据写入响应体返回。 if (“男”.equals(d.getKeyAsString())) { new IndustryInfo(“男”, “%”, maleList),根据可视化图表中接口需要返回的数据格式,编写Service的方法实现。根据可视化图表中接口需要返回的数据格式,编写Service的方法实现。根据可视化图表中接口需要返回的数据格式,编写Service的方法实现。原创 2024-05-12 05:45:29 · 969 阅读 · 0 评论 -
数据接口工程对接BI可视化大屏(五)数据接口发布_时序数据库 对接 大屏(1)
Override } oJO.put(“name”,“新增订单数”); rJO.put(“name”,“退单数”);原创 2024-05-12 05:44:53 · 990 阅读 · 0 评论 -
数据接口工程对接BI可视化大屏(二)创建BI空间_sugar bi 接入 表单
点击页面的注册按钮可以快速地注册SugarBI账号。也可以使用百度账号直接登录。登录完成后可以在左侧的导航栏中导航到SugarBI界面。用户实名认证后可以免费试用,但有一定的功能限制。实名认证后会进入用户的工作空间,默认自带一个初始工作空间,用户可以直接使用。也可以另行创建工作空间。原创 2024-05-12 05:44:17 · 266 阅读 · 0 评论 -
大数据最全机器学习概述,大数据开发初级面试题2024
R2很大,即自变量和因变量之间存在线性关系,如果回归模型是“完美的”,SSE为零,则R2为1。ROC曲线的横轴就是FPRate,纵轴就是TPRate,当二者相等时,表示的意义则是:对于不论真实类别是1还是0的样本,分类器预测为1的概率是相等的,此时AUC为0.5。小孩想要走路,但在这之前,他需要先站起来,站起来之后还要保持平衡,接下来还要先迈出一条腿,是左腿还是右腿,迈出一步后还要迈出下一步。(行走的表面),并且从一个状态转变到另一个状态(即他走的每一步),当他完成任务的子任务(即走了几步)时,孩子得到。原创 2024-05-11 21:07:59 · 941 阅读 · 0 评论 -
大数据最全机器学习概述(1),2024年最新互联网寒冬
R2很大,即自变量和因变量之间存在线性关系,如果回归模型是“完美的”,SSE为零,则R2为1。ROC曲线的横轴就是FPRate,纵轴就是TPRate,当二者相等时,表示的意义则是:对于不论真实类别是1还是0的样本,分类器预测为1的概率是相等的,此时AUC为0.5。小孩想要走路,但在这之前,他需要先站起来,站起来之后还要保持平衡,接下来还要先迈出一条腿,是左腿还是右腿,迈出一步后还要迈出下一步。(行走的表面),并且从一个状态转变到另一个状态(即他走的每一步),当他完成任务的子任务(即走了几步)时,孩子得到。原创 2024-05-11 21:07:22 · 1030 阅读 · 0 评论 -
大数据最全无痕修复:优雅修改本地及远程Commit信息,保持项目历史整洁,2024年最新阿里P7亲自讲解
或请确保在执行强制推送操作前,与你的团队成员沟通,告知他们你将修改最近的提交,以避免产生不必要的冲突或丢失他人的工作。在多人协作的项目中,修改已公开的历史提交通常应尽量避免,除非确实必要且团队成员达成共识。原创 2024-05-11 21:06:46 · 869 阅读 · 0 评论 -
大数据最全新一代数据湖存储技术Apache Paimon入门Demo(1),2024年最新阿里三面
/ 而且不会产生conflict,跑5分钟没有任何异常(公司跑几天无异常)!数据也可以在另一个job流读!// 流读单表OK!原创 2024-05-11 21:06:10 · 652 阅读 · 0 评论 -
使用 OpenAI 的 ChatGPT 提高开发人员的工作效率_openai对开发人员的影响
作为一名开发人员,您一直在寻找提高工作效率并在更短时间内完成更多工作的方法。随着科技行业不断增长的需求,保持领先地位和高效工作比以往任何时候都更加重要。幸运的是,OpenAI 的 ChatGPT 提供了一种解决方案,可以帮助您提高工作效率并简化工作流程。在这篇博文中,我们将探讨 ChatGPT 如何帮助您提高开发人员的工作效率。原创 2024-05-11 12:30:58 · 648 阅读 · 0 评论 -
使用 OpenAI 的 ChatGPT 提高开发人员的工作效率_openai对开发人员的影响(2)
作为一名开发人员,您一直在寻找提高工作效率并在更短时间内完成更多工作的方法。随着科技行业不断增长的需求,保持领先地位和高效工作比以往任何时候都更加重要。幸运的是,OpenAI 的 ChatGPT 提供了一种解决方案,可以帮助您提高工作效率并简化工作流程。在这篇博文中,我们将探讨 ChatGPT 如何帮助您提高开发人员的工作效率。原创 2024-05-11 12:30:22 · 912 阅读 · 0 评论