自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(245)
  • 收藏
  • 关注

原创 看了Python在金融行业中的应用,大数据分析实在太重要了_pythpn分析大数据在金融行业的应用

简单介绍一下,金融科技(Fintech)是指通过利用各类科技手段创新传统金融行业所提供的产品和服务,提升效率并有效降低运营成本。根据金融稳定理事会(FSB)的定义,金融科技主要是指由大数据、区块链、云计算、人工智能等新兴前沿技术带动,对金融市场以及金融服务业务供给产生重大影响的新兴业务模式、新技术应用、新产品服务等。随着大数据时代的到来,人工智能等前沿的科技在算法深刻改变了金融业态,并成为未来金融发展的制高点。金融科技正在传统金融行业的各个领域积极布局,已然成为新的风口。

2024-05-16 11:35:36 262

原创 看了Python在金融行业中的应用,大数据分析实在太重要了_pythpn分析大数据在金融行业的应用(1)

(2)为给定的 z(i)和公式 1-1 计算所有到期指数水平 ST(i)。(3)计算到期时期权的所有内在价值 hT(i)=max(ST(i) K,0)。(4)通过公式 1-2 中给出的蒙特卡罗估算函数估计期权现值。公式 1-2 欧式期权的蒙特卡洛估算函数。现在,我们需要将这个问题和算法翻译为Python代码。下面的代码将实现一些必要的步骤。NumPy在这里作为主程序包使用。定义模型并模拟参数值。随机数生成器种子值固定。提取标准正态分布随机数。模拟期末价值。计算期权到期收益。

2024-05-16 11:35:03 422

原创 看2024年卡塔尔世界杯有感_卡塔尔世界杯决赛读后感技术总结跑动(1)

自己第一次踢球是什么时候已经记不清了,大概是小学时候。因为我印象中第一次看世界杯是2010年南非世界杯,因为世界杯主题曲也比较好听,当然,我认为1998年法国世界杯的主题曲最为经典。10年南非世界杯的时候,我正在上小学,更是对足球是一窍不通,当时小区里有好多比我大的小伙伴,当时我就问他们,你们觉得谁最厉害,他们有的说卡卡,还有的说是C罗和梅西,就是从那个时候我才知道他们的名字,我是真没有想到,现在他们还在踢世界杯。

2024-05-16 11:34:30 268

原创 用SQL语句进行数据库查询(简单查询)_利用sql语句完成以下查询(1)显示前10%的女生记录。(2)查询选修了课程的学生学号。

查询学生的,并且以中文提示显示出来.运行结果:是,有时候也可以省略.用于做属性解释.

2024-05-16 11:33:57 342

原创 最全凯哥带你从零学大数据系列之Java篇---第十八章 集合(Set)(2),薪资翻倍

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。需要这份系统化资料的朋友,可以戳这里获取一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!无序, 并不意味着随机!Set接口, 是继承自Collection接口的。 Set接口中的方法, 都是从Collection接口中继承下来的, 并没有添加新的方法。S

2024-05-16 03:47:32 880

原创 最全凯哥带你从零学大数据系列之Java篇---第十八章 集合(Set)(1),2024年最新View的这些基础知识你必须要知道

/ 可以通过Comparator进行TreeSet的实例化。使用指定的规则进行大小比较。// 此时,集合中存储的元素可以不实现Comparable接口。@Description 通过Comparator进行比较。// 1. 实例化一个TreeSet对象。// 1. 实例化一个TreeSet对象。

2024-05-16 03:47:00 598

原创 最全冗余双写方案下数据一致性问题解决及延申问题处理方案(3),2024年最新10天拿到字节跳动大数据开发岗位offer

如果还是用雪花算法,则容易C端和B端不一致,所以才用编号递增+1的方式。* 如果短链码重复,则调用这个方法。* url前缀的编号递增1。* 判断短链域名是否合法。* 查询短链码是否存在。* 判断组名是否合法。

2024-05-16 03:46:27 885

原创 最全关于Hadoop生态圈相关组件的介绍(1),熬了整整30天

HDFS(Hadoop Distributed File System),它是一个文件系统,用于存储文件,通过目录树来定位文件;其次,它是分布式的,由很多服务器联合起来实现其功能,集群中的服务器有各自的角色。适合一次写入,多次读出的场景,不支持文件修改,可以过来做数据分析。

2024-05-16 03:45:54 707

原创 大数据最新【Spark】(三)Spark 架构原理和RDD使用详解_spark rdd 原理图,2024年最新入职阿里啦

(5)一个列表,存储存取每个Partition的优先位置(preferred location)。对于一个HDFS文件来说,这个列表保存的就是每个Partition所在的块的位置。按照“移动数据不如移动计算”的理念,Spark在进行任务调度的时候,会尽可能地将计算任务分配到其所要处理数据块的存储位置。

2024-05-15 18:59:28 226

原创 大数据最新【Spark】Spark SQL 数据类型转换_spark 字段类型(4),贼好用的大数据开发学习路线集合

说明默认都是StringType类型。

2024-05-15 18:58:55 280

原创 大数据最新【Spark MLlib】(一)架构解析(2),2024年最新阿里巴巴二面被血虐

分类算法属于监督式学习,使用类标签已知的样本建立一个分类函数或分类模型,应用分类模型,能把数据库中的类标签未知的数据进行归类。回归算法属于监督式学习,每个个体都有一个与之相关联的实数标签,并且我们希望在给出用于表示这些实体的数值特征后,所预测出的标签值可以尽可能接近实际值。案例:导入训练数据集,将其解析为带标签点的RDD,使用 LinearRegressionWithSGD 算法建立一个简单的线性模型来预测标签的值,最后计算均方差来评估预测值与实际值的吻合度。下图是MLlib算法库的核心内容。

2024-05-15 18:58:22 367

原创 大数据最新【Python数据结构与算法】(五)排序算法,字节跳动大数据开发岗面试题

第0趟: [1, 3, 2, 4, 5, 6]第1趟: [1, 2, 3, 4, 5, 6]第2趟: [1, 2, 3, 4, 5, 6]第3趟: [1, 2, 3, 4, 5, 6]第4趟: [1, 2, 3, 4, 5, 6]第1趟: [1, 2, 3, 4, 5, 6]第2趟: [1, 2, 3, 4, 5, 6]第1趟: [2, 3, 4, 1, 6, 5]第2趟: [2, 3, 4, 1, 6, 5]第3趟: [1, 2, 3, 4, 6, 5]第4趟: [1, 2, 3, 4, 6, 5]

2024-05-15 18:57:48 354

原创 助力工业物联网,工业大数据之DWD层构建:数据抽取分析【十一】_数据分析数据抽取代码注释

实战项目、大纲路线、讲解视频,并且后续会持续更新**

2024-05-15 07:57:05 807

原创 刷题之莲子的软件工程学和机械动力学以及物理热力学_莲子的物理热力学

但是要注意的是,这里的 a,b 采用了某种特殊的进制表示法。换言之,相较于十进制下每一位的「逢 10进 1」,该种进制下第 i 位是「逢 i+1 进 1」。倒数第三位数是四进制的,要满4进1······第一位数是a,b最长数的 长度+1进制。对于全部数据,保证 1≤n,m≤2×10^5,从低位往高位数起有 ai​∈[0,i],bi∈[0,i]。题目意思就是由b来确定a的正负号,并输出其结果,a,b是32 位有符号整型的数,其范围是。在宇宙射线的轰击下,莲子电脑里的一些她自己预定义的函数被损坏了。

2024-05-15 07:56:29 548

原创 刷题之莲子的软件工程学和机械动力学以及物理热力学_莲子的物理热力学(1)

但是要注意的是,这里的 a,b 采用了某种特殊的进制表示法。具体而言,从低位往高位数起,第 ii 位采用的是 i+1进制。换言之,相较于十进制下每一位的「逢 10进 1」,该种进制下第 i 位是「逢 i+1 进 1」。倒数第三位数是四进制的,要满4进1······第一位数是a,b最长数的 长度+1进制。对于全部数据,保证 1≤n,m≤2×10^5,从低位往高位数起有 ai​∈[0,i],bi∈[0,i]。题目意思就是由b来确定a的正负号,并输出其结果,a,b是32 位有符号整型的数,其范围是。

2024-05-15 07:55:53 739

原创 刷题两个月,终于进入了梦寐以求的大厂,数据结构与算法太TM重要了

源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新**####06 RLE压缩算法与PCX图像。####05 三个水桶等分8升水的问题。####08 计算几何与计算机图形学。####10 计算机程序与大整数计算。####04 阿拉伯数字与中文数字。####09 全局最优解与遗传算法。####03 算法设计的常用思想。####07 实验数据与曲线拟合。####02 算法设计的基础。####11 RAS算法。

2024-05-15 07:55:17 305

原创 【JavaScript-循环-js你学懂了吗?】_编写程序,用while统计并输出1~20所有能被3整除的数字之和

switch语句也是多分支语句,它用于基于不同的条件来执行不同的代码。当要针对变量设置-系列的特定值 的选项时,就可以使用switch。case 语句通常处理case为比较确定值的情况,而i…③switch语句进行条件判断后直接执行到程序的条件语句,效率更高。else语句的执行效率比switch语句高。⑤当分支比较多时, switch语句的执行效率比较高,而且结构更清晰。由循环体 及循环的终止条件组成的语句,被称之为。在程序中, 一组被重复执行的语句被称之为。,能否继续重复执行,取决于循环的。

2024-05-14 23:15:28 710

原创 【JavaScript-循环-js你学懂了吗?】_编写程序,用while统计并输出1~20所有能被3整除的数字之和(3)

switch语句也是多分支语句,它用于基于不同的条件来执行不同的代码。当要针对变量设置-系列的特定值 的选项时,就可以使用switch。case 语句通常处理case为比较确定值的情况,而i…③switch语句进行条件判断后直接执行到程序的条件语句,效率更高。else语句的执行效率比switch语句高。⑤当分支比较多时, switch语句的执行效率比较高,而且结构更清晰。由循环体 及循环的终止条件组成的语句,被称之为。在程序中, 一组被重复执行的语句被称之为。,能否继续重复执行,取决于循环的。

2024-05-14 23:14:52 623

原创 【JavaScript-循环-js你学懂了吗?】_编写程序,用while统计并输出1~20所有能被3整除的数字之和(2)

switch语句也是多分支语句,它用于基于不同的条件来执行不同的代码。当要针对变量设置-系列的特定值 的选项时,就可以使用switch。case 语句通常处理case为比较确定值的情况,而i…③switch语句进行条件判断后直接执行到程序的条件语句,效率更高。else语句的执行效率比switch语句高。⑤当分支比较多时, switch语句的执行效率比较高,而且结构更清晰。由循环体 及循环的终止条件组成的语句,被称之为。在程序中, 一组被重复执行的语句被称之为。,能否继续重复执行,取决于循环的。

2024-05-14 23:14:17 478

原创 【JavaScript-循环-js你学懂了吗?】_编写程序,用while统计并输出1~20所有能被3整除的数字之和(1)

switch语句也是多分支语句,它用于基于不同的条件来执行不同的代码。当要针对变量设置-系列的特定值 的选项时,就可以使用switch。case 语句通常处理case为比较确定值的情况,而i…③switch语句进行条件判断后直接执行到程序的条件语句,效率更高。else语句的执行效率比switch语句高。⑤当分支比较多时, switch语句的执行效率比较高,而且结构更清晰。由循环体 及循环的终止条件组成的语句,被称之为。在程序中, 一组被重复执行的语句被称之为。,能否继续重复执行,取决于循环的。

2024-05-14 23:13:40 812

原创 2个月面试腾讯、B站、网易等11家公司的面经总结!最强技术实现_b站数据仓库 面经(2)

上回承诺过大家,一定会出 HTTP 的系列文章,今天终于整理完成了。作为一个 web 开发,HTTP 几乎是天天要打交道的东西,但我发现大部分人对 HTTP 只是浅尝辄止,对更多的细节及原理就了解不深了,在面试的时候感觉非常吃力。这篇文章就是为了帮助大家树立完整的 HTTP 知识体系,并达到一定的深度,从容地应对各种灵魂之问,也同时提升自己作为一个 web 开发的专业素养吧。既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!

2024-05-14 13:56:00 878

原创 2个月面试腾讯、B站、网易等11家公司的面经总结!最强技术实现_b站数据仓库 面经(1)

今天关于面试的分享就到这里,还是那句话,有些东西你不仅要懂,而且要能够很好地表达出来,能够让面试官认可你的理解,例如Handler机制,这个是面试必问之题。有些晦涩的点,或许它只活在面试当中,实际工作当中你压根不会用到它,但是你要知道它是什么东西。最后在这里小编分享一份自己收录整理上述技术体系图相关的几十套腾讯、头条、阿里、美团等公司2021年的面试题,把技术点整理成了视频和PDF(实际上比预期多花了不少精力),包含知识脉络 + 诸多细节,由于篇幅有限,这里以图片的形式给大家展示一部分。还有。

2024-05-14 13:55:24 831

原创 2hutool实战:IoUtil 流操作工具类(获取getReader and getWriter)_hutool ioutil

方法描述获得一个文件读取器,默认使用UTF-8编码获得一个文件读取器从{@link BOMInputStream}中获取Reader获得一个Reader获得{@link BufferedReader}如果是{@link BufferedReader}强转返回,否则新建。如果提供的Reader为null返回null获得{@link PushbackReader}如果是{@link PushbackReader}强转返回,否则新建获得一个Writer,默认编码UTF-8获得一个Writer。

2024-05-14 13:54:48 825

原创 2hutool实战:IoUtil 流操作工具类(获取getReader and getWriter)_hutool ioutil(1)

获得一个文件读取器。

2024-05-14 13:54:12 964

原创 2024年最全[机器学习]机器学习数学基础(三)_机器学习与数学基础知识(三)(1),2024年最新阿里P7大数据开发社招面试的经历

机器学习数学基础涉及矩阵,微积分和概率既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新需要这份系统化资料的朋友,可以戳这里获取需要这份系统化资料的朋友,可以戳这里获取。

2024-05-14 05:17:54 148

原创 2024年最全[大数据测试]ETL测试或数据仓库测试入门_etl上线压力测试,2024年最新大数据开发开发框架

ETL是Extract-Transform-Load的缩写(提取-转换-载入),是一个完整的从源系统提取数据,进行转换处理,载入至数据仓库的过程。我们从联机事务数据库中提取数据,进行转换处理,匹配数据仓库模式,然后载入至数据仓库数据库中。在通常情况下,大多数的数据仓库要整合非联机事务数据库系统的数据,例如来源文本文件、日志、电子表格等等。下面我们一起看看ETL是怎么工作的。例如一个公司,有关于其不同部门的数据记录,销售、市场、物流等等。

2024-05-14 05:17:18 873

原创 2024年最全[大数据之集群部署】01 集群环境安装-初始环境准备,理解透彻

/安装vim编辑器、网络时间同步工具、工具包、下载工具、服务器与本地电脑传输工具、制作脚本工具、rsync工具包、locate命令包 “红帽系”操作系统的额外安装包。// 删除文件中内容,在文件中增加主机别名,比如在01节点为hadoop01,02节点为hadoop02,03节点为hadoop03。5. 创建bigdata用户,并修改bigdata用户的密码(此操作是为了降低用户权限,集群操作安全,可选步骤)修改/etc/sudoers文件,在%wheel这行下面添加一行,如下所示。

2024-05-14 05:16:42 510

原创 2024年最全[Hadoop3(2),2024年最新714页PDF的鸿蒙学习笔记

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新需要这份系统化资料的朋友,可以戳这里获取为了避免不同的人在hadoop集群搭建上分配任务的差异,我在这里先列出我的分配表网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。需要这份系统化资料的朋友

2024-05-14 05:16:06 613

原创 2024年大数据最全学习jQuery初级中级高级用法 一篇就够了_jquery-3,大数据开发面试知识点总结宝典助你通关

jQuery中通过选择器来获取DOM节点,功能类似于原生的querySelectorAll方法,其所支持的选择器于CSS的选择器几乎一致。**·**jQuery是JavaScript类库(js文件),他封装了很多简单的方法(浏览器兼容),绝大多数用来简化DOM操作。jQuery中利用选择器获取到的并非是原生的DOM对象,而是jQuery对象。jQuery中封装了过滤方法,它可以对jQuery对象中的DOM元素再次筛选。jQuery中封装了查找元素的方法,可以基于元素的结构关系查找新的元素。

2024-05-13 20:29:33 912

原创 2024年大数据最全学Python 函数从青铜到王者_python学到函数是什么进度(1),【设计思想解读开源框架】

def max(a, b): #定义函数名 maxif a >= b:return a # 返回aelse:return b # 返回breturn 结束函数,选择性地返回一个值给调用方。不带表达式的return相当于返回 None。调用时,直接使用函数名称即可”) # 调用函数,结果输出:I love Python!# print(i_count) # 找不到inner()outer()

2024-05-13 20:28:56 637

原创 2024年大数据最全如何从零开始学Java_java从零开始(1),2024年最新【面试必会

以上,都没有问题了,那就正式开始学习Java,零基础,那就来一次从零开始的挑战。或许是同学朋友的介绍,或许是看多了广告,或许仅仅是缘分,你选择了Java。如果能自学成功,那你真的很厉害,这么长时间的坚持,首先对基础的掌握比培训出来的人要好一些,自学需要一个一个知识点去查的话;2、学习资源:买书,找视频,对新手来说初期的资源很重要,最好有认识的人给你,出现BUG要百度查,学习到了后期遇到问题会比较难搞,不要听别人说什么很简单很容易之类的,他们都学过了当然觉得很容易,我们要站在一个初学者的角度看问题。

2024-05-13 20:28:20 260

原创 2024年大数据最全大话数据结构--图(1),2024年最新真正带你搞懂RecyclerView的缓存机制

tex=V_1)] 的权值最小,将顶点 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-iQSwkPMO-1637250894603)(https://www.zhihu.com/equation?所以,整体的执行次数就是 (n-1) * 2(n-1),Prim算法的复杂度是 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-8fWO7UYu-1637250894629)(https://www.zhihu.com/equation?

2024-05-13 20:27:43 925

原创 2024年大数据入门-三分钟读懂Hadoop(3),2024年最新一个本科渣渣是怎么逆袭从咸鱼到Offer收割机的

保证你的数据是错误的,现实生活中错误是没有办法避免的,我们唯有每天自省,每天反思,才能避免少犯错误或者不犯错误。第三,Hadoop的机器是可以动态的移动数据,这就是啥呢,这就是互帮互助,在现实生活中,你负担大了,我可以帮助你,你可以帮助我。这种帮助机制是有自己的调度资源的。**高扩展性:**Hadoop是在可用的计算机集簇间分配数据并完成计算任务的,这些集簇可以方便地扩展到数以千计的节点中。第二,Hadoop是可以扩展的,就是说我们一台机器不够用了,可以再加一台,流程不是很复杂,简单的写几条命令就可以了。

2024-05-13 14:55:39 421

原创 2024年大数据任务调度器 —— Azkaban 3(1),太牛了

Executor Server 负责处理工作流和作业任务的实际执行。

2024-05-13 14:55:02 535

原创 2024年大数据主要应用领域(1),15个经典面试问题

二、大数据的主要应用==========(一)农业大数据(1)( 2)典型的一些应用①、:对自然灾害监测、作物估产及生长动态监测②、:大数据的技术给农产品信息的全面收集提供了技术基础,使农产品质量能够进行 全方位比对,增加农产品质量监测的准确性。③、:精准农业决策是指根据各个方面的农业信息制定出一整套有可实施性的精准管理措 施。④、:搭建农村综合信息服务系统 是为了帮助农业信息的快速和有效的传播, 使用全国范围实现信息资源的共享。(二)工业互联网。

2024-05-13 14:54:26 256

原创 2024年大数据StarRocks(一) StarRocks概述(3),阿里P7大牛整理

StarRocks集群由FE和BE构成, 可以使用MySQL客户端访问StarRocks集群。

2024-05-13 14:53:50 761

原创 最新大数据面试一锅炖,阿里P7深入Binder原理讲解

相同分区数据进入一个reduce,归并排序。最后输出。

2024-05-12 17:32:51 764

原创 最新大数据集群搭建之Linux安装Hive2(3),面经解析

一、安装准备二、解压Hive三、环境变量配置。

2024-05-12 17:32:15 559

原创 最新大数据进阶之路——Spark SQL小结_spark sql进阶,2024年最新大数据开发高级工程师面试题

RDD(Resilient Distributed Datasets),弹性分布式数据集。伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!DAG(Directed Acyclic Graph),有向无环图。

2024-05-12 17:31:39 290

原创 最新大数据融合与数据仓库 -- 一些思考,给大数据开发程序员的一些面试建议

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新需要这份系统化资料的朋友,可以戳这里获取15. 在人工智能数据处理中,哪种数据挖掘技术更有用?(Which technology in Data Mining could be more useful on AI Data processing?)16. 为

2024-05-12 17:31:02 560

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除