- 博客(7)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 技术模块的模板和写法
写文章可以帮助我们思考技术和项目的过程，从整体上总结自己的存在的优点和缺点，避免重复错误。但是博客切忌写成流水账，没有文章的结构和重点，看起来十分乏味，所以我这里总结不同博客类型的内容和博客书写应该注意点，希望在以后提高博客的可读性和逻辑性。...
2022-07-16 23:24:46
156
1
原创 JVM虚拟机规范——1.简介
1.1 历史Java编程语言是一种通用的、并发的、面向对象的语言。它的语法类似于C和C++，但它省略了许多使C和C++复杂、混乱和不安全的特征。Java平台最初是为了解决为联网消费设备构建软件的问题而开发的。它旨在支持多种主机架构并允许安全地交互软件组织。为了满足这些要求，编译后的代码必须能够在跨网络传输中幸存下来，在任何客户端上运行，并确保客户端可以安全运行。万维网的普及使这些属性变得更加有趣。Web浏览器使数百万人能够以更简单的方式上网和访问富媒体内容。终于有一种媒介，无论你使用的是什么机器，也
2022-04-15 17:32:58
852
原创 XML的解析方式
XML的解析方式有：（1）DOM解析方法，可以对XML文档进行修改操作；（2）SAX解析方法，解析速度快，占用内存少；（3）JDOM解析方法，查找方便；（4）DOM4J解析方法，解析XML的速度快；1.XML简介XML即可扩展的标记语言，可以定义语义标记（标签），是元标记语言。XML不像超文本标记语言HTML，HTML只能使用规定的标记，对于XML，用户可以定义自己需要的标记。XML文档以层级标签的形式来组织数据，多用于配置文件、存储静态数据、交换数据。2.XML语法1.
2022-04-14 20:52:26
7795
原创 SQL优化
1. 基本写法优化1. 少使用select *，尽量使用具体字段2. 对于条件来说等号之类两边的字段类型要一致，字符串不加单引号索引会失效3. 尽量少使用order by排序，对于需要多个字段进行排序的可以使用组合索引4. 对于group by语句要先过滤后分组5. 在查询时减少使用null，对字段有多个null的可以加默认值6. 少使用like，对于需要使用的，如需要使用尽量用like abc%这种，不要把%放在字段前面7. 在where后面少使用函数或者算术运算8. 去除
2022-03-30 21:35:12
87
原创 Spark重要概念和Spark任务提交流程
Spark任务执行流程分析（1）使用算子操作进行各种transformation操作，最后通过action操作触发Spark作业运行。提交之后Spark会根据转换过程所产生的RDD之间的依赖关系构建有向无环图。（2）DAG切割主要根据RDD的依赖是否为宽依赖来决定切割节点，当遇到宽依赖就将任务划分为一个新的调度阶段（stage）。每个stage中包含一个或多个task。这些task将形成任务集（TaskSet），提交给底层调度器进行调度运行。（3）每一个Spark任务调度器只为一个SparkCo
2022-03-01 15:58:39
5876
原创 Spark任务的任务执行流程
（1）将我们编写的程序打成jar包（2）调用spark-submit脚本提交任务到机场上运行（3）运行sparkSubmit的main方法，在这个方法中通过反射的方式创建我们编写的主类的实例对象，然后调用main方法，开始执行我们的代码（注意，我们的spark中的driver就运行在sparkSubmit进程中）。（4）当代码运行到创建SparkContext对象时，那就开始初始化SparkContext对象了（5）在初始化SparkContext对象的时候，会创建两个特别重要的对象，分别是
2022-02-28 14:48:52
2767
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人