weixin_44441131的博客

在2024年的世界人工智能大会（WAIC）上，我们见证了从农业社会到工业社会再到数字化社会的深刻转变。这一进程不仅体现在技术的单点爆发，更引发了整个产业链的全面突破，未来将是技术以指数级速度发展的崭新时代。

看完这边文章，结合工作经验，我得感受更多是：用git reflog即可！

在日常开发时，我们经常会需要撤销之前的一些修改内容或者回退到之前的某一个版本，这时候reset命令就派上用场了。

合并操作在Git中属于最为核心的一个操作，包括三种合并方式：一种为fast forward ，需要满足有非常强的前提条件才能执行；一种为3 way merge方式，这种是我们工作中常见的；最后一种为变基rebase。另外，本篇文章也会深入讲解冲突如何产生，以及如何解决。

工作后要了解清楚个税

掌握YARN是什么，组成是什么即可。

知道HDFS是什么，掌握其基本原理即可，不需要深挖源代码（个人而言）。当然对于大数据工程师来说还是要的！

回答Hadoop是什么，发展历史，它的优势，和它的基本组成。对于算法工程师而言，并不需要弄清楚源代码部分，最重要的是知道是什么，怎么用很重要，因为我们的侧重点还是在算法上面。

记录hive sql 中最重要的窗口函数

使用scala 代码定义一个简单的object. scala 中没有静态的概念,所有静态的东西都放在 object 中.所以 object Test 可以理解一个静态类.看下编译的内容. object Test 代码如下在字节码反编译的结果上是体现了两个文件,Test.class 和 Test$.classTest.class 代码如下} }Test$.class 代码如下} }可以看到当只定义了 object 不定义 class 时,字节码中同样还是会存在class。

Scala 允许函数的最后一个参数可以是重复的。这可以允许用户向函数传入可变长度参数列表。然而这里面涉及到拆包和解包的过程，特别容易搞错，这里记录一下。在函数内部，args类型是String数组。符号可以将数组中的每个元素依次传入函数。将多个参数打包成数组赋值给args。...

Hive中空值判断基本分两种，，一种是NULL与\N，一种是空字符串。

sql中语句的执行顺序很重要，不理解它就不知道该如何优化

谓词下推就是将过滤条件表达式（=、！=、like、in、between、>、

scala中的Option操作

scala中`eq`，`equals`，`==`，`===`经常搞混，这里总结一下

scala中下划线的用法有很多，这里进行总结梳理

scala中foreach，forall，map，exists这三个函数感觉功能上特别想，今天来对比总结一下。

中的或[this]中的包中的类及它们的伴生对像可见外，对其它所有类都是private。private[this]限定了这个类的方法只能访问自己对象的属性privateAge，不能访问其他对象（即使这个对象是根据这个类生成）的属性。scala中类的属性默认都是private类型的，但默认会生成public类型的getter()和setter()，即私有属性，公有方法。在主构造器形参中，如果一个属性没有var或者val的修饰符，Scala不会生成getter和setter方法。声明的变量都是类的属性。.....

scala变量赋值法则