- 博客(4)
- 收藏
- 关注
RSS订阅原创 java.io.IOException: Failed to delete: C:\Users\pagep\AppData\Local\Temp\blockmgr-b03d4983-a569-4c9b
异常信息java.io.IOException: Failed to delete: C:\Users\pagep\AppData\Local\Temp\blockmgr-b03d4983-a569-4c9b at org.apache.spark.util.Utils$.deleteRecursively(Utils.scala:1034) at org.apache.spark.stor...
2019-04-16 14:19:27
3749
原创 Linux必须掌握的和最常用的命令及示例
1．pwd命令pwd命令用于显示用户当前所处的工作目录，格式为“pwd [选项]”。2．cd命令cd命令用于切换工作路径，格式为“cd [目录名称]”。这个命令应该是最常用的一个Linux命令了。可以通过cd命令迅速、灵活地切换到不同的工作目录。除了常见的切换目录方式，还可以使用“cd -”命令返回到上一次所处的目录，使用“cd…”命令进入上级目录，以及使用“cd ~”命令切换到当前用户...
2019-04-02 16:36:38
320
原创 工厂模式-简单工厂模式-实例
简单工厂模式优点工厂类是整个模式的关键.包含了必要的逻辑判断,根据外界给定的信息,决定究竟应该创建哪个具体类的对象.通过使用工厂类,外界可以从直接创建具体产品对象的尴尬局面摆脱出来,仅仅需要负责“消费”对象就可以了。而不必管这些对象究竟如何创建及如何组织的．明确了各自的职责和权利，有利于整个软件体系结构的优化。缺点由于工厂类集中了所有实例的创建逻辑，违反了高内聚责任分配原则，将全部创建逻辑...
2019-03-22 18:45:52
210
原创 关于Spark的Dateset的操作：拼接字符串，创建UDF匿名内部类并使用，functions方法中数组字段与对象字段
关于Spark的Dateset的操作1.拼接字符串当你需要进行字符串和列的值进行拼接组成新的列时：functions.concat(functions.lit("id="), user.col("id"),functions.lit("name="), user.col("name")).as("student"))代码解析：functions.concat 是拼接方法，functio...
2019-03-20 15:48:29
810
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人