- 博客(5)
- 收藏
- 关注
RSS订阅原创 hive-安装之-show tables报错
地址如下：https://mvnrepository.com/artifact/com.google.guava/guava/13.0。3、将下载的jar 包重新上传到hive/lib目录下。可以看到，之前执行失败的命令执行成功啦，搞定！2、在maven 仓库重新下载一个新的jar包。
2024-07-26 11:22:43
314
原创 spark 缓存及内存管理
spark内存管理1 persist 和 unpersistcache() 调用 persist()，且默认存储级别是 MEMORY_ONLY。persist() 用来设置RDD的存储级别存储级别 意义MEMORY_ONLY使用未序列化的Java对象格式，将数据保存在内存中。如果内存不够存放所有的数据，则数据可能就不会进行持久化。那么下次对这个RDD执行算子操作时，那些没有被持久化的数据，需要从源头处重新计算一遍。这是默认的持久化策略，使用cache()方法时，实际就是使用的这种持久化策略
2020-12-28 14:54:00
1085
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人