- 博客(3)
- 收藏
- 关注
原创 输出日志管理
1、Shell模式下 修改conf目录下,log4j.properties的文件,将其中的 log4j.rootCategory=INFO,console 改为:只显示警告及更严重的信息log4j.rootCategory=WARN,console 2、编程实现 编写一个工具类。 import org.apache.log4j.{Logger, Level} import...
2018-05-02 16:59:09 433
原创 Spark的各个组件
1、Spark Core 实现Spark的基本功能,包括任务调度、内存管理、错误恢复、与存储系统交互等,以及RDD(Resilient Distributed Dataset)API的定义。 2、Spark SQL 用Spark来操作结构化数据的程序包。可以使用SQL或Hive的HQL来查询数据,并可以与RDD的操作相结合使用。 3、Spark Streaming 用来对实时数据进行流式计
2018-05-02 16:56:56 12518
原创 Linux常用命令
linux的常用命令操作 1、日常操作命令 **查看当前所在的工作目录 pwd**查看当前系统的时间 date**查看有谁在线(哪些人登陆到了服务器) who 查看当前在线 last 查看最近的登陆历史记录2、文件系统操作 ** ls / 查看根目录下的子节点(文件夹和文件)信息 ls -al -a是显示隐藏文件 -l是以更详细的列表形式显示**切...
2018-03-28 11:36:01 241
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人