- 博客(7)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 hadoop-2.6.5安装
写篇博文记录下我搭建hadoop-2.6.5，中间遇到一些坑，不过最后能看到namenode和nodemanager都能出来也算成功了。由于每个人的操作系统，安装版本不一致，所以也不用像机器人一样照搬，按照我所说的步骤思想去做就行了，有些地方也需要灵活变通。一、安装的步骤如下1.给每台机器设置主机名，然后配置主机名和IP的映射关系（主机名类似域名）2.安装ssh,设置免密码登录
2017-04-23 17:39:59
6125
转载 linux lsof命令详解
简介lsof(list open files)是一个列出当前系统打开文件的工具。在linux环境下，任何事物都以文件的形式存在，通过文件不仅仅可以访问常规数据，还可以访问网络连接和硬件。所以如传输控制协议 (TCP) 和用户数据报协议 (UDP) 套接字等，系统在后台都为该应用程序分配了一个文件描述符，无论这个文件的本质如何，该文件描述符为应用程序与基础操作系统之间的交互提供了通用接口。因
2017-04-23 15:29:15
450
转载 Linux netstat命令详解
简介Netstat 命令用于显示各种网络相关信息，如网络连接，路由表，接口状态 (Interface Statistics)，masquerade 连接，多播成员 (Multicast Memberships) 等等。输出信息含义执行netstat后，其输出结果为Active Internet connections (w/o servers)Proto Re
2017-04-23 15:28:27
251
原创 VMware Virtual Network介绍 bridged、host-only、NAT
VMWare提供了三种工作模式，它们是bridged(桥接模式)、NAT(网络地址转换模式)和host-only(主机模式)。要想在网络管理和维护中合理应用它们，你就应该先了解一下这三种工作模式。在介绍这三种网络之前，来介绍下使用到的交换机和虚拟网卡VMnet0：这是VMware用于虚拟桥接网络下的虚拟交换机；VMnet1：这是VMware用于虚拟Host-Only网络下的
2017-04-22 20:14:58
459
转载 Hive函数大全
一、关系运算：1. 等值比较: = 语法：A=B 操作类型：所有基本类型 描述:如果表达式A与表达式B相等，则为TRUE；否则为FALSE 举例： Hive>select 1 from lxw_dual where 1=1; 12. 不等值比较: 语
2017-04-19 18:24:39
309
原创 SparkSQL中DataFrame常用API
package com.fosun.sparkdemo;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.sql.DataFrame;import org.apache.spark.sql.SQLContext;impor
2017-04-17 11:18:13
3210
原创 spark任务提交参数
~/spark$ bin/spark-submit Usage: spark-submit [options] [app arguments] Usage: spark-submit --kill [submission ID] --master [spark://...] Usage: spark-submit --status [submission ID] --master [spark:
2017-04-17 10:02:21
1223
采用“写优先”的策略演示“读者-写者”问题
2013-07-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人