- 博客(5)
- 收藏
- 关注
原创 Hadoop 单机环境安装配置和实现单词计数功能
一、大数据简介及发展前景 二、Hadoop 简介、生态圈简介及核心介绍 三、VMwareo 环境安装与 CentOS 安装 四、Hadoop 单机环境安装配置和实现单词计数功能 一、大数据简介及发展前景 1、大数据(Big Data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产 2、大数据特点: Volume(大量):数据体量巨大 Velocity(高速):处理速度快 .
2021-05-13 23:47:19 285
原创 Python数据处理基础
一、文件I/O 二、JSON和xml解析 三、csv和excel的高效解析 四、异常 一、文件I/O 1.目录的操作 导入os 2.文件读取 文件对象名 = open(file_name [, access_mode][, buffering]) 文件读取:fileObject.read([count]) 文件对象方法: 3.文件写入 fileObject.write(string) 二、JSON和xml解析 1.JSON字符串和Python对象的转换 1)
2021-05-13 22:16:01 277
原创 Hadoop集群搭建
Hadoop集群搭建 一、安装jdk 1、检查jdk rpm -qa|grep jdk 2、移出现有jdk yum -y remove java-1.* 3、创建目录 /opt/soft /opt/data mkdir /opt/soft mkdir /opt/data 4、上传jdk.tar.gz 目录下右键上传,选择文件 5、解压 当前目录/opt pwd // /opt tar -zxvf soft/jdk-8u112-linux-x64.tar.gz 6、查看解压结果 (当前
2021-05-13 19:07:12 186
原创 cmd命令 大全
CMD是什么?在windows环境下,命令行程序为cmd.exe。 是一个32位的命令行程序,微软Windows系统基于Windows上的命令解释程序。 类似于微软的DOS操作系统。输入一些命令,cmd.exe可以执行。 net use ipipc$ " " /user:" " 建立IPC空链接 net use ipipc$ "密码" /user:"用户名" 建立IPC非空链接 net use h: ipc$ "密码" /user:"用户名" 直接登陆后映射对方C:到本地为H: net use h: ip
2021-05-13 18:40:21 202
原创 Linux基础命令
一、基础命令 1、立刻关机 shutdow -h now 2、立刻重启 shutdown -r now 3、5分钟后关机 shutdown -h +5 4、列出opt目录下的文件的详细信息 ll /opt 切换到opt cd /opt 查看文件信息 ls -l 简写ll ls -a 5、查看当前路径 pwd 二、用户操作命令 5、添加用户test Shell /bin/ksh 所属组 aaa 附加组 adm和root useradd test1 //...
2021-05-13 18:35:08 294
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人