- 博客(5)
- 收藏
- 关注
RSS订阅原创 【Hadoop入门三】搭建完全分布式环境
本文使用虚拟机搭建Hadoop完全分布式环境，并基于分布式环境运行上一篇WordCount示例。一、创建虚拟机1. 下载并安装VMware Workstation去官网下载，我这里下载的是16.1.1。2. 安装Centos虚拟机1）安装虚拟机去官网下载，我这里下载的是CentOS7。网上有许多安装教程，这里就不细说了。2）克隆虚拟机安装好一个虚拟机后，基于此虚拟机克隆出2个虚拟机，克隆时选择创建完整克隆。一共产生了3个虚拟机，作为分布式集群。3）查看虚.
2021-05-19 13:02:08
158
原创 【Hadoop入门二】编写并运行WordCount
本文基于IDEA编写WordCount示例，并在Hadoop上运行。一、前提安装并配置好Java、Maven和Hadoop。二、创建Maven项目1. 创建项目File -> New -> Project -> Maven，不用勾选archetype，点击next，填写项目名称，点击Finish。2. 修改pom.xml1）引入Hadoop依赖包主要包括hadoop-common、hadoop-hdfs、hadoop-mapreduce-client-c
2021-05-14 16:35:55
1241
原创 【Hadoop入门一】Windows下安装和配置Hadoop
本文介绍如何在单机环境下安装配置Hadoop，并运行Word Count示例。前提确认已经安装好Java环境，并配置好环境变量。一、下载Hadoop1. 去官网下载Hadoop binary，我这里下载的是2.7.5版本，下载完成后解压hadoop-2.7.5.tar.gz到指定的hadoop安装目录。2. 原版的Hadoop不支持Windows系统，需要搜索下载Hadoop对应版本的Windows运行包（可以到https://github.com/steveloughran/winut
2021-05-14 00:17:43
2181
原创 使用IDEA搭建简单的SpringBoot项目
本文结合Spring MVC和Spring JDBC在IDEA中搭建一个简易的Spring Boot项目，实现在浏览器中访问url获取并展示数据库中表的数据。一、创建项目1. File -> New -> Project，选择Spring Initializr，填写项目名称等信息，点击Next。2. 选择需要的依赖包， Web下选择Spring Web，MySQL下选择JDBC API 和MySQL Driver，点击Finish。3. 项目创建完成，项目目录结构如下（.
2021-05-12 21:06:20
290
原创 IDEA中使用maven管理项目
本文以JDBC操作数据库为例，介绍在IDEA中使用maven管理项目的步骤。1. 下载并安装配置maven1. 去官网下载maven的zip包（windows系统），并解压缩到要放置maven的目录中。2. 配置环境变量，新增变量M2_HOME3. 编辑环境变量PATH，新增%maven%\bin4. 在命令行下运营mvn -version，若显示maven的版本信息，则配置安装成功。2. 创建maven项目1. File -> New Project，选择ma
2021-05-12 12:14:39
1593
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人