- 博客(7)
- 资源 (1)
- 收藏
- 关注
原创 阿里云部署hadoop集群启动namenode报错(cannot assign requested address)
在阿里云上部署Hadoop集群报错,无法启动namenode org.apache.hadoop.hdfs.server.namenode.NameNode: Failed to start namenode.java.net.BindException: Problem binding to [Namenode:9000] java.net.BindException: Cannot...
2019-09-30 19:52:02 740
原创 Hadoop 安装snappy(编译源码)
首先,由于下载的hadoop一般都是编译好的,不支持snappy压缩,因此,我们需要下载未编译的hadoop进行编译,然后自己设置支持的压缩格式。以下开始详细配置:安装之前 hadoop checknative -a1.准备###安装其中部分基础软件的命令:yum -y install gcc gcc-c++ libtool cmake maven zlib-devel下载...
2019-09-29 18:52:33 829
原创 Hive连接数据库失败的原因(NestedThrowables)
NestedThrowables:java.sql.SQLException: Unable to open a test connection to the given database. JDBC url = jdbc:mysql://hadoop:3306/metastore?createDatabaseIfNotExist=true, username = root. Terminati...
2019-09-22 09:29:13 5322 2
原创 linux安装mysql5.7(修改密码策略)
查看mysql 是否安装卸载mysqlrpm -ev MySQL-client-5.5.25a-1.rhel5 --nodeps卸载完毕后,查看安装命令wget http://repo.mysql.com/mysql57-community-release-el7-8.noarch.rpm如果没有安装wget的软件包先下载Sudo yum...
2019-09-21 18:36:28 860
原创 Haddop入门架构图解
Hadoop项目的四个模块hadoop common(为其他hadoop模块提供基础设施) hdfs(一个高可靠,高吞吐量的分布式文件系统) mapreduce(一个分布式离线的并行计算框架) yarn(任务调度和资源管理)HDFS系统架构图服务功能介绍Namenode:主节点,存储文件的元数据(文件名,目录结构,属性,块列表,块所在的datano...
2019-09-18 18:03:39 213
原创 Linux下利用fork创建子进程产生的疑问(个人猜想)
C语言中的fork()讲解一个进程,包括代码、数据和分配给进程的资源。fork()函数通过系统调用创建一个与原来进程几乎完全相同的进程,也就是两个进程可以做完全相同的事,但如果初始参数或者传入的变量不同,两个进程也可以做不同的事。 一个进程调用fork()函数后,系统先给新的进程分配资源,例如存储数据和代码的空间。然后把原来的进程的所有值都复制到新的新进程中,只有少数值与原来的进程的值...
2019-09-17 14:08:02 1774
原创 阿里云服务器部署(轻量应用服务器)
这几天刚好尝试了一下部署阿里云的服务器(阿里云云翼计划,对学生还是很友好的)首先,先去阿里云租一台服务器,然后购买域名,一般来说,域名要申请备案才能使用,但是我这个域名却可以直接使用,可能是因为后缀是site吧,个人猜测一切准备就绪之后,我们开始着重讲服务器的部署,和可能出现的错误;1.在服务器上安装jdk和tomcat下载地址https://mirrors.tuna.tsingh...
2019-09-07 20:57:45 967
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人