big_env环境变量配置

最新推荐文章于 2024-01-27 00:06:53 发布
最新推荐文章于 2024-01-27 00:06:53 发布
阅读量220 收藏
点赞数
分类专栏： hadoop 文章标签： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42496757/article/details/87473950
版权

#!/bin/bash
export HIVE_HOME=/home/software/apache-hive-1.2.0-bin
export PATH=$HIVE_HOME/bin:$PATH

 可将大数据组件的相关home目录配置在里面.

每次新打开一个ssh连接都需要source  big_env , 使环境变量生效.

我是A_lin呀
关注
专栏目录
hadoop 命令总结
wwwtotoro的博客
04-19 4857
1. Hadoop是独立的文件系统，和linux文件系统独立，不能直接使用linux命令。 2. 登录hadoop服务器，先执行haoop的环境变量命令(在root用户下面登陆)： hadoopc1h1:~ # . /opt/client/bigdata_env 执行hadoop启动需要的安全认证： . /opt/client/bigdata_env cd /opt/client
环境变量 env 设置 c语言 头文件,CentOS 设置环境变量
weixin_42514202的博客
05-18 929
1、 查看环境变量，echo 命令用于在终端输出字符串或变量提取后的值，格式为“echo [字符串 | $变量]”echo $PATH/usr/local/bin:/usr/bin:/usr/local/sbin:/usr/sbin:/home/java/jdk1.8.0_172/bin:/home/java/jdk1.8.0_172/jre/bin:/opt/modules/hadoop-3.1...
大数据开发环境搭建番外及总结：Redis和Anaconda环境的安装搭建
Miracle8070
01-09 1349
1. 写在前面 最近学习推荐系统， 想做一个类似于企业上的那种推荐系统(采用的阿里天池赛的一个电商数据集， 然后基于大数据的Lambda架构， 实现离线和在线相结合的实时推荐系统)， 这样可以熟悉一下真实环境中的推荐系统流程， 但是这里面需要大数据的开发环境， 所以这里的这个系列是记录自己搭建大数据开发环境的整个过程， 这里面会涉及到Hadoop集群，Spark， zookeeper, HBase, Hive, Kafka等的相关安装和配置，当然后面也会整理目前学习到的关于前面这些东西的相关理论知识和最终的
大数据系列 | Hive安装与配置
woshinsy的博客
08-02 715
Hive安装与配置
2-2.Hadoop大数据集群搭建之---伪分布式模式
最新发布
xubo5868的博客
01-27 488
第一种方法是从Hadoop的官网去下载，可能网速比较慢。第二种方法从国内的镜像源进行下载。我一般从清华大学镜像源去下载。选择3.3.5版本进行下载。
Spark开发指南
u014156013的博客
07-22 2668
目 录 6 Spark开发指南 6.1 概述 6.2 开发环境准备 6.2.1 Java开发环境准备 6.2.2 Scala开发环境准备 6.3 开发指引 6.4 Java代码样例 6.5 Scala代码样例 6.6 对外接口 6.6.1 Java API 6.6.2 Scala API 6.6.3 Python API 6.6.4 Web UI 6.6.5 JDBC ...
Hadoop配置文件解析__hadoop-env.sh
feizuiku0116的博客
10-11 1286
# 配置Java的环境变量 export JAVA_HOME=/export/server/jdk1.8.0_65 # 配置Hadoop的环境变量 export HADOOP_MAPRED_HOME=/export/server/hadoop-3.3.0 # 告诉Hadoop各组件分别用哪个用户运行 export HDFS_NAMENODE_USER=root export HDFS_DATANODE_USER=root export HDFS_SECONDARYNAMENODE_USER=root ex
Docker环境变量配置技巧：配置错误排查
![Docker实战案例集]...# 1. Docker环境变量简介 Docker环境变量是存储和管理容器中运行时配置和设置的关键机制。它们允许用户自定义容器的行为，并为应用程序提供特定于环境的信息。环境变量可以存储各
uboot中的环境变量配置和使用
## 第二章：UBOOT环境变量的配置 UBOOT环境变量的配置是非常重要的，它可以影响系统的启动和运行。接下来我们将介绍如何配置UBOOT环境变量。 ### 2.1 使用命令行配置环境变量 在UBOOT命令行中，可以使用 `setenv`...
大数据课程
weixin_45201661的博客
12-05 1244
测试
Hadoop HA（高可用）部署
weixin_52626164的博客
08-10 2131
注：安装Hadoop HA（即HDFS和YARN高可用），首先要完成zookeeper的配置，然后再配置hdfs 和yarn 的高可用。
环境换核过程命令总结
wwwtotoro的博客
06-02 554
mv /tmp/replace_core_20170322.tar /export/home/replace_core_20170322.tar; tar xf replace_core_20170511.tar sh quick_install.sh scp root@10.143.29.192:/srv/smartcare/dpu_offline_data.tar /tmp scp /
大数据BigData之如何安装配置hive环境？
weixin_34291004的博客
12-18 142
在安装hive之前，希望你已经装好： Java hadoop 文章目录   1.配置环境变量   2.配置 hive-env.sh 文件   3.配置 hive-site.xml   4./hive/conf/下，找到hive-site.xml配置文件     4.1 需要修改临时文件夹的路径，改为正确的路径     4.2 如果没有此路径，则自己创建   5.修改 hive-config....
2.安装组件客户端程序（华为云学习笔记，HCIP，大数据）2022.6.6
GCPOP的博客
06-08 419
实验拓扑图 大数据开发机 大数据数据节点 大数据管理节点 大数据控制节点 安装组件客户端程序 在FusionInsight HD中,大多数组件都提供了命令行客户端，此实验指导用户如何下载单个组件和所有组件的客户端程序，以及如何安装和卸载单个组件和所有组件的客户端程序。访问FusionInsight Manager Web UI 大数据管理节点管理段IP地址是访问FusionInsight Manager Web UI的ip地址，访问链接为 http://【大数据管理节点管理段IP地址】:8080/
Shell脚本（）
BigData
04-20 174
网址：https://blog.csdn.net/wojiushiwo987/category_9268186.html
BigData Linux Shell脚本
GaoChenXi
05-27 319
2. Shell 2.1 简介 shell脚本执行方式Shell 是一个用 C 语言编写的程序，通过 Shell 用户可以访问操作系统内核服务。它类似于 DOS 下的 command 和后来的 cmd.exe。Shell 既是一种命令语言，又是一种程序设计语言。 Shell script 是一种为 shell 编写的脚本程序。Shell 编程一般指 shell脚本编程，不是指开发 shell 自身。 Shell 编程跟 java、php 编程一样，只要有一个能编写代码的文本编辑器和一个能解释执行的脚本解释
Hadoop完全分布式部署
weixin_52626164的博客
08-06 3334
host映射：这里是把三个Linux的ip地址保存到三个虚拟机去，相当于我们自己在手机里面存别人的电话号码 一样的道理，这样相互之间就知道对应ip地址的机器是哪一台。所以这个操作也是要在三台虚拟机都要 进行的。给ip地址起名字，几个机器需要互相连通，这样在连接几台机器的时候只需要使用机器名就行，不需要使用ip地址。...
BigData预处理(完整步骤)
weixin_30339969的博客
07-22 165
BigData预处理(完整步骤) 虽然题目是完整步骤,实际上并不完整,以下是原文内容 一：为什么要预处理数据？ （1）现实世界的数据是肮脏的（不完整，含噪声，不一致） （2）没有高质量的数据，就没有高质量的挖掘结果（高质量的决策必须依赖于高质量的数据；数据仓库需要对高质量的数据进行一致地集成） （3）原始数据中存在的问题： 不一致 —— 数据内含出现不一致情况 重复 不完整 —— 感兴趣的属...
linux环境变量设置 以及 source命令
funway's world
04-27 4306
 　定制环境变量 　　环境变量是和Shell紧密相关的，用户登录系统后就启动了一个Shell。对于Linux来说一般是bash，但也可以重新设定或切换到其它的Shell。环境变量文件：/etc/profile。 环境变量是通过Shell命令来设置的，设置好的环境变量又可以被所有当前用户所运行的程序所使用。对于bash这个Shell程序来说，可以通过变量名来访问相应的环境变量，通过exp
Windows环境下配置Hadoop2.7.7及HDFS文件操作
配置Hadoop-HDFS在Windows环境下是一个涉及下载、解压、环境变量配置、文件系统设置等多个步骤的过程。正确配置后，开发者就能在本地环境中使用Java与HDFS进行交互，进行大数据的存储和处理。这个过程对于学习和实践...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值