shell脚本专家指南笔记#7_非直接引用变量 ### 本文为《shell脚本专家指南》一书的学习笔记。##7. 非直接变量直接变量的概念 明确知道变量的名字,可以不先知道变量的值。 创建直接变量的三种方式。 直接赋值。 # a=b 存储一个命令的输出。 # a=`echo b` 存储某些类型的计算结果。 # a=$(( 1 + 2 ))非直接变量的概念 ...
shell脚本专家指南笔记#6_测试变量和设置默认值 ### 本文为《shell脚本专家指南》一书的学习笔记。##6. 测试变量和设置默认值6.1. 设置默认值 设置变量默认值的几种形式,复杂程度递减。 # if [ -z "$var" ]; then var="default" fi # [-z "$var" ] && var="default" # ...
shell脚本专家指南笔记#5_接受命令行选项_开关_参数 ### 本文为《shell脚本专家指南》一书的学习笔记。##5.接受命令行选项_开关_参数原文示例有两部分值得借鉴的内容: 1. app的目录布局; 2. getopts的用法。app的目录布局 /usr/local/apphome /usr/local/apphome/myapp-1.2.3 /usr/local/apphome/myapp...
shell脚本专家指南笔记#4_比较和测试 ### 本文为《shell脚本专家指南》一书的学习笔记。##4. 比较和测试通用形式 if [ "$string" = "some_string" ]; then ... if [ $integer -eq 15 ]; then ...注意双引号 "" 的使用,原文说明比较模糊,后来我做了测试。 在test 和 [] 中,如果$a中a未定义,不加双引号,会导致...
shell脚本专家指南笔记#4_比较和测试 ### 本文为《shell脚本专家指南》一书的学习笔记。##4. 比较和测试通用形式 if [ "$string" = "some_string" ]; then ... if [ $integer -eq 15 ]; then ...注意双引号 "" 的使用,原文说明比较模糊,后来我做了测试。 在test 和 [] 中,如果$a中a未定义,不加双引号,会导致...
shell脚本专家指南笔记#3.日期和时间操作 ### 本文为《shell脚本专家指南》一书的学习笔记。##3.1. 用天数来计算日期 unix和linux以1970年1月1日0时0分开始计算时间,也就是所谓的时间戳,单位是 秒。在系统中,可以使用 date +'%s' 来查看。 严格来讲,系统的起止时间是以零时区开始计算的。比如,一般我们系统的时区为 东八区(+8),故使用 date -...
shell脚本专家指南笔记#2.使用函数库 ### 本文为《shell脚本专家指南》学习笔记。##2.1. 使用库可以将常用函数,封装如库文件中,在需要用对应函数时,只要导入对应库文件即可。示例:通过导入库文件,就可以引用已写好的函数。比如,导入OSTYPE环境变量。#!/bin/echo WARN: this library should be sourced!# ostype(): import OSTYPE va...
shell脚本专家指南笔记#1.shell脚本错误检测 ## # 本文为《shell脚本专家指南》一书的学习笔记。##1.1. shell跟踪 使用set -x和set -v。仅在当前脚本生效。 set -x # 打开代码跟踪。个人理解为,显示当前执行的代码。 set +x # 关闭代码跟踪。 set -v # 打开代码冗余。个人理解为,显示当前走过的代码(不一定执行)。 set +v # 关闭代...
编译hadoop并获取native 文档说明 该文档为完成编译后,根据印象编写,并未经过重新编译测试,大体步骤应该没错,如有错误,望指正。 编译的最初目的,是为了获取合适的native包,并且检测手动编译的native包和自带的native包有何差别。 编译的版本为apache-hadoop-2.7.6和hadoop-2.6.0-cdh5.5.0。编译说明 源码中会有一个 BUILDING.txt...
希尔排序#demo public class ShellSort { public static void main(String[] args) throws Exception { int[] numbers = ArrayTools.getRandomInts(9, -5, 5, true); ArrayTools.printInts(numbers); ...
插入排序Demo public class InsertSort { public static void main(String[] args) throws NumberWrongException { int[] numbers = ArrayTools.getRandomInts(7, -9, 9); ArrayTools.printInts(numbers); ...
java-快速排序Demo public class QuickSort { public static void main(String[] args) throws NumberWrongException { int[] numbers = ArrayTools.getRandomInts2(7, -9, 9); ArrayTools.printInts(numbers); ...
冒泡/选择排序Demo 冒泡排序 public static void main(String[] args) throws Exception { int[] numbers = ArrayTools.getRandomInts2(7, -9, 9); ArrayTools.printInts(numbers); bubbleSort(numbers); ...
随机生成int数组Demo//ArrayTools Demo1/** * @param length * @param start * inclusive. * @param end * exclusive. * @return * @throws NumberWrongException */ public s...
hadoop-2.7.4-翻译文档-viewFS指南 介绍视图文件系统(ViewFs)提供了一种方法来管理多个Hadoop文件系统名字空间(或名字空间卷)。这种方法对于拥有多个名称节点和名字空间卷的联邦HDFS特别有用。ViewFs类似于Unix / Linux系统中的客户端挂载表。ViewFs可用于创建个性化的名字空间视图以及每个群集的通用访问。本指南在具有多个集群的Hadoop系统上下文中呈现,每个集群可以联合到多个命名空间中。它还描
hadoop-2.7.4-翻译文档-联邦HDFS HDFS联盟HDFS联盟背景多个Namenodes /命名空间主要优点联合配置组态:格式化Namenodes从旧版本升级并配置联盟将新的Namenode添加到现有的HDFS集群管理集群启动和停止集群平衡器退役群集Web控制台本指南概述了HDFS联合功能以及如何配置和管理联合集群。背景HDFS有两个主要层:命名空间
hadoop-2.7.4-翻译文档-机架感知 机架感知Hadoop组件具有机架感知功能。例如,HDFS通过机架感知来将块副本放在不同的机架上,从而提高容错。在群集中发生网络交换机故障或进行分区时,可提供数据可用性。Hadoop主守护进程通过调用由配置文件指定的外部脚本或java类来获取群集从站的机架ID。使用java类或外部脚本进行拓扑,输出必须遵守java org.apache.hadoop.net.DNSToSwitchMappi
hadoop-2.7.4-翻译文档-resourcemanager高可用 ResourceManager高可用性介绍本指南概述了YARN的ResourceManager的高可用性,并详细介绍了如何配置和使用此功能。ResourceManager(RM)负责跟踪群集中的资源,并调度应用程序(例如MapReduce作业)。在Hadoop 2.4之前,ResourceManager在YARN集群中存在单点故障。高可用性功能以active/standby rm