aws0to1的博客

AWS提供了所有区域的的所有服务所可能使用的IP列表段。URL：https://ip-ranges.amazonaws.com/ip-ranges.jsonjson文件中主要信息格式如下 { "ip_prefix": "52.95.255.64/28", "region": "eu-west-1", "service": "AMAZON

为了让EC2使用者自主控制EC2实例的开关机实例，需要设置相应策略给每个用户。使用策略变量可以尽最大程度复用策略内容。策略变量在编写策略时，可以包含变量。系统在验证策略时，会把变量用实际值替换掉来验证。例如${aws:username}会被当前用户的实际用户名所替代${aws:CurrentTime}是当前时间${aws:SourceIp}是访问者的IP地址。

日志记录可以对存储桶开通访问日志记录功能，供日后统计或审计。一般日志会在几个小时后传输到目标存储桶。S3用量CloudWatch监控在CloudWatch下多了S3的监控条目，会对存储桶里的数据的空间和对象个数进行监控通知功能当存储通里的对象有变化（添加，删除，修改），可以使用SNS，SQS发送消息，或通知Lambda进行处理。创建SNS

使用低冗余的S3服务默认的S3服务是99.999999999%的可用性。如果S3存放的数据是测试数据或可以通过别的资源生成的（例如原图的缩略图）可以尝试使用低冗余的S3。Console设置方法选中对象，在右边“属性”窗口选择低冗余命令行设置方法添加参数   --storage-class REDUCED_REDUNDANCYaws s3 cp -

在EC2实例中有一个魔法IP 169.254.169.254。通过访问这个ip，能获得许多与这个实例相关的信息，这些信息被称为meta-data。meta-data版本历史（最后一行的latest是最常用的）wget -q -O - http://169.254.169.254/1.02007-01-192007-03-012007-08-292007-10-102007-

下面的步骤用来诊断EC2上部署的服务是否正常，分Linux 和 windows两个部分。Linux1. 登录部署服务的EC2服务器，检查端口是否已正常监听   例如，检查80端口nc -zv ec2-xxx-xxx-xxx-xxx.compute-1.amazonaws.com 80Connection to ec2-xxx-xxx-xxx-xxx.compute-1.ama

数据是一个公司宝贵的资产。AWS中也提供了多种数据服务（RDS，DynamoDB，Elasticache，Redshift）供用户使用。为了理解什么场景应该使用什么数据服务，下面简单总结了几个数据服务的特征（对应开源或商业组件，存储特性，快照，特征）。针对各个数据库服务的快照功能，可以参考http://docs.aws.amazon.com/zh_cn/

随着服务器的增多，EBS的使用量也在逐渐增长。如何快速获取EBS的用量，可以使用如下脚本aws ec2 describe-volumes --query 'Volumes[].[VolumeType,Size]' --output table | grep "\d" | awk '{total[$2]+=$4} END{for( i in total) print i,total[i]}'

在EC2的配置表中，有两个关于CPU的参数。一个是ECU，另一个是vCPU。一般ECU的个数都比VCPU个数高。这两个有什么区别呢？ECUECU的全称是EC2 Compute Unit的缩写，也就是EC2计算单元的意思。由于EC2本身的历史很长，各个时期采购的机器配置也不一样，AWS为了让不同时期的机器也有一个比较统一的计算能力标准，提出了这么一个概念。1个ECU大概相

Data Pipeline的主角是数据。AWS上提供了多种服务来存储、处理数据，S3，EMR，Redshift，RDS，DynamoDB。Pipeline就是帮用户在这么多种数据源上进行处理。下面通过简单制作一个pipeline把S3数据拷贝到S3上的另一个路径，来学习Data Pipeline的基础概念。创建pipeline可以通过预定义的模板来定义管道

github上最近有一个库叫jungle。由于作者觉得官方的CLI命令太繁琐，命令行太长，于是做了一个参数类似于Linux命令的命令行工具。地址https://github.com/achiku/jungle现在只支持EC2的查找，开关机，登录，以及ELB的查找。安装pip install jungle可以看到后台它还是使用boto3作为基础库You ar

在使用CLI操作资源，或使用IAM设定策略时，经常能碰到常常一串带着冒号的资源名称。这个有点像HTTP的资源定位符样的名称就是ARN（Amazon Resource Names）。格式它的格式大致由6部分组成 标准前缀：arn区域：对于大部分用户使用的是aws，如果是北京区域等独立区域，就会稍不同。北京区域是aws-cn服务：ec2，或s3等AWS服务名称区

原理EC2在初始化实例时，会运行cloud-init脚本一次。我们可以在cloud-init脚本中修改登陆的安全设置PasswordAuthentication默认PasswordAuthentication是no操作在设置实例信息时，打开“高级详细信息”填入如下信息#cloud-configpassword: 《你要设置的登陆密码》chpasswd: { expi

CloudWatch不光可以当做数据监控平台，还能收集日志，为后续自定义报警做准备安装CloudWatch Logs Daemonyum install -y awslogs安装发送日志的的代理wget https://s3.amazonaws.com/aws-cloudwatch/downloads/awslogs-agent-setup-v1.0.py--20

RDS提供了数据库快照功能。那从快照恢复RDS数据库时会发生什么事呢？数据库大小 5GB1. 拍摄快照在拍摄快照过程中不断运行 create database testxx; 命令，来作时间戳，后面看能恢复到哪一步2. 还原到时间点  需要选择使用哪个快照，及实例类型3. 恢复过程大概花费11分钟4.恢复结果   新增了1个R

在使用CLI操作S3文件时，不仅有普通的cp，mv等命令，还有类似linux下的rsync的sync命令来帮助同步文件。命令格式大致的命令格式如下：aws s3 sync 本地目录 S3目录aws s3 sync S3目录 本地目录aws s3 sync S3目录 S3目录第一个目录是源目录，第二个目录是目标目录。在命令后面都可以添加不同的参数来定制化同步选项。

在AWS的connsole界面一般资源都是按照region来整理的，例如在美国启动的EC2资源，在东京的region的界面下是看不到的。切换多region也是一个比较费时费力的工作。我们可以使用 资源组 的功能来快速浏览跨区域的资源情况。点击资源组

快照把EBS上的数据拷贝到S3上进行保存的称为快照（Snapshot）。在快照中并不包含用于管理实例的信息。既可以使用快照生成一个EBS卷，也可以使用快照生成AMI（http://docs.aws.amazon.com/zh_cn/AWSEC2/latest/UserGuide/instance-launch-snapshot.html）从快照创建EBS卷

登录EC2会使用ssh -i ec2-user@来登录。这里列举了2个可能碰到的问题，及解决方案PEM文件权限问题键入ssh命令后，显示错误如下@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@ WARNING: UNPROTECTED PRIVATE KEY FILE! @@@@@@@@@@@@@

老版本的AMI在创建时，会出现根EBS只能使用8G的情况。一般通过替换使用新版本的AMI可以解决。新版本的AMI启动时设置20GB，使用df命令，可见20GB创建EC2实例aws ec2 run-instances --image-id=ami-146e2a7c --key-name=keyname --instance-type=t2.micro --bloc