学习大数据、云技术如何提高部署学习效率

转自:http://www.aboutyun.com/thread-14575-1-1.html

1.如何避免反复部署集群?
2.快照的作用是什么?
3.缓存服务器能起到什么作用?







学习大数据、云技术,我们首先应该掌握的是部署,通过部署,我们认识hadoop、openstack等大数据、云技术。
所以部署是我们入门的第一步。
在我们学习的过程中,部署异常是经常遇到的问题,当然如果比较喜欢专研或则非要找出哪里出错了,此文不要适合,本人适合人群,对于错误,无法找到,或则部署混乱,不得不重新部署。这里交给大家,如何最大限度的提高效率。

1.虚拟机快照

来源:
使用虚拟机搭建hadoop、openstack集群必备基础知识:虚拟机快照


我们刚从零基础知识学会搭建集群,学会了Linux知识,学会了Java基础。然后我们开始搭建集群。
搭建hadoop集群
搭建hbase集群
搭建storm
搭建spark集群

在搭建集群的过程中,遇到了各种问题,然后不断的重复开始,不断重复搭建,废了很长时间搭建快要成功的时候,前面都正确安装,但是因为某一个操作,却把环境搞坏了。比如hadoop搭建成功,hbase却失败了。但是又找不出原因。Java环境配置正确了,却因为ssh不成功,然后不断的修改。坏境坏了,该如何办?
如果我们刚开始学习,会不断的重复搭建环境,然后花费大量的时间,在搭建集群上,那么有没有更好的办法。答案是有的,就是----创建虚拟机快照。

那么该具体如何操作:



首先我们看到1处虚拟机,右键弹出右侧菜单,然后看到快照。


3.拍摄快照
点击拍摄快照后,弹出下图,输入名称,快照就做好了。如果后面配置遇到问题,恢复快照即可。





4.恢复到快照
上面做好了快照,这里就可以恢复到某个快照了。


5.快照管理器
单击快照管理,就看到了备份的快照,如果备份了多个就能看到多个。可以恢复到任意一个备份的快照



以上有的朋友可能也知道的,但是合理的使用快照,可以提高搭建集群的效率


2.搭建缓存服务器


这里以ubuntu14.04为例:



源服务器名称可能不太准确,意思是创建内网自己的私服,这样只要有Ubuntu通过该私服下载安装过软件,私服都会缓存,下一个Ubuntu的请求就直接从缓存中获取。

首先安装apt-cacher

  1. apt-get install apt-cacher  
复制代码

装的过程中选择Daemon方式。
装完后,/etc/default/apt-cacher 文件内容应该如下:

  1. AUTOSTART=1  
复制代码



所以服务应该已经启动了。
到/etc/apt-cacher/apt-cacher.conf文件中修改一行配置,允许任何客户端访问:


  1. allowed_hosts = *  
复制代码



重启服务

  1. service apt-cacher restart
复制代码


然后打开网页:http://your_ip:3142/apt-cacher
看到页面就说明服务器正常启动了。



在/etc/hosts文件中添加一行,可以帮助找到chrome依赖的dl.google.com

  1. 203.208.45.206 dl.google.com
复制代码



在客户端的ubuntu机器上,创建文件 /etc/apt/apt.conf文件或者/etc/apt/apt.conf.d/01proxy文件

内容如下:

  1. Acquire::http::Proxy "http://your_server:3142";
复制代码

然后运行apt-get update, 为了确认真的起作用。可以查看apt-cacher的日志,到服务器上查看目录下的日志文件

/var/log/apt-cacher


这里以openstack为例:

服务器ip地址为10.0.0.100:

cacher.png (60.75 KB, 下载次数: 0)

下载附件  保存到相册

2015-8-1 18:42 上传




客户端配置:


在客户端的ubuntu机器上,创建文件 /etc/apt/apt.conf文件或者/etc/apt/apt.conf.d/01proxy文件

内容如下:
[Bash shell] 纯文本查看 复制代码
?
1
Acquire::http::Proxy "http://10.0.0.100:3142" ;


然后运行apt-get update, 为了确认真的起作用。可以查看apt-cacher的日志,到服务器上查看目录下的日志文件

/var/log/apt-cacher

监控:

1.png (50.66 KB, 下载次数: 0)

下载附件  保存到相册

2015-8-1 18:45 上传



  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
本火锅店点餐系统采用Java语言和Vue技术,框架采用SSM,搭配Mysql数据库,运行在Idea里,采用小程序模式。本火锅店点餐系统提供管理员、用户两种角色的服务。总的功能包括菜品的查询、菜品的购买、餐桌预定和订单管理。本系统可以帮助管理员更新菜品信息和管理订单信息,帮助用户实现在线的点餐方式,并可以实现餐桌预定。本系统采用成熟技术开发可以完成点餐管理的相关工作。 本系统的功能围绕用户、管理员两种权限设计。根据不同权限的不同需求设计出更符合用户要求的功能。本系统中管理员主要负责审核管理用户,发布分享新的菜品,审核用户的订餐信息和餐桌预定信息等,用户可以对需要的菜品进行购买、预定餐桌等。用户可以管理个人资料、查询菜品、在线点餐和预定餐桌、管理订单等,用户的个人资料是由管理员添加用户资料时产生,用户的订单内容由用户在购买菜品时产生,用户预定信息由用户在预定餐桌操作时产生。 本系统的功能设计为管理员、用户两部分。管理员为菜品管理、菜品分类管理、用户管理、订单管理等,用户的功能为查询菜品,在线点餐、预定餐桌、管理个人信息等。 管理员负责用户信息的删除和管理,用户的姓名和手机号都可以由管理员在此功能里看到。管理员可以对菜品的信息进行管理、审核。本功能可以实现菜品的定时更新和审核管理。本功能包括查询餐桌,也可以发布新的餐桌信息。管理员可以查询已预定的餐桌,并进行审核。管理员可以管理公告和系统的轮播图,可以安排活动。管理员可以对个人的资料进行修改和管理,管理员还可以在本功能里修改密码。管理员可以查询用户的订单,并完成菜品的安排。 当用户登录进系统后可以修改自己的资料,可以使自己信息的保持正确性。还可以修改密码。用户可以浏览所有的菜品,可以查看详细的菜品内容,也可以进行菜品的点餐。在本功能里用户可以进行点餐。用户可以浏览没有预定出去的餐桌,选择合适的餐桌可以进行预定。用户可以管理购物车里的菜品。用户可以管理自己的订单,在订单管理界面里也可以进行查询操作。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值