- 博客(17)
- 资源 (95)
- 收藏
- 关注
RSS订阅原创 运维管理工具的对比Puppet、Chef、Ansible和SaltStack、Fabric
我们发现分布式是一个发展的趋势，无论是大型网站的负载均衡架构还是大数据框架部署，以及云存储计算系统搭建都离不开多台服务器的连续部署和环境搭建。当我们的基础架构是分散式或者基于云的，并且我们经常需要处理在大部分相同的服务器上频繁部署大致相同的服务时，我们就应该考虑自动化配置和维护了。让用户极容易配置和维护数十台、数百台、乃至数千台服务器。 幸运的是，现在有很多运维管理工具是为此目的而设计的...
2018-04-29 16:24:26
44646
2
原创 云存储---ceph简介架构原理和一些基本概念
我们在上篇文章已经对比了不同的存储系统之间的区别，本章开始逐步深入记录Ceph的学习和运用。开源分布式存储系统的对比Ceph简介Ceph是一个分布式存储系统，提供对象，块和文件存储，是一个免费开源软件的存储解决方案，可以部署于普通的x86兼容服务器上，可用于解决统一存储的io问题。Ceph诞生于2004年，最早是SageWeil一项关于存储系统的PhD研究项目，致力于开发下一代高性能分...
2018-04-26 18:54:45
10082
转载 其他公司应用Ceph的具体方案
Ceph 作为软件定义存储的代表之一，最近几年其发展势头很猛，也出现了不少公司在测试和生产系统中使用 Ceph 的案例，尽管与此同时许多人对它的抱怨也一直存在。本文试着整理作者了解到的一些使用案例。携程（Ctrip）携程所使用的各种存储的现状： • 商业存储： • SAN(HP/ HPS) , 1+ PB, 数据库 • NAS (HW) , 800+ TB, 文件共享 • 开源存储...
2018-04-24 19:06:41
2826
原创 遇到的问题--java连接hbase的thrift2报错readtimeout
遇到问题java连接hbase的thrift2报错readtimeout原因分析java连接hbase的thrift2报错readtimeout原因有多种， 一是排除网络和防火墙问题 二是检测thrift2服务是否正常或者假死 三是thrift2跟hbase集群交互的之间有问题使用命令排查网络问题ping 192.168.30.252使用命令排查防火墙问题...
2018-04-23 19:34:37
2536
原创 开源分布式存储系统的对比
我们在选型开源分布式存储系统框架之前需要对不同的框架进行调研。所有的开源存储系统介绍链接存储系统对比目前比较热门的分布式文件系统有如下几种:Ceph，GlusterFS,Sheepdog,Lustre,Swift,Cinder,TFS,HDFS,MooseFS,FastDFS,MogileFS等开源协议说明 GPL:不允许修改后和衍生的代码做为闭源的商业软件发布和销售，修改后...
2018-04-20 16:32:49
76309
10
原创 云计算云存储的一些基本概念
我们在学习云计算和云存储之前，需要先了解一些很常见的基本概念，否则在学习过程中和选型时会比较晕。云计算的三种服务模式：IaaS，PaaS和SaaS云的分层任何一个在互联网上提供其服务的公司都可以叫做云计算公司。其实云计算分几层的，分别是Infrastructure（基础设施）-as-a-Service，Platform（平台）-as-a-Service，Software（软件）-as-...
2018-04-12 20:10:04
29808
3
原创 云存储云计算选择开源还是商业版
本文由张小凡整理，转载请注明出处: http://my.525.life/article?id=1510739742055现在市场上有很多云计算架构可供选择，既有成熟的商业版本，也有基于开源的技术。 每个公司在面临存储运算瓶颈时，都会面临一番挣扎，本篇文章我们来调研梳理开源与商业版本的选择对比。选择商用云平台还是选择开源云平台创建企业的私有云，这确实是个问题。企业需要综合考虑，权衡利弊，...
2018-04-11 18:06:25
7407
1
转载 专家观察 | 闫丹：金融行业使用开源云计算技术路线参考
由工业和信息化部指导，中国信息通信研究院主办，业界知名组织云计算开源产业联盟（OSCAR）承办的2017全球云计算开源大会于4月19日-20日在北京国家会议中心顺利召开。本文为本届大会嘉宾分享的大会演讲速记内容，敬请浏览。嘉宾介绍：闫丹公司职务：中国信息通信研究院大会演讲速记我要进行的演讲是关于金融行业使用开源技术现状及实施路线参考，这个也是我们联盟最近的研究的一个项目。前段时...
2018-04-11 12:03:53
834
转载 APMCon 2017|国美云服：混合云架构设计及性能实践
中国应用性能管理行业盛宴—2017中国应用性能管理大会(简称APMCon 2017)于8月10日至11日在北京新云南皇冠假日酒店隆重召开。本届APMCon是由听云、极客邦和InfoQ联合主办，作为国内APM领域最具影响力的技术大会，本次大会以“驱动应用架构优化与创新”为主题，致力于推动APM在国内的成长与发展。国美云服技术总监—左坚于APMCon 2017云架构优化实践专场发表了题为《混合云架...
2018-04-11 11:17:05
993
转载 能否利用Hadoop搭建完整的云计算平台
Hadoop并不完全代表云计算，所以，要用Hadoop搭建完整的云计算平台，答案是不够。我们常说云计算，实际上还是通过计算机的大规模或者 说海量处理来为生活中各式各样的人和各行各业服务——所以，核心在“服务”。关于服务，展开来就是常用的那3种(也是事实上的标 准)：SaaS,PaaS,IaaS。对云计算来说，公有和私有，虚拟和存储，这其实是相对讨论的核心。回头说Hadoop。在Google三大...
2018-04-10 19:25:30
5591
1
转载 中国私有云发展调查报告（2018年）
2017年我国私有云市场保持稳定增长，预计未来依旧将继续保持较快的增长速度。在私有云建设方面，安全性、可控性成为企业采纳私有云的重要考量，在私有云云安全层面，用户的关注点主要集中在数据加密和用户隐私保护上。 我国云计算开源技术的接受程度持续上升，前景乐观但也面临诸多挑战。云计算技术成熟度和可持续性是企业选择开源技术优先考虑的因素。以OpenStack、Docker为代表的开源技术继续引领风...
2018-04-10 18:08:27
4517
转载 重磅|《中国云计算开源发展调查报告（2018）》即将发布
近年来，随着云计算市场的繁荣发展，开源技术所占的市场比重持续增长，技术水平也得到了长足发展。甚至有人直言，善于把握机遇的企业不是正在开源，就是在走向开源的路上。如今，新的开源技术不断涌现，社区规模持续壮大，开源技术的应用更加多样化，国内开源生态圈雏形已初步形成。为进一步掌握中国开源技术的应用现状和发展特点，中国信息通信研究院开展了2017-2018年度中国云计算开源发展状况的调查，调查报告将在...
2018-04-10 16:35:32
652
转载 【经验】Ceph对象存储运维的惊魂72小时
总结: 1、避免一个bucket写入太多的对象，对新建bucket，限制存储对象的最大数量 2、使用比较新的版本0.94以上修复单bucket索引对象过大问题，在Ceph的0.94版本中，已经支持了bucket索引对象的shard功能，一个bucket索引对象可以分成多个shard对象存储，可有效缓解单bucket索引对象过大问题 3、系统上线前需要经过充分的测试，功能，性能，异常，稳定性以...
2018-04-10 14:22:29
4732
1
转载 OpenStack 如何笑傲开源云计算战场—— OpenStack 与 CloudStack 的对比
大概一周前，Zenoss刚刚完成了一份名为“2014开源云计算解析”的市场调查显示，69%已经不同程度地应用云计算技术，43%的用户花费大量资源在开源技术上。在这些选择了开源云的企业中，超过86%的企业关注OpenStack,并且这些数值在过去几年都在不断增长。 排在第二位的CloudStack则被远远甩在后面，只有44%。OpenStack和CloudStack都是功能强大的开源云平台，那O...
2018-04-10 11:50:35
5558
原创 遇到问题--hadoop---cdh识别不到服务器状态
情况公司停电之后回来看到集群情况如下,主要问题是cdh识别不到其中一台服务器状态。这种情况下重启整个集群会超时失败。原因识别不到的可能原因有三个: 一是服务器没有启动 二是cm客户端程序没有启动 三是防火墙问题解决方法依次排查以上三个原因解决问题。ssh远程连接服务器可知服务器是否已启动，能连接上则没问题。 cm客户端程序的启动问题排查可以参考文章: ...
2018-04-08 17:52:49
3199
原创 遇到问题--hadoop---Could not determine hostname or ip address
情况在服务器节点上启动cloudera-manager-agent时报错Could not determine hostname or ip address 如下:/usr/lib64/cmf/agent/src/cmf/agent.py:24: DeprecationWarning: the sha module is deprecated; use the hashlib mod...
2018-04-08 17:44:53
4987
原创 产品运营数据仓库埋点调研
为了解决前端埋点的准确性、及时性、开发效率等问题，业内各家公司从不同角度，提出了多种技术方案，这些方案大体上可以归为三类：第一类是代码埋点，即在需要埋点的节点调用接口直接上传埋点数据，友盟、百度统计等第三方数据统计服务商大都采用这种方案；第二类是可视化埋点，即通过可视化工具配置采集节点，在前端自动解析配置并上报埋点数据，从而实现所谓的“无痕埋点”， 代表方案是已经开源的Mixpanel；...
2018-04-03 19:50:24
1390
ssh框架搭建用到的包完整版.zip
2014-07-03
java通过class读写excel的例子
2014-07-01
整合spring和mongodb用到的包和配置文件
2014-01-21
springMVCHibernateShiroBootStrap框架
2017-11-16
cxselect选择城市
2017-09-13
ueditor1.4.3的jsp版utf-8
2017-07-03
bootstrap-fileinput-master.zip
2017-06-23
SpringMVC+Shiro+MongoDB+BootStrap基础框架
2017-05-16
SpringMVC+Shiro+MongoDB基础框架
2017-05-15
hadoop-eclipse-plugin-1.2.1.jar
2016-09-14
hadoop2.2+hbase0.96+hive0.12安装整合详细高可靠文档及经验总结.pdf
2016-06-12
springMVC+maven+hibernate框架
2015-11-22
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人