- 博客(15)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 openstack部署概要
在openstack官方看了部署手册：http://docs.openstack.org/juno/install-guide/install/yum/content/花了三天时间在公司的刀片上搭了个环境，系统是centos7，部署了controller、compute、network、block storage4个节点，顺利导入windows、linux虚机镜像，这里就把部署中的一些重要步...
2015-04-16 09:37:45
319
原创 库结构优化
转自：http://wentao365.iteye.com/blog/17406911数据切分 "Shard" 这个词英文的意思是"碎片"，而作为数据库相关的技术用语，似乎最早见于大型多人在线角色扮演游戏中。"Sharding" 姑且称之为"分片"。Sharding 不是一门新技术，而是一个相对简朴的软件理念。众所周知，MySQL 5 之后才有了数据表分区功能，那么在此之前，很多 MySQL...
2015-04-16 09:32:25
125
原创 spring小记
看了马士兵讲的spring实现原理视频，代码部分就不列出来了，只是表达下看完视频后的想法，对一些模糊的概念进行总结 一、概念 1.Dependency Injection:依赖注入 完成bean与bean之间的依赖关系，通过配置文件中bean id定义的容器，依赖容器中的指定对象完成创建实例2.Inverse of Control:控制反转 ...
2015-04-07 21:17:39
124
原创 sql小结
SQL基础语法: http://www.w3school.com.cn/sql建立索引提高查询效率的原则，一般是给在where中经常查询的关键字段加关键字：select、distinct（不重复出现的值）、where、order by(排序DESC降序)、insert、update、deleteunion(多个表联合、作用类似合并)：联合表的操作字段必须类型匹配。limi...
2015-04-07 20:54:43
102
原创 classLoader和内存分析
类的初始化和对象实例化反射机制的目的就是通过类加载获取到字节码文件（运行中的类）的内部数据结构，再对这些获取的信息进行操作，如获取类对象、创建对象实例、获取方法名、调用方法、获取方法参数类型和方法返回类型等。 理解反射前要先了解类的加载及JVM内部的存储机制 类加载时通过 1. 加载 ->2.链接 验证（...
2015-04-02 21:36:58
261
原创 HDFS命令汇总
引言：我们维护hadoop系统的时候，必不可少需要对HDFS分布式文件系统做操作，例如拷贝一个文件/目录，查看HDFS文件系统目录下的内容，删除 HDFS文件系统中的内容（文件/目录），还有HDFS管理信息，单独启动停止 namenode datanode jobtracker tasktracker等等一系列的操作。大家跟着做一遍呢！就会对HDFS的体系架 构有更加深入的理解，不多说我...
2015-04-02 21:34:36
197
原创 spark入门
Using a Mesos Master URLThe Master URLs for Mesos are in the form mesos://host:5050 for a single-master Mesos cluster, ormesos://zk://host:2181 for a multi-master Mesos cluster using ZooKeeper....
2015-04-02 21:32:54
121
原创 hbase迁移
备份namenode上的元数据持久状态文件，将写入元数据的写入操作备份到一台远程挂在的NFS文件上。为了确保完全恢复，平时需要通过一台物理机对namenode定期镜像，所有nodename的操作都在辅助机上重复，但由于重复仍是滞后于主机，所以需要配合NFS的元数据来完成完全备份。./hadoop distcp hdfs://192.168.0.51:9000/hbase hdfs://1...
2015-04-02 21:26:25
127
原创 Spark群集——Mesosphere方案
#安装mesosphere reposudo rpm -Uvh http://repos.mesosphere.io/el/7/noarch/RPMS/mesosphere-el-repo-7-1.noarch.rpm #下载apache mesoswget http://downloads.mesosphere.io/master/centos/7/mesos-0.2...
2015-03-27 13:00:27
737
原创 部署hadoop
大数据这两年也是大热，自己虽然在工作方面没什么交集，但也通过公司的一些资源对这方面进行了了解，包括hadoop、spark的部署及简单用例，以下部分内容都是通过公司服务器实现了操作，部署hadoop的大致流程有下面几个步骤：1.安装系统（centos 7.0）2.安装ssh无密钥登录服务，实现master控制其他slave无需口令3.安装jdk4.安装配置hadoop5....
2015-03-27 11:41:48
111
原创 redhat 6.5安装oracle
Red hat 6.5安装oracle10g、11g文档第一步、软件准备1. oracle准备软件压缩包：database_forLiunx.zip2. 操作系统安装的组件如下：X窗口系统、GNOME桌面环境、编辑器、开发工具、老的软件开发。其余都不需要安装第二步、环境准备1、安装以下三个RPMs补丁包，安装顺序如下：（这三个包在“补丁包”文件夹中）rpm -ivh compat-libc...
2015-03-27 11:30:41
248
原创 windows、linux做nat映射
公司需求要在内网的两台windows服务器做公网nat映射，并且定制端口，由于本人还是对linux熟悉点，就还是以一台linux服务器做转发完成。参考网站：http://www.cnblogs.com/JemBai/archive/2009/03/19/1416364.htmlhttp://wqmsl.blog.51cto.com/847418/404283http://www.chinai...
2015-03-27 11:26:37
599
原创 Linux下samba、TFTP、NFS配置
把之前遇到的linux配置问题做了个简单汇总，方便自己以后快速搭环境使用 1.redhat/centos基本网络配置# vi /etc/resolv.conf 修改以下内容 nameserver 8.8.8.8#google域名服务器 nameserver 8.8.4.4#google域名服务器 2、CentOS 修改网关 修改对应网卡的网关的配置文件[root@...
2015-03-27 11:23:16
190
原创 国有企业的生态圈
本人分享下在京的国有铁路企业工作感悟，招聘进来时是担任C/C++研发工程师一职，工作半年后感觉这种体系内企业对研发要求不高，在公司内部转型做项目管理和产品售前。国有企业的高层都是主要负责完成行政任务，即领导说了话不管正确与否都要去做，而且是不计成本的做。中层是工作实际推动者，负责把工作落实到各个底层员工。其实整个公司管理都是脱节的，所谓的领导甚至不知道哪些项目赚钱，哪些项目赔钱，也许在他们看来...
2014-12-29 10:53:33
410
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人