提升磁盘性能,实现视频服务器(大文件场景)高IO\高并发访问
不怕冷的小熊
你猜!!!!!!
骑行拉萨 的软件工程师!~
潜心学习技术,等待飞翔!
展开
-
1、ext4 我的大数据_探索(1)!
背景: 在 Linux 早期,磁盘的大小还是MB级的,文件系统的块大小也只是 1KB 到 4KB。而在本文写作的时候,TB级的硬盘虽然在最近涨了一点价,但无碍一个事实——硬盘已经变大太多了,存储在上面的文件也是如此。但 ext4 文件系统仍然以 4KB 为单位来管理数据。其结果就是要管理的块数太多了,相关联的位图大小必然随之增长,管理这些块的开销也就极具增大。在内核中增加文原创 2012-12-07 11:37:40 · 2023 阅读 · 1 评论 -
2、ext4 我的大数据_探索(2)!
原系统:centos6.3 内核2.6.32 更新到3.6.9! 不说废话,直接走个: 1、下载linux-3.6.9内核包 百度,解压进入 2、内核配置(不要抄袭网络上的使用勾选,勾选会报错。涉及部分编译成模块)# make mrproper #清除环境变量,即清除配置文件# make menuconfig #在菜单模式下选择原创 2012-12-07 16:02:00 · 1284 阅读 · 1 评论 -
3、ext4 我的大数据_探索(3)!
废话: 我在干什么?调整完raid用iometer和程序测得最高性能后,开始选择调配合适的文件系统。希望达到比较好的性能,目前关注ext4,xfs;正题:命令: mke4fs -N 1000000 -I 128 -O ^has_journal,extent,meta_bg,flex_bg /dev/sddmke2fs -O journal_de原创 2012-12-10 11:02:56 · 1873 阅读 · 1 评论 -
XFS 文件系统 mount 参数翻译
安装选项XFS: allocsize =大小 设置缓冲I / O端的文件预分配的大小时,延迟分配写出时(默认大小为 64KiB)。此选项的页面大小(通常4KiB)到1GiB,包括有效值,功率为2的 增量。 attr2 | noattr2 该选项翻译 2012-12-11 19:55:14 · 11592 阅读 · 2 评论 -
EXT4文件系统 mount 参数翻译
挂载选项对ext4: ext4文件系统是一个先进水平的ext3文件系统,其中包括了可扩展性和可靠性 支持大型文件系统的增强。 选项journal_dev, noload, data, commit, orlov, oldalloc, [no]user_xattr [no]acl, bsddf, minixdf, debug, errors翻译 2012-12-11 20:26:49 · 19216 阅读 · 8 评论 -
IOmeter 在Linux x64或高级版本下安装
IOMeterIOMeter是Intel公司开发的一个专门测试系统I/O(包括磁盘、网络等)速度的测试软件。它的基本原理是模式实际应用环境来测试硬盘的性能。 昨天在Centos 6.3(内核升级3.2.2)下编译Iometer 2007时出现错误:[root@-host2 src]# make -f Makefile-Linux.x86_64 all/us原创 2012-12-12 08:51:31 · 3844 阅读 · 3 评论 -
4、ext4 我的大数据_探索(4)!
好久没有发布我小小的探索了,但是我的探索并没有停止。 这篇文章主要介绍一下为了Ext4文件系统新特性而环境的搭建的过程,还有Ext4的新特性使用方法还有个人理解。 1、Ext4文件系统新特性而环境的搭建 (1)Linux 3.2.2 下载地址:原创 2012-12-18 18:53:33 · 1813 阅读 · 1 评论 -
从HDFS看分布式文件系统的设计需求
从HDFS看分布式文件系统的设计需求分布式文件系统的设计需求大概是这么几个:透明性、并发控制、可伸缩性、容错以及安全需求等。我想试试从这几个角度去观察HDFS的设计和实现,可以更清楚地看出HDFS的应用场景和设计理念。 首先是透明性,如果按照开放分布式处理的标准确定就有8种透明性:访问的透明性、位置的透明性、并发透明性、复制透明性、故障透明性、移动透明性、性能透明性和伸缩透明性。转载 2012-12-19 15:52:07 · 919 阅读 · 0 评论 -
Gxt 3.0 修改文本框 为空的 提示
TextField channelName = new TextField();// EmptyValidator v = new EmptyValidator();// v.setMessages(new EmptyMessages() {// @Override// public String blankText() {// return "此项不能为空,原创 2013-07-25 11:56:11 · 1108 阅读 · 1 评论