业务数据增长迅速,几近百G。该如何管理:必须有一整套的方案了。
目标:兼顾效率和安全。主要考虑的问题是效率。
1.系统软硬件解决方案
服务器:改善CPU,IO系统的效率。使用RAID1或者RAID5,防止硬件损坏带来的损失。配置合理的双机系统,群集系统。
数据库系统:企业版本的操作系统,数据库系统。
2.备份恢复机制
通过对业务数据的分析,考虑到备份还原的性能,对数据分类进行备份:
历史业务数据:切分历史数据,单独并行访问,光盘刻录备份。
当前业务数据:本地和异地的完整备份;通过使用BCP、bulk insert、bulk copy API,进行文本级别的快速异地备份;在灾难来临后,可以进行快速恢复,不至于中断业务。
以往备份方案多为推送式,建议使用拉式分布备份。
3.性能方案
必须在设计的开始就考虑性能问题。减少表的个数,尽量少使用表。
分割表格:历史查询中,很多都可以根据时间进行分割。将数据存储在不同的数据库中,或者不同的表中。分割一个超级大表,可以提高SQLSever的效率。
缓存数据:在历史表中,记录计算的列,对计算的列进行预先求值,使用空间换时间。
合理的高效的索引:分区缓存后的数据,应合理分配索引。
压力测试:对极端情况进行模拟,测试,找到影响性能的关键。
4.安全方案
详见前文http://ideage.iteye.com/blog/309036
5.专业的DBA
要使上述方案能良好执行,达到目标,必须使用专业的DBA,进行专业的管理,不断的对当前问题进行跟踪维护。这样才能稳健扎实,推陈出新,基业长青。否则,一蹴而就,必然会亡羊补牢。