创建16x16二级hash目录

Hash目录是一种优化文件存储性能的方法。无论是Windows还是Linux，无论是NTFS还是ext4，每个目录下所能容纳的项目数是有限的。并不是不能保存，而是当项目数量过大的时候，会降低文件索引速度，所以权衡一个目录下应该保存多少文件是很必要的。保存得多了会影响性能，保存得少了会造成目录太多和空间浪费。所以当保存大批文件的时候，需要有一种算法能将文件比较均匀地“打散”在不同的子目录下以提高每一级的索引速度，这种算法就是 Hash。通常用的MD5、sha1等都可以用来做Hash目录，我的mSession里也同样使用了MD5，取得sessionID的第一位和第九位，这就构成了两级Hash路径，也就是说，系统把所有的Session文件分散到了16×16＝256个子目录下。假设Linux每个目录下保存1000个文件可以获得最好的空间性能比，那么系统在理想情况下可以同时有256000个session文件在被使用。

#!/usr/bin/env python
# coding=utf-8

import os
import sys

mlist = ['0', '1', '2', '3', '4', '5', '6', '7', '8', '9', 'a', 'b', 'c', 'd', 'e', 'f']
path = sys.argv[1:] or './'
if type(path) is list and len(path) == 1: 
    path = path[0]
elif type(path) is list and len(path) !=1:
    sys.stderr.write('  Usage: %s [path]\n' % sys.argv[0])
    sys.exit(1)
if not os.path.exists(path):
    os.makedirs(path)

for level1 in mlist:
    if not os.path.exists('%s/%s' % (path, level1)):
        os.mkdir('%s/%s' % (path, level1))
    for level2 in mlist:
        if not os.path.exists('%s/%s/%s' % (path, level1, level2)):
            os.mkdir('%s/%s/%s' % (path, level1, level2))

 

转载于:https://www.cnblogs.com/xiaoming279/p/6222003.html