Superset使用Flask-Cache进行缓存,Flask-Cache支持redis,memcached,simplecache(内存),或本地文件系统)等缓存后端,如果你打算使用memcached,就需要使用memcached服务器作为后端,如果你打算使用redis,就需要安装python-redis。
superset已经帮我们把缓存配置好了,我们只需要指定缓存的类型,缓存存储的位置,缓存的过期时间,以及一些其他配置就可以了。我使用的是filesystem缓存类型,只需要配置二个文件就可以了。
flask-cache的缓存配置:http://www.pythondoc.com/flask-cache/index.html
更改superset配置文件config.py
更改flask-cache的init.py文件
1、更改superset配置文件config.py
# Setup image size default is (300, 200, True)
# IMG_SIZE = (300, 200, True)
CACHE_DEFAULT_TIMEOUT = 900#缓存默认过期时间
CACHE_CONFIG = {'CACHE_TYPE': 'filesystem'}#缓存类型为filesystem
# CORS Options
2、更改flask-cache的_init_.py文件
PATH = os.path.join(os.path.expanduser('~'), '.cache')#存放缓存的路径path=/root/.cache
config.setdefault('CACHE_DEFAULT_TIMEOUT',900)#缓存过期时间
config.setdefault('CACHE_THRESHOLD', 500)#缓存最大条数,超过该条数,会删除一些缓存
config.setdefault('CACHE_KEY_PREFIX', 'flask_cache_')
config.setdefault('CACHE_MEMCACHED_SERVERS', None)
config.setdefault('CACHE_DIR', PATH)#存放缓存的路径
config.setdefault('CACHE_OPTIONS', None)
config.setdefault('CACHE_ARGS', [])
config.setdefault('CACHE_TYPE', 'filesystem')#缓存的类型
config.setdefault('CACHE_NO_NULL_WARNING', False)
改完了就配置好了,关闭superset web服务
superset init#初始化
superset runserver#启动superset web服务
然后我们点击仪盘表,仪盘表加载完,就可以看到打印的日志信息:
但是当我点击另外的仪盘表的时候,缓存时间却不是900秒,变成3000000秒
原来是表格所在的数据库缓存时间被设置了3000000秒
我们也可以去我们存放缓存的目录下看一看缓存文件是否在里面:
那些数字加字母的文件就是我们缓存下来的文件,它超过我们设置的最大条数,就会被清理部分缓存,我们去查询仪盘表的时候,就不会每次都去查询数据库,而是读取缓存文件,直到缓存文件超过缓存时间,就会再次去查询数据库,然后再次把文件存储到/root/.cache目录下,.cache文件被隐藏起来了,ls是看不到的,ls -a -a 才能看到隐藏的文件