python数据存取相关

采用时间来命名测试文件

from datetime import datetime
pl_path = 'D:\\pl'  # 测试总文件夹
if not (os.path.exists(pl_path)):    # 检测文件夹是否存在
    os.makedirs(pl_path)
pl_path_test = 'D:\\pl' + '\\' + datetime.now().strftime('%m%d%H%M%S')  # 某一个测试文件夹
if not (os.path.exists(pl_path_test)):    # 检测文件夹是否存在
    os.makedirs(pl_path_test)
np.savetxt(pl_path_test + '\\' + 'xxxx.csv', xxxx, delimiter=',')  # 保存数据

strftime（…）按指定样式格式化时间转换成字符串。
格式化字符说明：
％Y 年份以世纪为十进制数。
％m 月份的十进制数[01,12]。
％d 当月日为十进制数[01,31]。
％H 小时（24小时制）作为十进制数[00,23]。
％M 分钟的十进制数[00,59]。
％S 其次为十进制数[00,61]。
％z 时区与UTC的偏移。
％a 本机格式的缩写工作日名称。
％A 本机格式的完整周日名称。
％b 本机格式的缩写月份名称。
％B 本机格式的完整月份名称。
％c 本机格式的适当的日期和时间表示。
％I 小时（12小时制）作为十进制数[01,12]。
％p 对语言环境的等同无论是上午或下午。
参考网址：https://zhidao.baidu.com/question/620111531467395732.html

通过redis内存数据库实现数据交互

Redis是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库。

import redis
r = redis.Redis(host='127.0.0.1', port=6379, db=0, decode_responses=True)  # 连接redis本地客户端
xxxx= float(r.get('xxxx'))    # 读取数据类型为string，转化为float
r.set('yyyy', yyyy)    # 将数据写入redis

python常用redis命令：
string操作：
 set(name, value)：给name赋值为value ，redis.set(‘name’, ‘Bob’)
 get(name) ：返回数据库中key为name的string的value，redis.get(‘name’)

list操作：
 rpush(name, *values)：在key为name的list尾添加值为value的元素，可以传多个，redis.rpush(‘list’, ‘1’, ‘2’, ‘3’)
 lpush(name, *values):在key为name的list头添加值为value的元素，可以传多个，redis.lpush(‘list’, ‘0’，‘1’)
 llen(name):返回key为name的list的长度 ，redis.llen(‘list’)
 lrange(name, start, end) ：返回key为name的list中start至end之间的元素 ，redis.lrange(‘list’, 0, 3)
key操作：
 flushall()：删除所有数据库中的所有key，redis.flushall()
参考网址：https://www.cnblogs.com/cnkai/p/7642787.html

将redis中list数据快速转化为numpy数组

运用redis中list存储数据，list中每一个元素对应多个数据，希望将list中指定位置的元素转化为numpy数组。为了避免遍历读取造成的低效率，采用StringIO缓冲数据，运用np.loadtxt读取缓存数据，20万个数据大概6s（i5 8400，16g）。

import redis
import numpy as np
from io import StringIO
import time

ts=time.time()    # 用于计时，开始时间
r = redis.Redis(host='127.0.0.1', port=6379, db=0, decode_responses=True)  # 连接redis
r.flushall()
for i in range(20009):    # 写入数据到redis
    r.rpush('testarray', '2.333'+','+'2.335'+','+'2'+','+'2.335'+','+'2'+','+'2.335'+','+'2'+','+'2.335'+','+'2'+','+'2.335'+','+'2' )
testarray = r.lrange('testarray', 0,19999)    # 读取前20000个数据，数据类型为列表
testarray='\n'.join(testarray)    # 将列表用换行符连接为字符串，实际上与csv文件相似
xxx=StringIO(testarray)    # 将数据放入StringIO
yyy=np.loadtxt(xxx,delimiter=',')    # 读取数据
te=time.time()    # 用于计时，结束时间
t=te-ts    #总时间

将python中list浮点数据存储到redis

适用于将非字符list数据存储到redis中

import redis

r = redis.Redis(host='127.0.0.1', port=6379, db=0, decode_responses=True)  # 连接redis
a = [[1, 2, 2], [2, 3, 4], [5, 6, 3]]

for i in range(len(a)):
    r.rpush('testarray', ','.join([str(j) for j in a[i]]))