基于Openresty+CEPH实现海量数据管理系统
「持续更新中,欢迎关注…」
1. 需求:
作为一家专注于三维高精度地图服务的公司,内部有海量(PB级)的原始数据、中间数据、成功数据,需要存储、管理、并定期归档。
按项目管理数据,数据分类航飞数据、控制点数据、中间数据、成果数据、其他数据。数据来源包括无人机数据、载荷数据、地面站数据、人工打点数据等。不同渠道汇集而来的数据。
采用类似百度网盘的形式,上传、下载,支持断点续传、进度跟踪。
支持细化到文件级别的权限控制,以及更多的文件(夹)属性。
2. 分析:
系统重点在于数据存储的选型,支持海量数据的存
原创
2020-05-26 11:01:47 ·
807 阅读 ·
0 评论