数据脱敏(八)静态脱敏

        HuggingFists低代码平台提供Mysql,Postgresql,Oracle,ClickHouse等多种数据库连接插件及配套读写算子。提供ftp,sftp,百度盘,阿里云文件系统,腾讯文件系统等多种文件系统连接插件及配套读写算子。满足用户静态脱敏场景下各种数据源要求。

静态脱敏-数据库连接器

静态脱敏-文件系统连接器

        配合算子平台提供的各种算法以及简单快捷的算子开发方式,可快速构建静态脱敏流程。

        静态脱敏一般从已存在的数据库或数据集中获取数据,经过脱敏处理后写入新的数据库或文件,构建个简单的流程如下。

静态脱敏-简单脱敏

        为了展示可以构建的流程复杂度,贴一个以前构建的数据处理流程。

        数据流程以爬取的工商数据为基础,合并从百度百科,搜狐,医院,学校,党政机关,ICP,地图信息等,中间经过数据合并,去重,调用API接口识别行业,指定ID(MD5算法)等,最终入库。

        工商数据70余w,其余数据几万到30w不等,最终20分钟处理完毕(单机模式)。

  • 17
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值