上网日志留存_日志留存系统

日志留存系统

0

14

2020-04-14 15:44

使用大数据技术分析处理用户的上网记录，并将结果存入es或生成日志文件上报给工信部，公安部。也可以在系统内部进行查询用户上网记录

作品职责：1. 负责日志留存web系统的搭建和开发。

负责天津，上海，海南，湖北，安徽，宁夏, 浙江等省份前台web系统的开发。

重组各个现场的web系统，形成一套统一版本版本方便后期维护

2. 负责数据采集模块开发与维护

基于flume开发的一套采集系统，通过ftp,sftp协议采集radius,nat,dpi设备生成的用户上网日志，根据业务模块分别将数据存入到hdfs，hbase或者kafka，用于离线管理用户的上网记录，生成完整的上网日志数据

3. 负责湖北移动日志留存系统

湖北现场日志留存系统的负责人，负责处理现场提出的各种问题，协调现场驻点对系统进行扩容，升级等工作。

4. 负责海南联通日志留存系统

海南联通日志留存系统的负责人，分析客户需求，基于现有日志留存系统搭建海南联通的溯源系统，负责该系统的所有需求确认和开发维护

0

赞