xsc320643-CSDN博客

原创一种行业通用数据分析方法

在**行业，特别是针对的业务场景，目前没有通用的全流程数据分析方法，基本都是客户提供部分线索，通过大数据平台进行身份落查，发现嫌疑人的关联、关系、行为、轨迹及内容，大数据平台提供的数据价值，偏基础，数据量大而全，对于基础画像刻画有帮助，但对于某垂直业务领域的支撑不足，无法进行新线索发现。构建重点人信息和业务子库，利用构建的业务子库中的部分或全部，进行关系分析、时空分析和行为分析，能够对垂直业务领域进行支撑，基于实际需要进行新线索的发现。

2025-07-22 10:47:47 795

原创一种数据分级方法

摘要：数据分级是根据数据敏感程度建立差异化管控机制的管理方法。针对水务数据资源，通过识别字段内容、身份、关键词、图片、值域等敏感要素，建立动态分级规则并实施访问控制。主要分级维度包括：1）结构化数据中的敏感字段；2）用户身份敏感等级；3）非结构化数据中的敏感关键词；4）图片OCR识别的敏感信息；5）特定值域范围的敏感数据。需建立定期更新机制确保规则时效性，通过分级管控实现敏感数据防护，避免数据滥用风险。（149字）

2025-07-22 10:39:41 199

原创主数据设计思路

本文介绍了智慧水利主数据设计思路，重点阐述了数据关联方法（空间、业务、时间关联）和主题域划分（空间类、资产类、水文类、业务类）。通过识别9个核心实体对象，构建了包含维度表和事实表的数仓分层架构（DWD/DWS/DM层），并设计了水量统计等原子和复合指标，为水利行业数字化转型提供数据支撑。其他行业可参考该设计方法论进行主数据体系建设。

2025-07-22 10:25:09 181

原创数据治理效果评估

通过数据覆盖率、接口调用成功率、数据更新频率等指标进行量化评估；成果评估从评估维度、评估方法以及评估周期三个方面说明。通过专家评审、用户反馈、业务部门满意度等方式进行评估；覆盖主要业务系统、监测设备、外部数据源。初验评估（建设完成后1~3个月）终验评估（建设完成后1~3个月）阶段性成果评估（每2~3年一次）是否符合统一标准，编码是否一致。数据是否可被业务系统调用、使用。实时数据延迟、历史数据更新频率。是否建立数据安全防护机制。年度运行评估（每年一次）

2025-07-22 10:22:40 113

原创 AI在数据治理中的应用

摘要：本文提出将AI技术融入传统数据治理体系，通过智能体构建平台创建治理、管理和服务三类智能体，提升数据资源整合效率。方案采用人工智能引擎与智能通工具相结合的方式，依托AI引擎能力构建多元化治理智能体，实现更高效的数据治理流程。

2025-07-22 10:20:11 198

原创数据治理方法论

数据治理体系可从"道、法、术、器"四个维度构建。"道"指数据战略、组织机制和文化建设；"法"包含8项实施举措，从规划到运营形成完整方法论；"术"强调以元数据为核心，通过标准化流程实现数据治理闭环；"器"则依托元数据管理、质量监控等工具支撑治理活动。四个维度协同作用，共同推动企业数据治理的可持续发展。

2025-07-22 10:15:21 160

原创 SQL小结

之前项目中选择一个使用了where in 的条件，但是where in 的 list 如果太大，就会导致查询异常很慢，通常如果list在1000以内，都能在100ms内完成检索，但是list大于5000的时候，基本上查询时间接近1s秒钟。4、针对3中形成的mac数据集合，首先进行数据去重，再次分别对N组mac数据（譬如N1{mac1_1，mac1_2，mac2_1,mac2_2...},...共计N组），采取数据聚合，获取每组mac出现次数，根据次数采取降序排列；//这里是否会首先产生笛卡尔积，影响性能？

2023-07-27 16:20:41 124 1

原创数据咨询规划

数字化转型本质：数字化转型的本质是数字化、智能化有机结合，在以劳动、资本等传统要素驱动的经典增长模型中进一步引入新要素，形成以新型基础设施为基础，新型技术，数据要素为驱动的新增长模式。《国民经济和社会发展第十四个五年规划和2035年远景目标纲要》专篇提出“加快数字化发展，建设数字中国”，并系统部署激活数据要素潜能，加快建设数字经济、数字社会、数字政府，以数字化专项整体驱动生产方式、生活方式和治理方式变革。数据标准体系不完善，数据质量较差，数据开发利用能力和数据治理能力不足，数据要素作用尚未充分发挥；

2023-07-26 10:49:47 130 1

原创数据治理流程总结

数据治理主流程介绍

2023-07-26 10:44:31 961 1

原创关于虚函数表的小结

当类中如果存在虚函数，那么就会在类对象地址的开始位置增加4字节用于存储指向虚函数表的地址，例如：class base{public:void func() {}//virtual void f() {cout};void main(){base b;cout//cout}关于虚函数表可以获取对应指向虚函数表的地址：in

2013-08-16 11:45:16 450