风控
文章平均质量分 79
pez1420
coding and thinking
Blog:
http://www.geek-make.com
展开
-
实时指标计算发展脉络
1、实时指标计算发展脉络指标计算本质上是对一定时间范围内的数据进行统计计算的过程,它包含了实时计算和离线计算两种计算形式。实时指标计算发展脉络如下:1.1、基于SQL/NoSQL实时指标计算实时指标计算引擎查询到历史所有时间,然后在内存中进行筛选,完成指标计算(如某设备在最近5分钟登陆次数)优点:速度快(1次查询获取所需数据),节省NoSQL内存(一份数据重复使用并进行多个指标计算),同一主属性新指标上线快(无需积累数据) 缺点:每次实时指标计算,返回大量无关数据,对网络带宽和内.原创 2021-03-09 11:29:58 · 869 阅读 · 1 评论 -
从零开始构建第一个Flink项目
1、从零开始构建第一个Flink项目1.1、构建项目Flink项目依赖于Jdk8和maven环境,我们可以通过flink官方提供的maven archetype模板快速生成第一个项目mvn archetype:generate \ -DarchetypeGroupId=org.apache.flink \ -DarchetypeArtifactId=flink-quickstart-java \ -DarchetypeVersion=1.11.0 \ -DgroupId原创 2021-02-19 16:56:17 · 472 阅读 · 0 评论 -
FLINK 窗口实现原理
FLINK 窗口原理Flink可以将数据流切分成一个个窗口,对窗口内的数据进行处理。Flink中支持多种窗口,包括:时间窗口,(session window)会话窗口,count计数窗口。Flink提供了更加简单的 .timeWindow和 .countWindow方法,用于定义时间窗口和计数窗口。1、时间窗口(Time Windows)Flink支持三种时间窗口(WindowAssigner):翻滚时间窗口(tumbling time window)滚动窗口下窗口之间不重叠,且窗口长度是原创 2020-10-14 15:15:06 · 1131 阅读 · 1 评论 -
CEP简介
1、什么是CEP企业产生大量实时业务数据(交易数据、业务行为数据),需要从大量数据中挖掘出有价值的数据,如营销活动中是否有薅羊毛造成资产损失的,如果有风险需要进一步分析进行干预。这样的场景,传统的关系型数据库无法对价值数据进行及时处理。基于此,CEP(Complex Event Processing)复杂事件处理就出现了。CEP将发生的任何事情当作一个Event,比如用户进行一次登陆/注册/支付/交易等都认为是一个事件。这些事件共同特征是数量规模大、数据能源源不断的产生且是无边界的。出现CEP的目的原创 2020-09-28 15:48:12 · 5129 阅读 · 0 评论 -
基于groovy实现的复杂布尔表达式规则引擎
groovy-bool-rulegroovy-bool-rule是一款开源的用于计算复杂布尔表达式的规则引擎,使用groovy动态脚本引擎设计与实现。github: https://github.com/JavaPentesters/groovy-bool-rule1、基于groovy实现的复杂布尔表达式规则引擎在规则引擎决策中,规则往往涉及到多个复杂布尔表达式条件的逻辑计算。条件(condition)通过或与非逻辑运算符组合成复杂的布尔表达式。这类布尔表达式有两种特点:一是条件及表达式是动态可原创 2020-08-13 18:55:28 · 2127 阅读 · 2 评论 -
有赞风控规则引擎实践(转)
引言作为一家SaaS公司,有赞向商家提供强大的微商城系统和完整的移动电商解决方案。伴随着公司产品受众不断增长的同时,灰黑产业也慢慢伸出了触角,妄图利用有赞便捷的支付、传播等能力获取非法的利益,因此如何高效的遏制灰黑产业的侵蚀,是我们面临的一个重要挑战。总的来说,目前有赞面临的主要风险类型包括:盗卡。例:盗用用户银行卡,在有赞店铺上消费欺诈。例:通过发布低价商品,诱骗消费者购买套现。例:在自己创建的店铺里进行虚假交易用以套现信用卡垃圾信息。例:发布虚假消息、色情等违规商品、页面盗账户。例:黑客用转载 2020-07-22 09:12:53 · 754 阅读 · 0 评论 -
51信用卡金融风控场景下实时计算引擎的设计与实践(转)
51信用卡金融风控场景下实时计算引擎的设计与实践1.业务背景与痛点 51信用卡是中国最大的线上信用卡管理平台, 业务涵盖个人负债管理、信用卡科技服务、线上信贷撮合及投资理财服务。目前在51人品贷借贷场景,用户需要先导入个人资料,主要包括信用卡账单、运营商、通讯录等数据,然后触发一系列风控模型计算,包括实时的授信出额、A卡信用评分准入(要求秒级完成),以及近线的反欺诈审核流程(要求30分钟内完成)。风控模型依托大量变量,这些变量从开发到上线在以前的研发流程如下:风控模型同学先基于离线数据源使用Hive转载 2020-07-21 10:35:54 · 809 阅读 · 0 评论