2019年03月_路易三十六

11月 10月 09月 08月 06月 05月 04月 03月 02月 01月

原创 Power BI（十一）Power Pivot常用DAX函数

Power BI（十一）Power Pivot常用DAX函数主要提及以下的函数，用法其实和平常的Excel公式差不多数据的提取和合并函数数据的格式转换函数聚合函数逻辑函数信息函数数学函数文本函数日期和时间函数转换函数关系函数数据的提取和合并函数数据的格式转换函数格式规范说明 ...

2019-03-31 23:30:41 11962 2

原创 Power BI（十）Power pivot必须掌握的知识

Power BI（十）Power pivot必须掌握的知识本章主要讲解Excel里面如何加载进Power pivot Power Pivot加载数据 Power Pivot进行数据处理初始DAX 计算列和度量值 Power Pivot进行关系建模 KPIExcel里面如何加载进Power pivot首先打开Excel，点击文件--选项--加载项--COM加载项--...

2019-03-31 17:37:25 9354

原创 Office 365的Excel的版本里面找不到Power Pivot

power pivot只有几个版本可以用：1、office2016专业版，就是试用时候，非365用户选择的那个试用版；2、购买的独立excel；3、企业版 office 365 pro plus；解决办法：pivot属于高级功能，家庭版里没有。重装一个正常版本的吧（https://jingyan.baidu.com/article/6079ad0ebdf6be28ff86...

2019-03-28 10:08:07 10594 1

原创 Power BI（九）Power Pivot简介以及和Power BI系列组件的关系

Power Pivot简介以及和Power BI系列组件的关系Power Pivot简介为什么要学习Power Pivot？Power Pivot是微软自助式商业智能（BI) – Power BI 系列工具的核心组件。以免费加载项的形式，预装在Excel 2013及 2016版本中 (Excel 2010 需要单独安装），用户只需激活便可以使用。通过学习使用Power Pivot...

2019-03-28 09:39:16 5145

原创 Power BI（八）Power Query排除错误

Power Query排除错误如下图数据表中自己手动添加错误进行错误排查检查，介绍一种方法，使用M函数try还是把数据加载进查询编辑器展开关闭并上载有错误错误在Excel都显示为空修改回来，刷新.数据无误排除错误成功...

2019-03-25 17:33:22 9311 1

原创 Power BI（七）Power Query解决工作中常见的问题

Power Query解决工作中常见的问题学习好Power Query真的对工作非常重要，让非常复杂的问题，在可视化界面直接傻瓜式点击实现我们的想法，不再需要写一些复杂的函数和VBA编程本遍文章主要讲解Power Query实现中国式排名 Power Query实现分组中国式排名 Power Query生成笛卡尔积表 Power Query实现多行相同属性合并Power ...

2019-03-25 16:57:02 12487

原创 Power BI（六）Power Query进行多文件汇总

Power Query进行多文件汇总本遍文章主要讲解以下内容从Excel工作簿汇总多个表格（sheet）的文件从文件夹汇总多个Excel文件从文件夹汇总多个CSV文件从Excel工作簿汇总多个表格（Sheet）的文件如下图，有首先我们新建一个Excel文件（把文件读取进来）随便选择一个省份，编辑把步骤源（Source）之外的步骤剔除把多...

2019-03-25 14:51:28 6939 5

原创 Power BI（五）Power Query数据的组合（追加查询、合并查询、合并查询里的联接种类）

Power Query数据的组合（追加查询、合并查询）本篇文章主要讲解以下知识点：Power Query追加查询 Power Query合并查询合并查询里的联接种类 Power Query追加查询（多张格式一样的表格汇总）如下图，我们汇总三张表格，其中三张表格有相同名称的列名加载进查询编辑器汇总完毕，修改表一名称为汇总加载上传即可...

2019-03-25 10:36:12 21934 2

转载年化收益率与年利率

年化收益率是把当前收益率（日收益率、周收益率、月收益率）换算成年收益率来计算的，是一种理论收益率，并不是真正的已取得的收益率。例如日收益率是万分之一，则年化收益率是3.65﹪（平年是365天）。因为年化收益率是变动的，所以年收益率不一定和年化收益率相同。年利率，指一年的存款或贷款利率。所谓年利率，是"年利息率"的简称，就是指一年期限的利息额与存款本金或贷款本金的比率。年化收益率是：年收益÷...

2019-03-24 22:52:16 3171

原创 Power BI（四）Power Query分组依据、添加列、日期和时间的整理、数学运算

Power Query分组依据、添加列、日期和时间的整理、数学运算本章博客主要讲解以下知识点：分组依据添加列日期和时间的整理数学运算分组依据有以下的数据，相统计每个客户的金额汇总，虽然excel透视表也可以做但是手动的还是加载进查询编辑器统计客户每个订单购买的金额汇总每一个订单编号有多少条记录为了不破坏原始数据，...

2019-03-23 19:54:31 20758

原创 Power BI（三）Power Query数据格式的转换、拆分合并提取、删除重复项、删除错误、转置与反转、透视和逆透视

Power BI（三）Power Query知识点本篇博客主要讲解Power Query以下知识点：删除重复项数据格式的转换数据的拆分合并提取删除错误转置与反转透视和逆透视（二维表与一维表的转换）数据格式的转换如下图，我们有一组数据，但是发现其格式很不符合我们建模数据的需求，需要进行处理（比如姓名列有回车、空格多余字符、英语名字中间间隔两个空格、Last n...

2019-03-23 16:18:25 18632 4

原创 Power BI（二）一个案件快速了解Power Query

Power BI（二）一个案件快速了解Power Query首先我们有两个店的销售数据（一店和二店），我们要做的工作是把两个表格进行合并（工作中可能我们会遇到更多表格合并为一个表格），利用Power Query怎么解决的呢？两个表格展示效果如下：具体操作如下：首先新建立一个Excel表格把数据加载进查新编辑器选择编辑数据进入到查询编辑器...

2019-03-21 19:03:12 2285

原创 Power BI（一）Power Query简介

Power Query简介Power Query作用在介绍Power Query之前，作为一个Excel用户，你是如何完成”将数据转换到”的任务的呢。回想一下，你会不会如此陷入如此困境，有很多种格式数据源的情况下，需要一个一个数据源（数据库、json、Hdfs、文本、csv等）去处理，让其格式统一并合并分析处理，但是Power Query可以帮我们解决这个问题如下所示：微软P...

2019-03-21 15:40:34 16680

转载纳税信用等级

纳税信用等级转载自https://baijiahao.baidu.com/s?id=1595999334868014315&wfr=spider&for=pc什么时候评价？评价期间如何规定？《纳税信用管理办法（试行）》规定：税务机关每年4月确定上一年度纳税信用评价结果，并为纳税人提供自我查询服务（电子税务局）。评价期间为评价公立年度，即1月1日至12月31日。201...

2019-03-20 15:52:16 937

原创（信贷风控十六）组合评分卡模型

组合评分卡模型本篇文章主要总结以下内容组合模型的概念常见结构的评分组合模型单一模型选择需要什么条件串行结构组合模型实例并行结构组合模型实例组合模型的概念常见结构的评分组合模型串行结构组合模型实例需要注意的是，一般工作中会把GBDT、神经网络、深度学习排在前面（因为精度高），逻辑回归、决策树放在后面并行结构组合模型实例...

2019-03-18 22:39:28 2163

转载 python中DictVectorizer（特征向量化）的使用说明

python独热编码实现方式博客转载自https://blog.csdn.net/Jon_Sheng/article/details/79693971 方法一 from sklearn.feature_extraction import DictVectorizer dict_vec = DictVectorizer(sparse=False)# #sparse=False意...

2019-03-18 14:34:38 3798

原创（信贷风控十五）评分卡分数切分、授信额度与利率定价

（十五）评分卡分数切分、授信额度与利率定价文章主要内容分数如何切分才能达到最优的效果如何利用评分卡分数来制定授信额度评分卡分数如何影响产品利率定价如何计算评分卡下每个特征对应的得分下图是通过模型构建得出客户所对应的评分卡分数分数如何切分才能达到最优的效果使用卡方分箱的方法，至于把评分卡分数分成几个箱，看实际场景而定如何利用评分卡分数来制定授...

2019-03-17 14:05:54 8503 9

原创极大似然估计与损失函数是如何分别求参数的

极大似然估计与损失函数是如何分别求参数的极大似然估计参数估计，即估计模型的参数：给定模型p(x|Ɵ)和数据D，选择与数据最匹配的参数Ɵ。极大似然估计用大白话来说是找出一个合适的参数使得似然函数最大似然函数是什么：似然（likelihood，可能性的意思），描述的是事件发生可能性的大小。似然函数的定义：设数据D=X1,…,XN为独立同分布（IID），其概率密度函数（...

2019-03-15 15:55:02 2193

转载甲方和乙方怎么区别？

甲方和乙方怎么区别？甲方一般是指提出目标的一方，在合同的拟定过程中主要是提出要实现什么目标，乙方一般是指完成目标，在合同中主要是如何确保实现，并根据情况获取收益的一方。一般而言，付款的是甲方，乙方提供产品或服务。甲方：项目实施时是大爷，项目交付以后需要合同之外的维护时是孙子乙方：相反转载自https://www.zhihu.com/question/20146916...

2019-03-15 11:52:20 15437

转载拒绝推断

拒绝推断转载自微信号bigdatafengkong转载连接：https://mp.weixin.qq.com/s/RnQXPUBJe8-NUvtPDho0vw在做申请评分卡时，所使用的数据是审批接受的已知好坏状态的样本数据，然后用此评分对新的申请进行评估，这里会存在所谓"样本偏差"的问题，因为接受样本只是申请样本的一部分，此评分没有考虑拒绝样本的信息，在对总体申请进行评估时会有偏差。如...

2019-03-14 18:15:38 2605

转载 model.fit() fit函数参数说明

model.fit() fit函数参数说明fit( x, y, batch_size=32, epochs=10, verbose=1, callbacks=None,validation_split=0.0, validation_data=None, shuffle=True, class_weight=None, sample_weight=None, initial_epoch=...

2019-03-14 16:35:54 39382 2

原创在Windows的anaconda上安装tensorflow

在Windows的anaconda上安装tensorflow在编译python程序时候，发现程序报ModuleNotFoundError: No module named 'tensorflow'的错误原因是我们没有安装tensorflow的包首先前提是在自己电脑已经安装了anaconda1：打开Anaconda Prompt　　在安装之前，说几个关于conda的小命令　　...

2019-03-13 17:25:50 665

原创（信贷风控十四）深度神经网络模型用于评分卡模型（理论）

（十四）深度神经网络模型用于评分卡模型（理论）本篇文章主要讲解以下两个内容神经网络的概述深度神经网络模型用于违约概率预测（代码实现看下一篇博客）神经网络的概述什么是人工神经网络神经网络算法的核心：计算的过程、连接的结构、评估的工作、纠错的反馈、疯狂培训（不断运行）人工神经网络的类型神经元的特征：并非简单的相加，有相应的输出函数学习规则：使得模型输出与标签尽...

2019-03-13 14:35:19 4590 1

原创 Andrew Gasparovic2017年谷歌开发者大会（机器学习与TensorFlow）视频连接

Andrew Gasparovic2017年谷歌开发者大会（机器学习与TensorFlow）谷歌大神带你十分钟看懂TensorFlowTensorFlow 是世界上最受欢迎的开源机器学习框架，它具有快速、灵活并适合产品级大规模应用等特点，让每个开发者和研究者都能方便地使用人工智能来解决多样化的挑战。今天DT君给大家推荐的这个视频（及文字实录），是2017年谷歌开发者大会欧洲站上，谷歌研究...

2019-03-12 17:14:20 275

原创（信贷风控十三）GBDT模型用于申请评分卡模型python实现（代码实现）

（十三）GBDT模型用于评分卡模型python实现前一篇我们已经介绍了GBDT模型用于评分卡模型的原理（理论）https://blog.csdn.net/LuYi_WeiLin/article/details/88314746这篇博客附上GBDT模型用于评分卡模型python实现的代码（之前已经有一篇运用逻辑回归实现申请评分卡的文章https://blog.csdn.net/LuY...

2019-03-11 17:40:31 5225 5

转载极大似然估计

极大似然估计博客转载自：https://blog.csdn.net/raintungl/article/details/78188182本篇博客主要讲解以下内容：一、参数估计二、极大释然估计1．似然函数2．极大似然估计（MLE）3．log似然函数4．损失函数5．求极大似然估计的一般步骤三、常见分布的参数估计1．高斯分布2．Bernoulli分布3．二项分布（Bi...

2019-03-11 16:18:51 2655

转载 Vintage、滚动率、迁移率的应用

Vintage、滚动率、迁移率的应用转载自微信号bigdatafengkong转载连接：https://mp.weixin.qq.com/s/KefG_8krBBaFl0LCi2L2WA一、VintageVintage源于葡萄酒酿造，葡萄酒的品质会因葡萄生长的年份不同、气候不同而不同。Vintage分析是指评估不同年份的葡萄酒的品质随着窖藏时间的推移而发生的变化，并且窖藏一定年份后...

2019-03-10 16:55:26 1619 1

原创（信贷风控十二）GBDT模型用于评分卡模型（理论）

GBDT模型用于评分卡模型本文主要总结以下内容：GBDT模型基本理论介绍 GBDT模型如何调参数 GBDT模型对样本违约概率进行估计（GBDT模型用于评分卡python代码实现请看下一篇博客） GBDT模型挑选变量重要性 GBDT模型如何进行变量的衍生GBDT模型基本理论介绍GBDT(Gradient Boosting Decision Tree) 又叫 MART（Mu...

2019-03-08 14:33:46 4984 1

原创（信贷风控十一）随机森林在催收评分卡还款率模型的应用（python代码实现）

（十一）随机森林在催收评分卡还款率模型的应用（python代码实现）催收评分卡和申请评分卡和行为评分卡不太一样，一般申请评分卡和行为评分卡使用一个模型就可以了，但是催收评分卡由三个模型构成：（不同的模型功能目的不一样，其中失联预测模型是比较重要的）还款率模型账龄滚动模型失联预测模型这篇博客以还款率模型进行讲解，要讲解还款率模型，我们首先要了解一下随机森林模型基于回归树的随...

2019-03-06 14:36:21 6455 3

转载分类树和回归树的区别

分类树和回归树的区别分类树以C4.5分类树为例，C4.5分类树在每次分枝时，是穷举每一个feature的每一个阈值，找到使得按照feature<=阈值，和feature>阈值分成的两个分枝的熵最大的阈值(熵最大的概念可理解成尽可能每个分枝的男女比例都远离1:1)，按照该标准分枝得到两个新节点，用同样方法继续分枝直到所有人都被分入性别唯一的叶子节点，或达到预设的终止条件，若最终叶...

2019-03-04 10:08:29 2198

转载信用风险计量模型汇总

信用风险计量模型汇总信用风险计量模型的基本技术路线是，利用借款者的特征指标和宏观经济变量，收集这些特征指标和宏观变量的历史数据，并将其应用于预测违约借款人与履约借款人。预测模型旨在评估未知借款者将来是否还款的信用价值，将潜在借款者的特征值输入模型，从模型中输出信用价值评估，从而可对潜在借款人进行信用评估。一般的评级方法可以分为专家经验判断法、参数模型和非参数模型。所谓的专家经验判断，就是相...

2019-03-01 15:29:29 2650

转载信用风险计量模型简述

信用风险计量技术简述1.古典信用风险计量模型主观判断分析方法、财务比率评分方法、多变量信用风险判别方法（其中最有效，包括线性概率模型、Logit模型、Porbit模型、判别分析模型）评级方法：将信用状况分成不同等级，分别使用不同的信用政策。评分方法：对影响信用的不同因素确定不同的分值和权重，汇总计算出对应的信用评分。作为给予企业信用额度或贷款额度的依据。Z评分模型、ZETA评分模型。专...

2019-03-01 15:10:24 2774