- 博客(7)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 spark学习笔记：blockManager原理剖析
前言从2020年3月换工作以及组织架构一系列调整后，笔者工作内容由之前的算法偏向了算法工程与大数据开发。作为一枚用Python作为主要语言的算法工程师来说，突然要开始工程开发了，pom是什么？maven是什么？打包？spark-submit脚本啥意思？redis?kafka?每天小小的脑袋大大的疑惑。有什么办法呢，只能从零开始学java，从零开始学scala，从零开始学spark。scala和java入门之后终于可以开始学习spark了。刚好最近视频教程讲到了一些进阶的东西，觉得挺有用，就从现在开始把学
2021-02-05 14:58:43
251
原创 一个例子弄懂贝叶斯-如何识别程序员？（ppt分享）
前阵子公司分享会轮到我主讲，与大家简单分享了一下贝叶斯概率/相互贝叶斯分类的相关内容，下面是我制作的PPT。原版PPT可在网盘下载：https://pan.baidu.com/s/1mzYxTjBfI5ZwD5hM20-OUg 密码:q4uu也可以在csdn上下载：https://download.csdn.net/download/KIDxu/12014475大家有什么疑问欢迎交流...
2019-12-05 10:35:06
349
原创 oracle/mysql/hive日期时间格式转换及常用计算方法对比总结
因为笔者最近写sql徘徊在mysql、oracle、hive之中，有些函数容易搞混。因此在这里作个简单的总结，加深一下自己的印象，避免每次都要百度一下。一、获取系统时间 sql语句 结果 oracle select sysdate from dual; mysql select now(), sysdate(...
2019-11-28 18:09:53
1937
原创 zara、hm、优衣库门店分布分析
前阵子恰好在逛优衣库，想起来好久没在zara，hm买衣服了。就产生了分析比较一下这几家快时尚品牌的想法，那从哪方面来分析呢？考虑其他数据获取的复杂性，本次先以线下门店分布这一个侧面来看吧！本来想把GAP也纳入其中，但是数据不太好扒，就先分析这三家。一、数据获取本次数据获取主要来源于百度百科的门店列表。优衣库：https://baike.baidu.com/item/%E4%BC%98%...
2019-11-13 16:55:46
14695
原创 python自动分箱，计算woe,iv
笔者之前用R开发评分卡时，需要进行分箱计算woe及iv值，采用的R包是smbinning,它可以自动进行分箱。近期换用python开发，也想实现自动分箱功能，找到了一个woe包，地址https://pypi.org/project/woe/，可以直接 pip install woe安装。由于此woe包官网介绍及给的例子不是很好理解，关于每个函数的使用也没有很详细的说明，经过一番仔细探究后以此...
2019-03-18 19:36:10
26848
60
原创 R源代码研究——逻辑回归logistic regression
概述R中逻辑回归用过很多次了，最近突然想对其源代码探究一二，以便更好理解该算法。此文章记录了R中逻辑回归的源代码的研究理解，如果有任何问题或错误欢迎各位读者提出。建议：此篇文章主要以介绍代码实现为重点，会穿插理论知识。建议读者可以先大致了解逻辑回归理论再读此文。R中实现逻辑回归可以通过调用glm函数实现，R中对该函数的使用方法及描述如下:glm(formula, famil...
2019-01-15 18:54:00
8210
1
原创 R语言-评分卡模型验证（ROC,KS，AIC,BIC)
本文主要记录几种常用的模型检验方法：ROC、AUC、Gini系数，KS曲线。重点在R语言的使用上，暂时不包括检验方法的原理。博主刚开始使用R语言不久，因此也借此机会整理记录自己的学习过程。如有不当，欢迎指正。
2017-05-31 14:50:05
28986
一个例子弄懂贝叶斯—如何识别程序员csdn.pptx
2019-12-05
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人