LR原理

1.基础理论 2.参数求解:梯度下降算法 3.防止过拟合:L1&L2正则化 4.Spark MLlib Logistic Regression源码解析 5.Spark MLlib Logistics Regression实例 -----------------...

2017-06-15 20:20:07

阅读数 660

评论数 0

Git常用命令与常识

Git SSH key 生成git config --global user.name "xxx" git config --global user.email "xxxx@126.com"ssh-keygen -t rsa -C "xxxx@12...

2017-05-26 14:58:00

阅读数 182

评论数 0

Python-pyspark中常见问题总结

在实际工作中经常遇到各种坑,特别适用pyspark进行相关挖掘探索,有许多编程上的问题,在这里逐个记录一下吧,便于以后查找…… pyspark中将dataframe注册为内存数据表时,命名中不能带点(.),否则出现无法找到数据表 如下所示,registerDataFrameAsTable将df注...

2017-05-10 09:06:59

阅读数 841

评论数 0

Python-调用Java的jar包

在实际工作中,有许多算法包是基于Java写的,而习惯了Python进行挖掘的同学会对Java比较犯怵,另一个原因就是在进行工程整合的时候,多语言在同一个工程下面管理起来也不是很方便。因此,考虑在Python环境下调用Java的jar包。1.安装# 安装JPype1 pip install JPyp...

2017-05-08 19:54:29

阅读数 438

评论数 0

推荐系统-基于PersonalRank推荐模型

时间:2017年5月 出处: 声明:版权所有,转载请联系作者并注明出在推荐系统中,用户对物品的行为数据可以转化成图的形式,具体来说,可以转化为二分图进行表示,基于图来考虑推荐问题也是一种常用的思路之一。1.PageRank模型PageRank是Google网页排序的经典算法,这里只做简要概述...

2017-05-07 12:17:35

阅读数 1062

评论数 1

推荐系统-基于userCF推荐模型

时间:2017年5月 出处: 声明:版权所有,转载请联系作者并注明出1.UserCF原理基于用户的协同过滤推荐算法先使用统计技术寻找与目标用户有相同喜好的邻居,然后根据目标用户的邻居的喜好产生目标用户的推荐。 基本原理就是利用用户访问行为的相似性来互相推荐用户可能感兴趣的资源,如下图所示:...

2017-05-05 21:11:17

阅读数 1267

评论数 0

推荐系统-基于itemCF推荐模型

时间:2017年5月 出处: 声明:版权所有,转载请联系作者并注明出虽然目前工业界很少再直接通过itemCF来进行推荐,但可以从这个算法中体会到这种集体智慧的应用。1.ItemCF原理充分利用集体智慧,即在大量的人群的行为和数据集中收集答案,以帮助我们对整个人群得到统计意义上的结论,推荐的个...

2017-05-05 21:00:12

阅读数 4498

评论数 0

推荐系统-推荐冷启动问题

1.推荐冷启动概述推荐系统通常需要根据用户的历史行为和兴趣预测用户未来的行为和兴趣,因此大量的用户行为数据就成为推荐系统的重要组成部分和先决条件。 2.推荐冷启动分类推荐冷启动问题主要分为以下3类: 2.1. 用户冷启动用户冷启动主要解决如何给新用户做个性化推荐的问题,因为新用户历史行为记录非...

2017-05-05 20:42:08

阅读数 1221

评论数 0

Anaconda安装

俗话说,工欲善其事必先利其器,在挖掘探索过程中,有个好的工具集合,会省下很多时间。基于Python的科学探索,Anaconda是一个不错的选择,它集成了python大部分的工具包和算法包,同时对于第三方的算法包安装也非常方便。1.下载Anaconda首先到官网http://continuum.io...

2017-04-28 10:54:07

阅读数 381

评论数 0

常用技术网站收集

常用技术网站收集1.国内官方技术博客 美团官方技术博客:提供了许多互联网行业常见解决方案,具有很大参考价值 奇虎360技术博客:黑产/Hacker攻防/安全等领域相关技术博客 2.国外官方技术博客 Google开发者博客:可以了解许多前言的算法和数据挖掘相关的项目 Google 开源项目风...

2017-04-28 10:00:56

阅读数 203

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭