AI+ML+DL+BlockChain
专注_每天进步一点点
成为健康快乐长寿有价值的人,拥有明亮灵动的眼睛,平静谦和的微笑。
展开
-
姚期智亲任主编,正规军的高中AI教材来了
导读:清华大学近日宣布,专为高中生打造的 AI 教材——《人工智能(高中版)》将于 2020 年 9 月正式出版。该教材由姚期智担任主编,并由清华「姚班」、「智班」的师资组成强大的编委团队。而教材的内容,是结合了这些专家的独特见解以及多年的教育经验撰写而成,这部教材究竟会带来什么样的影响呢?2020 年 1 月 7 日,《人工智能(高中版)》的出版签约仪式在清华举行,姚期智担任此书主编,他率领...转载 2020-01-21 15:12:51 · 603 阅读 · 0 评论 -
从原理到落地,七大维度读懂协同过滤推荐算法
2019-08-09 19:52作者丨gongyouliu来源 | 大数据与人工智能导语:本文会从协同过滤思想简介、协同过滤算法原理介绍、离线协同过滤算法的工程实现、近实时协同过滤算法的工程实现、协同过滤算法应用场景、协同过滤算法的优缺点、协同过滤算法落地需要关注的几个问题等7个方面来讲述。希望读者读完本文,可以很好地理解协同过滤的思路、算法原理、工程实现方案,并且具备基于本文的...转载 2020-01-21 15:10:22 · 1328 阅读 · 0 评论 -
从原理到落地,七大维度读懂协同过滤推荐算法
转载 AI科技大本营 最后发布于2019-08-09 19:52:18 阅读数 195 收藏 展开作者丨gongyouliu来源 | 大数据与人工智能导语:本文会从协同过滤思想简介、协同过滤算法原理介绍、离线协同过滤算法的工程实现、近实时协同过滤算法的工程实现、协同过滤算法应用场景、协同过滤算法的优缺点、协同过滤算法落地需要关注的几个问题等7个方面来讲述。希望读者读完...转载 2020-01-21 15:01:19 · 1159 阅读 · 0 评论 -
AI_03_梯度下降和过拟合和归一化_02_推导线性回归损失函数导函数_以及代码实现批量梯度下降
SGD 随机梯度下降BGD 批量梯度下降原创 2019-05-07 21:40:36 · 140 阅读 · 0 评论 -
AI_13_卷积神经网络、CNN识别图片_02_三通道卷积_池化层的意思
原创 2019-05-24 14:48:01 · 209 阅读 · 0 评论 -
AI_13_卷积神经网络、CNN识别图片_03_CNN架构图LeNet5架构
.原创 2019-05-24 14:49:21 · 176 阅读 · 0 评论 -
AI_04_逻辑回归详解和应用_02_多项式回归代码_保险案例数据说明
csv是按照逗号隔开的文本文件。原创 2019-05-11 12:49:43 · 195 阅读 · 0 评论 -
AI_04_逻辑回归详解和应用_03_相关系数_逻辑回归介绍
过拟合就是训练出来的模型在训练集上表现很好,但是在测试集上表现较差的一种现象!过度的拟合了训练数据,而没有考虑到泛化能力。...原创 2019-05-11 22:48:25 · 484 阅读 · 0 评论 -
AI_04_逻辑回归详解和应用_04_逻辑回归的损失函数_交叉熵_逻辑回归对比多元线性回归
多元线性回归是做预测的,逻辑回归是做分类的。某件事发生的可能性越大,熵越小。原创 2019-05-12 20:46:53 · 402 阅读 · 0 评论 -
AI_07_分类评估、聚类_01_评估指标
.原创 2019-05-22 09:09:08 · 142 阅读 · 0 评论 -
AI_13_卷积神经网络、CNN识别图片_01_图释对比原始图片和卷积FeatureMap
.卷积的应用,tensorflow原创 2019-05-24 14:46:54 · 226 阅读 · 0 评论 -
AI_13_卷积神经网络、CNN识别图片_01_卷积1个通道的计算__垂直水平fiter图片
原创 2019-05-24 14:44:53 · 142 阅读 · 0 评论 -
AI_03_梯度下降和过拟合和归一化_03_随机梯度下降_及代码实现_mini-batchGD_调整学习率
–8分钟原创 2019-05-07 21:51:21 · 183 阅读 · 0 评论 -
AI_06_多分类、决策树分类、随机森林分类_06_决策树_随机森林_sklearn代码调用
1、单根决策树的使用2、随机森林的使用特征的重要性,很多公司在做特征的抽取会用到有关树的相关算法!特征的重要性,很多公司在做特征的抽取会用到有关树的相关算法!对推荐系统也可以优化的地方bagging,并行的概念随机森林既可以做分类,也可以做回归!!!...原创 2019-05-16 08:14:19 · 257 阅读 · 0 评论 -
AI_03_梯度下降和过拟合和归一化_04_梯度下降做归一化的必要性
。。。打不开Q:为什么要做归一化?A:只要是基于梯度下降求解最优解,都需要归一化,目的是各个维度梯度可以同时收敛!原创 2019-05-10 23:17:59 · 148 阅读 · 0 评论 -
AI_03_梯度下降和过拟合和归一化_05_最大值最小值归一化_sklearn官网介绍_防止过拟合W越少越小
当下做人工智能的三大方向:(1)推荐,机器学习(2)图像识别,医疗图像识别,验证码的识别等,用深度学习CNN(3)NLP,自然语言,情感分析,文本分类,自动聊天机器人,智能客服,RNN+机器学习(4)其他,股票预测,房价预测,客户的预测,文本查重,很多数据挖掘的机器学习是人工智能的核心,深度学习也是基于机器学习的!!!做机器学习要防止过拟合!!!...原创 2019-05-10 23:33:35 · 549 阅读 · 0 评论 -
AI_03_梯度下降和过拟合和归一化_06_过拟合的总结
原创 2019-05-11 00:16:25 · 144 阅读 · 0 评论 -
AI_03_梯度下降和过拟合和归一化_07_岭回归_以及代码调用
做机器学习的时候,会把数据分为训练数据(训练模型)和测试数据(测试模型)。归一化是对测试数据X进行处理,正则化是调整我们的损失函数(loss function)归一化是预处理阶段做的做机器学习/人工智能跟做web开发不一样,甚至跟大数据开发也不一样!!!代码量会越来越少!!!学人工智能是不是要恶补数学呢?用到时去看看就可以,毕竟你是去做工程类的,不是像一些个博士样的去研...原创 2019-05-11 00:59:34 · 184 阅读 · 0 评论 -
AI_04_逻辑回归详解和应用_01_Lasso_ElasticNet_PolynomialFeatures
昨天聊到多元线性回归,聊到Ridge Regressionregularizer 正则化,防止过拟合问题:(1)多元线性回归的损失函数/目标函数是怎么来的?一步步推倒。。。(2)Ridge Regression的损失函数是什么,有个带α 的提高泛化能力的项(3)LassoRegression的损失函数是什么敲黑板:其实在工作过程中是不需要自己实现Ridge Regress...原创 2019-05-11 10:49:26 · 225 阅读 · 0 评论 -
AI_12_TensorBoard可视化_01_TensorBoard代码
one_hot=true 是把分类号变成01编码代码略过,别看了!!!傻傻讲不清!!!原创 2019-05-24 14:42:34 · 172 阅读 · 0 评论 -
AI_12_TensorBoard可视化_02_TensorBoard启动以及页面
写Tensorflow代码,把数据存储到一个文件中,然后读取文件中的内容,进行web展示!!!原创 2019-05-24 14:43:17 · 139 阅读 · 0 评论 -
AI_07_分类评估、聚类_02_监督学习评估指标代码调用
.原创 2019-05-22 09:09:18 · 131 阅读 · 0 评论 -
AI_07_分类评估、聚类_03_相似度测量
距离越近,相似度越高!!!二维空间,两点之间的距离;三维空间两点之间的距离;两个集合的Jaccard系数。。。二维空间,两点之间的距离;三维空间两点之间的距离;两个集合的Jaccard系数。。。网页去重、文本差重复!!!余弦相似度!!!熵,信息量,相对熵,交叉熵,去理解理解???...原创 2019-05-22 09:10:49 · 170 阅读 · 0 评论 -
AI_07_分类评估、聚类_04_K-Means聚类
K-Means属于无监督的机器学习。K-Means把数据分成K类,到同一类中心的数据的距离最小,到不是同一类中心的距离比较远。在工程上,K值到底选择几是需要解决的问题,同时K个中心点选在什么地方也是另外一个需要解决的问题。这样的话,选择不同的K,计算100次可能出现100个不同的结果!!!由于K-Means在K选择上的需要解决的问题,所以在工程上K-Means++用...原创 2019-05-22 09:11:13 · 176 阅读 · 0 评论 -
AI_10_TensorFlow深入、TensorBoard可视化_01_placeholder代码详解_TF构建Softmax回归计算图
多次迭代,计算trainstep,整个过程是机器学习的一般步骤,多看看!!!原创 2019-05-23 12:52:08 · 163 阅读 · 0 评论 -
AI_10_TensorFlow深入、TensorBoard可视化_02_TF对Softmax回归训练_评估代码实现
.总结:定义算法公式,也就是神经网络forward时的计算 定义lossFunction,选定优化器,并指定优化器优化loss 迭代,对数据进行训练 在测试集或者验证集上对准确率进行评估...原创 2019-05-23 12:52:45 · 138 阅读 · 0 评论 -
AI_10_TensorFlow深入、TensorBoard可视化_03_TF的模型持久化_重新加载
持久化中间模型或是最后的模型,然后再加载进来使用,提高稳定性和重复使用!再次加载模型,使用。原创 2019-05-23 12:53:35 · 131 阅读 · 0 评论 -
AI_10_TensorFlow深入、TensorBoard可视化_04_模块化
.原创 2019-05-24 09:50:52 · 149 阅读 · 0 评论 -
AI_11_DNN深度神经网络手写图片识别_01_深度学习DNN是什么_如果使用TensorFlow自己实现Layer来构建两个隐藏层的DNN计算图
这小节深度学习的流程需要记住,代码在下一节会进行优化!使得更简洁!!!一个隐藏层叫多层感知机,大于等于2个隐藏层就是深度神经网络!biases 截距线性变化激活函数,深度学习常用的激活函数就是relu!!!softmax做多分类,理解成2层???根据y=》交叉熵=》...原创 2019-05-24 09:51:02 · 275 阅读 · 0 评论 -
CDH 和ambari之间的比较
1 什么是CDH,ambari?Apache Ambari是一种基于Web的工具,支持Apache Hadoop集群的供应、管理和监控。Ambari已支持大多数Hadoop组件,包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeper、Sqoop和Hcatalog等。Apache Ambari 支持HDFS、MapReduce、Hive、Pig、Hbase、...转载 2019-06-05 11:22:38 · 415 阅读 · 0 评论 -
AI_11_DNN深度神经网络手写图片识别_02_TF训练2层DNN来进行手写数字识别
对上一节的代码进行优化!使得更简洁!!!隐藏层,具有归纳总结的能力!提升准确率(1)增加隐藏层(2)增加训练数据原创 2019-05-24 10:42:44 · 222 阅读 · 0 评论 -
想高效学会Hadoop,你要按照这个路线
学习hadoop,首先我们要知道hadoop是什么?说到底Hadoop只是一项分布式系统的工具,我们在学习的时候要理解分布式系统设计中的原则以及方法,只有这样才能以不变应万变。再一个就是一定要动手,有什么案例,有什么项目一定要亲自动手去敲。学习的时候不要害怕遇到问题,问题是最好的老师。其实学习的过程就是逐渐解决问题的过程,当你遇到的问题越来越少的时候,就说明已经学的差不多了。下面...转载 2019-07-09 14:33:24 · 233 阅读 · 0 评论 -
AI_05_分类器项目案例和神经网络算法_01_理解维度_音乐分类器数据介绍
a sparse matrix稀疏矩阵把多元线性回归的负无穷到正无穷缩放到逻辑回归的0和1,逻辑回归是基于多元线性回归!原创 2019-05-13 17:44:38 · 177 阅读 · 0 评论 -
AI_04_逻辑回归详解和应用_06_逻辑回归多分类转成多个二分类详解
逻辑回归做多分类,是把多分类问题转化成多个二分类问题,是将数据转化了下。具体参见下图!!!convergence 收敛原创 2019-05-13 17:28:01 · 782 阅读 · 3 评论 -
AI_04_逻辑回归详解和应用_05_逻辑回归sklearn处理鸢尾花数据集
逻辑回归本来是做二分类的,可以做二分类的也可以做多分类,以下的数据demo,就做了多分类!股票的涨跌,房价的涨跌等等都是二分类的问题!multi-class classification 多分类分类器 :Summary Statistics: ============== ==== ==== ======= ===== ====================...原创 2019-05-13 16:51:23 · 364 阅读 · 0 评论 -
AI_09_深度学习、TensorFlow安装和实现线性回归_02_TensorFlow CUDA GPU安装说明_TF使用介绍
.然后在pyCharm中创建一个AI的项目,配置好环境。下面的红框的内容加上会打印更多的日志!!!其实把红框的内容删除也是可以执行的!!!...原创 2019-05-23 08:27:44 · 138 阅读 · 0 评论 -
AI_08_密度聚类、谱聚类_01_聚类的评估_metrics代码
.原创 2019-05-22 15:27:33 · 136 阅读 · 0 评论 -
AI_08_密度聚类、谱聚类_02_密度聚类_代码实现
.原创 2019-05-22 15:28:22 · 153 阅读 · 0 评论 -
AI_08_密度聚类、谱聚类_03_谱聚类
.原创 2019-05-22 15:29:11 · 149 阅读 · 0 评论 -
AI_09_深度学习、TensorFlow安装和实现线性回归_00_pip安装源设置
pip 是python的包管理器工具,主要是用来进行安装python库,类似linux的apt-get、yum包管理器。pip默认从官方源pypi.python.org下载数据,国内速度相对比较慢。windows 下,通过在“用户”目录下的具体用户(“28542”)下建立pip文件夹,在pip文件夹下建立一个pip.ini文件,指定pip使用国内的源,下载速度会快上好多倍。[glob...原创 2019-05-22 15:30:59 · 150 阅读 · 0 评论