- 博客(6)
- 收藏
- 关注
原创 hadf
hadoop两个组成部分:hdfs系统和mapreduce并行计算框架hdfs设计架构-块(block):固定大小的逻辑单元,hdfs的文件被分成块进行存储,默认值为64MB-NameNode:管理节点,存放文件元数据。(1)文件与数据块的映射表(2)数据库与数据节点的映射表-DataNode:工作节点,存放数据块hdfs中文件读写的流程读:1.客户端(java程序...
2019-06-09 15:55:46 475 1
原创 hadoop学习
1.下载安装包2.修改配置文件:~/conf/路径下core-site.xml\ hdfs-site.xml\ mapred-site.xml\hadoop-env.sh(1) hadoop-env.sh更新JAVA_HOME,JAVA安装目录:export JAVA_HOME=/usr/java/jdk1.8.0_144(2) core-site.xml配置hadoop...
2019-06-09 15:35:19 251
原创 机器学习xgboost
机器学习都是通过误差来进行调整网络算全部当前训练的全部样本误差还有正则项误差?为什么要优化正则项约束或者限制要优化的参数:使参数的变化幅度较小,因此可以避免过拟合。...
2018-10-10 23:20:05 184
原创 FM model
low-or high- order feature interaction or feature engineering主要为了学习到特征之间的交互 端到端的训练DeepFM:field:gender,location and continuous fieldFM component and deep component 激活函数非线性转换 WideDeep wide...
2018-09-21 20:25:16 498
原创 qwai学习记录
Thompson sampling介绍贝叶斯学派对CTR的预估为以上是对ctr做平滑项的依据。 model_retrieval的时候要进行选择的过程CTR, SVR, LTR, FTR, WTR, CMTR和VTR,...
2018-09-07 12:54:56 756
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人