机器学习平台
窝窝和牛牛
尽量更加详细.....
展开
-
机器学习平台系列(七) - 再探 Jupyter Lab:使用 Nginx 反向代理
文章目录1.环境版本2.准备工作2.1 安装 Docker2.2 配置 Nginx2.3 配置Jupyter Lab镜像中的配置3.期望效果4.总结在 机器学习平台系列(六) - 再探 Jupyter Lab:在 CentOS 下制作 Docker 镜像 一文中介绍如何制作 Jupyter Lab 在 CentOS7 下的 Docker 镜像,本文介绍如何使用 Nginx 对多个 Jupyter...原创 2019-11-27 11:08:22 · 1402 阅读 · 0 评论 -
机器学习平台系列(六) - 再探 Jupyter Lab:在 CentOS 下制作 Docker 镜像
文章目录1.环境版本2.准备工作2.1 安装 Docker2.2.上传 Anaconda33.制作镜像3.1 拉取镜像3.2 安装 Anaconda3.3 安装 Jupyter Lab3.4 制作镜像4.启动命令5.参考链接在 机器学习平台系列(五) - 初探 Jupyter Lab 一种介绍了如何在 非root 用户下安装配置 Jupyter Lab,本节介绍如何制作 Jupyter Lab ...原创 2019-11-19 20:51:57 · 534 阅读 · 0 评论 -
机器学习平台系列(五) - 初探 Jupyter Lab:CentOS 下非 ROOT 用户安装
文章目录1.环境版本2.安装过程2.1 关闭防火墙2.2 安装 Anaconda2.3 在 sudoers 文件下新增用户2.4 安装 Jupyter Lab2.5 生成配置文件并配置3.启动命令4.效果展示5.参考链接在 机器学习平台系列(一) - 初探 Jupyter Notebook 认证机制 一节中介绍了 Jupyter Notebook 的安装以及配置,此篇围绕 Jupyter Lab...原创 2019-11-13 23:34:37 · 599 阅读 · 0 评论 -
机器学习平台系列(四) - XGBoost组件问题: /xgboost/src/tree/updater_histmaker.cc:307: fv=3, hist.last=2
目录1.背景介绍2.出错版本3.报错信息4.问题修复1.背景介绍XGBoost 是算法同学用得很高频的算法之一,为了和机器学习平台进行兼容,使用了 XGBoost4J-Spark。2.出错版本spark-mllib_2.11:2.3.2 xgboost4j-spark:0.803.报错信息提示如下报错信息:what(): [...原创 2019-11-12 18:20:30 · 602 阅读 · 0 评论 -
机器学习平台系列(三) - PySpark组件依赖的虚拟环境:Keras 和 Tensorflow 版本对应关系
目录1.背景介绍2.PySpark环境3.问题描述4.原因分析1.背景介绍机器学习平台底层基于大数据平台提供计算资源,在机器学习平台上主要使用 Spark MLlib 实现了共 7 类(源/目标、统计分析、数据预处理、特征工程、机器学习、工具、文本分析) 90+ 个组件(每个组件代表内置的逻辑片段),目的是减少用户重复开发工作、降低机器学习门槛。2.PySpark...原创 2019-11-07 14:06:47 · 709 阅读 · 0 评论 -
机器学习平台系列(二) - 初探 JupyterHub:虚拟机环境下安装、部署以及单机环境下的多租户
目录1. 简介2. 环境版本3. 安装步骤3.1 安装虚拟机3.2 安装 JupyterHub4. 启动5.新增用户5.1 新增操作系统用户5.2 JupyterHub新增用户5.3 使用新用户登录6. 参考链接在上篇的文章中,我简单介绍了 Jupyter Notebook 的认证机制,其目的是想探寻 Jupyter Notebook 自身是否有多租...原创 2019-11-01 15:17:22 · 1462 阅读 · 0 评论 -
机器学习平台系列(一) - 初探 Jupyter Notebook 认证机制
最近准备调研下 Jupyter Notebook 的单用户安全机制(认证)以及如何实现多租户,以便集成到公司的云平台,进而作为基于大数据平台的机器学习平台的一部分。1. 问题分析数据分析以及算法团队的同学使用 Jupyter Notebook 进行数据分析和建模等工作,其工作流程如下所示:业务部门以组为单位申请一台物理服务器 搭建 Python 环境,启动 J...原创 2019-10-28 10:56:55 · 1018 阅读 · 1 评论