AWS SageMaker机器学习训练营听课总结

最新推荐文章于 2024-03-03 10:08:18 发布
最新推荐文章于 2024-03-03 10:08:18 发布
阅读量457 收藏
点赞数
分类专栏： 机器学习杂文 文章标签： 1024程序员节 sageMaker aws amazon
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zgpeace/article/details/109255071
版权

机器学习概念

在这里插入图片描述
我们把讨论的范围限定在最常见的有监督学习的框架内，所谓的机器学习模型，本质上是一个函数，其作用是实现从一个样本 x 到样本的标记值 Y 的映射，即 f(x) --> Y 。

当然这样说太笼统了，事实上机器学习模型需要在给定样本集合 { x_i |i=1,...,n} 以及其对应标签 <Y_1, Y_2, ..., Y_n> 的情况下，用假设已知的函数形式 f'(x_i) --> Y_i , 尽可能拟合客观存在的映射函数f(x_i)--> Y_i ，并且保证f' 在未知同分布样本上具有尽可能相近的拟合能力。

AWS 公开数据

大家如果感兴趣平时想找些数据集自己玩的话，也可以看一下这个网站：
https://registry.opendata.aws/
在这里插入图片描述

机器学习工作流是迭代且负责的

在这里插入图片描述

Amazon SageMaker Studio

在这里插入图片描述

使用 Amazon SageMaker Studio

在这里插入图片描述

Amazon SageMaker Autopilot

在这里插入图片描述

使用 Amazon SageMaker Autopilot，创建并审查回归和分类模型

在这里插入图片描述

Amazon SageMaker 帮助您构建、训练和部署模型

在这里插入图片描述

Amazon SageMaker Ground Truth(仅限Global Region)

在这里插入图片描述

成功的模型需要高质量数据(仅限Global Region)

在这里插入图片描述

Amazon SageMaker Ground Truth工作原理(仅限Global Region)

在这里插入图片描述

Amazon SageMaker Processing

在这里插入图片描述

Amazon SageMaker Notebooks

在这里插入图片描述

Amazon SageMaker Notebooks 共享工作

在这里插入图片描述

自动捕获代码依赖项

在这里插入图片描述

内置算法

在这里插入图片描述

AWS Marketplace

在这里插入图片描述

成百上千种算法、模型和数据

在这里插入图片描述

一键式训练模型

在这里插入图片描述

自动模型调优

在这里插入图片描述

Experiments

在这里插入图片描述

Experiments 跟踪和管理数千个实验

在这里插入图片描述

Debugger

在这里插入图片描述

识别问题 – 例如梯度消失

在这里插入图片描述

全托管 SageMaker – 一键式模型部署

在这里插入图片描述

持续监控 Monitor

在这里插入图片描述

识别模型偏移

在这里插入图片描述

训练一次，多处运行，性能提升高达2倍

在这里插入图片描述

推理阶段的费用占90%

在这里插入图片描述

Elastic Inference 降低深度学习推理成本

在这里插入图片描述

Augmented AI 轻松构建人工审核预测所需的工作流

在这里插入图片描述

Amazon Augmented AI 的工作原理

在这里插入图片描述

编排框架

在这里插入图片描述

SageMaker 入门

在这里插入图片描述

Amazon SageMaker

在这里插入图片描述

Reference Architecture

在这里插入图片描述

国内应用

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

AI架构师易筋
关注
专栏目录
sagemaker-workshop-2021:Amazon SageMaker入门的讲习班内容
04-28
本地主持研讨会内容 下载并安装 克隆此仓库： git clone --recurse-submodules https://github.com/shashankprasanna/sagemaker-workshop-2021.git 在本地举办研讨会 cd sagemaker-workshop-2021.git hugo serve 打开您喜欢的浏览器并导航到http://localhost:1313/ 完成的笔记本 您可以在这里找到完整的笔记本： sagemaker-workshop-2021/notebooks/
亚马逊机器学习服务：深入研究AWS SageMaker
AI科技大本营
01-24 3122
作者 | Manish Manalath译者 | Shawn编辑 | Carol出品 | AI科技大本营（ID: rgznai100）机器学习是一个从数据中发现模式的强大概念。但是，如...
AWS SageMaker 各组件功能详解
打牛地的博客
09-08 4058
AWS SageMaker Amazon SageMaker 是一项完全托管的服务，可以帮助开发人员和数据科学家快速构建、训练和部署机器学习 (ML) 模型。SageMaker 完全消除了机器学习过程中每个步骤的繁重工作，让开发高质量模型变得更加轻松。 AWS SageMaker 是AWS 2017年推出的机器学习服务，下面将介绍AWS SageMaker 的各个组件和优点。 Amazon SageMaker Studio Amazon SageMaker Studio是全集成的机器学习 (ML) 开发环
使用 Amazon SageMaker Studio 创建和管理Amazon EMR 集群与 Spark 作业
亚马逊云科技专栏
02-21 1289
前言Amazon SageMaker Studio 服务已推出三项新的增强功能。从2021年12月1日起，Amazon SageMaker Studio 的用户可以直接创建、终止、管理、发...
新功能 | 重新设计的 Amazon SageMaker Studio 用户界面
亚马逊云科技专栏
12-16 301
点击上方【凌云驭势 重塑未来】一起共赴年度科技盛宴！我们很高兴地推出了一款全新的、重新设计的Amazon SageMaker Studio用户界面（UI）。Amazon SageMaker Studio：https://aws.amazon.com/sagemaker/studio/SageMaker Studio 提供了基于 Web 的单一可视化界面，您可以在其中使用一整套机器学习（ML）工...
AWS SageMaker构建训练和部署机器学习模型.pdf
10-10
"AWS SageMaker构建训练和部署机器学习模型" AWS SageMaker是Amazon Web Services（AWS）提供的一种完全托管的服务，旨在构建、训练和部署机器学习模型。该服务提供了一整套的机器学习工作流，包括数据准备、模型...
Neo- AI -DLR 是 AWS SageMaker Neo、TVM 或 TreeLite 编译的机器学习模型的通用运行时
07-02
DLR 是由AWS SageMaker Neo、TVM或Treelite编译的深度学习模型和决策树模型的紧凑型通用运行时。DLR 使用 TVM 运行时、Treelite 运行时、NVIDIA TensorRT，并且可以包含其他特定于硬件的运行时。DLR 提供统一的 ...
PORTFOLIO-FUSA-ML:产品组合 - 端到端机器学习与财务数据从数据收集到 AWS Sagemaker 中的模型部署，以预测启动成功
08-04
投资组合-FUSA-ML ...其中大部分编写为在 AWS Sagemaker 数据科学环境中运行并部署到实时 AWS 终端节点以供实时使用 注：为保护公司隐私，删除了部分原始文件夹，我展示了展示我的机器学习工作的文件夹
sagemaker-deployment:AWS SageMaker中用于部署ML模型的代码和相关文件
05-17
使用AWS SageMaker的机器学习部署 代码和相关文件 该存储库包含用于使用AWS SageMaker部署ML模型的代码和相关文件。 该存储库包含许多用于各种编码练习，微型项目和项目文件的教程笔记本，这些笔记本将用于补充...
快速上手Amazon SageMaker动手实验室
热门推荐
指剑
03-31 2万+
通过本次的Amazon SageMaker Hands-on，即便是新手也可以根据视频和博客的引导，快速的完成本次实验，增加对Amazon SageMaker的一个了解。同时亚马逊云科技官方也考虑到了不同用户的水平以及经济情况，提供了很多的workshop以及一些免费的产品额度，极大的提高了用户使用体验，为用户节省了时间、金钱成本。虽然实验非常简单，但是从整个Amazon SageMaker来看，其提供了非常强大的功能，需要更加专业的实验才可以完整的体验到Amazon SageMaker的强大能力。
通过自动关闭Amazon SageMaker Studio中的闲置资源来节省成本
亚马逊云科技专栏
07-06 370
Amazon SageMaker Studio提供了一个基于Web的统一可视化界面，您可以在其中执行所有机器学习(ML)开发步骤，使数据科学团队的工作效率提高10倍。该Studio还可以为...
在Amazon SageMaker上快速、灵活构建TensorFlow模型的在线推理服务
亚马逊云科技专栏
12-21 449
当算法工程师在本地使用TensorFlow深度学习框架训练好模型后，会创建模型服务器供应用程序调用实现在线推理。由于部署本身存在一定的复杂性，他们需要考虑如何安装TensorFlow Serving相关的依赖，如何实现模型服务的高可用、请求负载均衡、A/B测试、自动伸缩机制等。Amazon SageMaker可以帮助用户快速创建多台模型服务器进行负载均衡，利用云上多可用区的方式实现高可用，并且在请求量变化时可以根据用户配置的策略进行自动扩展或收缩。
使用 Amazon Bedrock 和 Amazon SageMaker，开启全新的生成式 AI “工作年”！
亚马逊云科技专栏
02-19 1284
先祝各位开发者们：开工大吉，开发顺利！现如今 AIGC 爆火出圈，其智能化、人性化的交互方式和惊人的创作能力，让人们对 AI 的未来充满期待。这种以创造力和智慧而非纯计算力渐长的 AI，正在缩小人与机器的界限，展示出令人欣喜的未来景象。其不仅被技术和产业界竞相追逐，让全球各大科技企业都在积极拥抱 AIGC，不断推出相关的技术、平台和应用。同时，AI 也引发全民关注，茶余饭后人们都在讨论 AI 会为...
使用 Amazon SageMaker 构建机器学习应用
亚马逊云科技专栏
02-27 569
随着社会的发展和科技进步，人工智能变得无处不在，然而，人工智能广泛应用仍然面临着巨大的挑战：一是掌握人工智能专业知识的人才不足；二是构建和扩展人工智能的技术产品有难度；三是在生产经营中部署人工智能应用费时且成本高。最终导致缺乏低成本、易使用、可扩展的人工智能产品和服务。开发者和数据科学家首先必须对数据进行可视化、转换和预处理，这些数据才能变成算法可以使用的格式，用以训练模型。即使是简单的模型，企业...
Amazon SageMaker机器学习之旅的助推器
风中追风
12-14 1万+
相信对于很多计算机领域的开发者来说，利用Amazon SageMaker来进行机器学习的构建应该是轻车熟路，那么对于非计算机领域背景的人能够使用Amazon SageMaker的强大功能来进行机器学习并且应用到他们的日常业务场景中呢，答案是肯定的。整体来说，需要使用数据分析的客户能全靠自己摸索走完整个模型创建、分析和预测的流程，实际体会一下机器学习在业务分析中的作用，还是有很大帮助的，也真正做到了让机器学习有效赋能企业的每个部门，把机器学习的能力交到每一个企业角色手中。
开源模型Mistral 7B+Amazon SageMaker部署指南
最新发布
白洞，白色的明天在等着我们
03-03 5779
Mistral AI 是一家总部位于法国的 AI 公司，其使命是将公开可用的模型提升至最先进的性能水平。他们专注于构建快速而安全的大型语言模型（LLM），此类模型可用于从聊天机器人到代码生成等各种任务。不久前其发布了一个开源模型Mistral 7B，支持英语文本生成任务并具备自然编码能力。它为实现低延迟进行过优化，并且相对其规模，该模型对内存的要求较低，可提供高吞吐量。该模型体积虽小，但功能强大，可支持从文本摘要和分类到文本完善和代码补全等多种使用案例。
使用Amazon SageMaker构建问答聊天机器人
goandstop25的博客
08-22 115
聊天机器人已经成为许多网站和应用的重要组成部分，为用户提供快速便捷的信息访问方式。在本文中，我们将探讨如何利用Amazon SageMaker构建一个强大的问答聊天机器人，它能够理解自然语言查询并提供相关回答。学习如何创建聊天机器人能够帮助开发人员提升客户体验和满意度。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值