【deepspeed】【训练】【交互】【wandb】训练过程中的wandb交互如何去除

已于 2023-09-14 18:34:23 修改
阅读量542 收藏
点赞数 1
分类专栏： AI测试 文章标签： 人工智能
于 2023-09-14 17:40:35 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_29707567/article/details/132887175
版权

问题：gpt模型训练时，中间有询问输入账户，交互式的询问影响自动执行脚本，询问是这样的：

解决办法：

在脚本中设置环境变量，关闭wandb，如下图：

其他：

log中没有显示脚本的完整路径，顺着log中前面的脚本路径，找到了这个脚本，是和框架的其他py文件在一个目录下的

完整的路径是这样的：/usr/local/lib/python3.8/dist-packages/transformers/integrations.py

qq_29707567
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【关闭wandb：yolov5训练报错Wandb wandb.errors.UsageError: api_key not configured (no-tty).】
weixin_47869094的博客
08-03 3163
第三个就是禁用 Wandb：如果你不想使用 Wandb 进行实验跟踪，可以通过注释相关的代码行来禁用它。查找以 wandb.init 或 wandb_logger 开头的行，并使用 # 符号将它们注释掉。跑yolov5训练官方代码出现下面的问题，第一个方法就是关闭代理网络vpn，直接运行，阻止数据上传。将 “YOUR_API_KEY” 替换为你实际的 API 密钥。第二个方法就是老老实实注册。
Windows 7 快用快学教程 中文交互式训练教程 1/3
03-05
Windows 7快用快学教程 Windows7中文交互式训练教程 1/3 课件内容目录 第一章 Windows 7 安装教程 1.1 找到 Windows 7 1.2 Windows 7 的好处 1.3 Windows 7的版本 1.4 Windows 7系统配置要求 1.5 下载及购买 ...
如何在使用transformers.Trainer时关闭wandb
诸神缄默不语的博客
08-03 3272
如何在使用transformers.Trainer时关闭wandb
wandb关闭和打开方法
weixin_46306002的博客
12-02 7522
wandb
yolov5关闭wandb
豆芽菜
04-21 2352
yolov5训练过程中wandb总是提示登入账号，不登入还不能继续训练，想要关闭wandb，直接不使用即可。参考：https://blog.csdn.net/athrunsunny/article/details/123428667。在\yolov5\utils\loggers\wandb\wandb_utils.py中。同时在\yolov5\utils\loggers\__init__.py中。import wandb的位置下面同样加上wandb = None。这样就可以关闭wandb。
训练模型时，wandb关闭问题。你以为加了一句 wandb = None 就能关闭了吗？
热门推荐
零碎@流年絮语 的博客
08-28 1万+
wandb关闭问题
使用DeepSpeed加速大型模型训练(二)
发呆的比目鱼的博客
09-10 1970
使用DeepSpeed加速大型模型训练(二)
Windows 7 快用快学教程 中文交互式训练教程 2/3
03-05
Windows 7 快用快学教程 中文交互式训练教程 2/3 课件内容目录 第一章 Windows 7 安装教程 1.1 找到 Windows 7 1.2 Windows 7 的好处 1.3 Windows 7的版本 1.4 Windows 7系统配置要求 1.5 下载及购买 Windows 7 1.6...
基于人机交互的语言训练中微信小程序开发设计研究.pdf
06-24
对微信小程序开发工具包和开发平台进行分析,实现在交际语言训练过程和人机交互功能的加强开发。该开发过程在推送精度和用户满意度方面均获得较强的数据表现。认为该开发模式适用于该个案的开发需求。
定位导航和语音交互系统集成Positioning navigation and voice interaction sy
05-31
Positioning navigation and voice interaction system integration OS:ubuntu16.04 Project IDE:Pycharm Project Interpreter:python3.6
IOS12 Library And App Template 交互原型模板 v1.1.rp
05-28
IOS12 Library And App Template 交互原型模板 v1.1.rp，产品需求原型，供参考和学习使用
使用transformers.Trainer如何关闭wandb
m0_48923489的博客
03-19 827
时，其便利性与配置挑战性并存，形成了一种复杂的关系。引入了wandb作为内置功能的决定，可能源自某位营销天才的奇思妙想。虽然wandb在某些情况下确实提供了极大的便利，但在很多情况下，它的存在却显得多余。本篇文章旨在探讨如何应对这一需求。但这种方法可能会触发一条警告信息，告诉你。标志来控制日志记录的集成方式。环境变量即将弃用，并建议使用。
【保姆教程】白嫖GPU T4*2！Kaggle实现chatglm微调任务----单机多卡训练测试
qq_72632426的博客
05-28 3830
【保姆教程】白嫖GPU T4*2！Kaggle实现chatglm微调任务----单机多卡训练测试
深度学习中禁用wandb方法
weixin_43826536的博客
05-08 1543
【代码】深度学习中禁用wandb方法。
yolov5不再使用wandb
martinkeith的博客
11-08 2230
在wandb_utils.py中 找到 try: import wandb from wandb import init, finish except ImportError: wandb = None 在下面添加一行 wandb=None 即： try: import wandb from wandb import init, finish except ImportError: wandb = None wandb = None 这样就
YOLOv5训练过程中禁用wandb的最新解决方法
qq_42470715的博客
08-11 2762
yolov5中关闭wandb操作
yolov5中关闭wandb
mingo_敏
04-01 9807
在 utils/wandb_logging/wandb_utils.py try: import wandb from wandb import init, finish except ImportError: wandb = None 后面添加 wandb = None 就可以关掉讨人厌的wandb了，哈哈哈哈哈哈哈哈！
深度学习之wandb的基本使用
执笔画红颜丶的博客
08-24 9455
在深度学习训练网络的过程中，由于网络训练过程时间长，不可能一直关注训练中的每一轮结果，因此我们需要将训练过程中的结果可视化，留作后续的查看，从而确定训练过程是否出错。因此，我们需要使用到可视化工具，常用的几种可视化工具有：`wandb`（在线可视化）、`tensorboard`、这里主要介绍`wandb`的基本使用，`tensorboard` 的使用可参考我的另一篇博客 [Tensorboard 的详细使用](https://blog.csdn.net/L28298129/article/details/1
Yolov5项目中关闭wandb
feelingjun的博客
09-29 1417
yolov5关闭wandb
wandb plotly
最新发布
05-01
Wandb Plotly 是一个用于数据可视化的工具，它是由Weights & Biases开发的。Wandb Plotly 可以帮助您快速创建交互式的图表和可视化，并且支持多种类型的图表，如散点图、折线图、直方图、热力图等。通过使用 Wandb Plotly，您可以更好地了解数据之间的关系，更好地展示数据，并且可以与其他人共享和交流这些数据。 Wandb Plotly 的优势在于其交互性和可定制性。您可以轻松地添加标题、标签、颜色、大小等样式来美化图表，并且可以通过鼠标滚轮或拖动来缩放和移动图表。此外，您还可以使用 Wandb Plotly 的 Python API 将数据集成到您的代码中，并生成交互式图表和可视化。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值