编程速记(12)：保存日志-保存print()函数输出的训练过程

最新推荐文章于 2022-06-24 15:36:30 发布
最新推荐文章于 2022-06-24 15:36:30 发布
阅读量355 收藏 1
点赞数
分类专栏： 编程速记
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_38316806/article/details/103248851
版权

一、场景描述

很多时候，利用服务器run model的时候，我们会选择逐epoch打印一些数据信息（比如loss）以便分析模型训练情况。
这个时候，保存这些训练日志就变得很重要了。尤其是在ubuntu服务器上利用tmux进行分屏操作的时候，翻页查看中断输出变得不很方便，这个时候，就可以考虑将日志保存到文件中。

二、基于linux系统tee命令的实现

python 要执行的文件名.py | tee -a 希望日志保存的路径 # -a 表示附加模式

例如

python main.py | tee -a ./log/log.txt
Leeyegy
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
tmux-logging:轻松记录和捕获Tmux屏幕
05-06
Tmux记录 特征： 在当前窗格中记录所有输出开始记录后，所有键入的内容和所有输出将保存到文件中。 方便跟踪您的工作。 当前窗格“屏幕捕获” 当前窗格中所有可见的文本都保存到文件中。 就像屏幕截图一样，只是文字而已。 保存当前窗格的完整历史记录自创建当前窗格以来，所有键入的内容和所有输出都可以保存到文件中。 使用prefix + alt + c清除窗格历史记录 经过测试并在Linux，OSX和Cygwin上工作。 1.记录 在当前窗格中切换（开始/停止）日志记录。 按键绑定： prefix + shift + p 文件名格式： tmux-#{session_name}-#{window_index}-#{pane_index}-%Y%m%dT%H%M%S.log 文件路径： $HOME （用户主目录） 示例文件： ~/tmux-my-session-0-1-20140527T
shorthand-lambda:用于修改速记输出的Lambda脚本
05-06
速记Lambda #### 2017 Financialndrew Rininsland和Andrew Georgiou，《金融时报》 用于部署速记和Ceros内容的无服务器项目这是一个利用AWS Lambda和S3的无服务器项目。 它基于出色的。 使用它来获得帮助[生成策略...
记录训练过程中的输出的方法
weixin_42575979的博客
09-04 607
sys.stdout打印和保存信息 import os import sys class Logger(): def __init__(self, filename="log.txt"): self.terminal = sys.stdout self.log = open(filename, "w") def write(self, message): self.terminal.write(message) self.l
rasa-api实现训练模型保存训练日志
LuoFan_A的博客
12-07 8504
from flask import Flask, request import json import subprocess app = Flask(__name__) @app.route('/train_and_save/', methods=['POST']) def save_train_log(): if request.method == 'POST': get_cmd = request.get_data().decode('utf-8') ins
训练模型时，我们该如何便捷保存日志？
Python学习与数据挖掘
11-24 4035
不知道大家在训练模型的时候有没有遇到类似这样的问题： ①反复调试各种超参数组合，但是由于没有进行有效的记录到最后不知道那种参数组合的结果更好。 ②即使是做了相应的统计与记录，但是由于超参数太多，或者时不时的又会引入新的超参数，导致最后的记录结果很乱。 ③每次改动都要手动记录特别麻烦，而且记录的要素可能还会包括评估结果、epoch数量，甚至最后还要分析损失值以及某些权重参数等等。 ④多个模型在调用过程中希望输出相应的处理信息。 那有没有什么比较好的方法来保存这些信息呢？当然有，那就是将整个训练过程中的相关
linux中运行tmux时，自动保存日志
weixin_43819842的博客
06-24 4700
1.为什么需要自动保存日志(1) 运行tmux的时候，向上查看日志比较麻烦，要执行ctrl b + [ 的操作，并且查看的日志范围有限(2) 如果在tmux窗口内，每次手动使用script命令保存日志，又太麻烦2. 原理 • 使用linux中的script命令，可以实现将会话信息保存到指定文件中，使用方法:(如果没有这个命令，需要安装一下)script -f a.log 将当前会话打印信息输出到a.log文件中exit 结束保存日志 3.具体方法
Depicofier：将PICO-8样式的Lua语法转换为标准的干净Lua语法
02-03
该工具使用经过来解析PICO-8源代码，因此任何增强的或特殊的语法或速记方式都只会在应有的位置进行转换。 如果您喜欢这个工具，请考虑我加一美元。用法Depicofier.exe [inFile] [outFile]Or to output source to ...
vsteno:VSTENO-具有增强的符号选项的矢量速记工具
03-21
vsteno:VSTENO-具有增强的符号选项的矢量速记工具
mosyrejs:MoSyRejs框架-同步性
05-02
MoSyRe是对M odularity，S ynchronicity和R eactiveness速记符号，存在的一切事物普遍见过的属性，包括软件架构。 MoSyRe是软件体系结构的一个名称（由我组成），旨在表示这些属性。此类体系结构可以以连贯的方式...
bagu:前端八股知识点-速记脑图
04-06
巴古 前端八股知识点-速记脑图
将print结果保存到文件
qq_31225201的博客
08-29 1328
#f=open(r'你的路径/result.txt','w') #保存为txt print(xxx,file=f) f.close() print的内容会保存到设置的路径文件中。 参考 [Python]将print结果保存到本地文件夹：https://blog.csdn.net/m0_54065225/article/details/115445181?utm_term=python%E6%8A%8Aprint%E4%BF%9D%E5%AD%98&utm_medium=distribute.pc
Linux小技巧:后台提交任务与日志保存
春华秋实
01-11 1万+
前言：先说说自己的情况，从18年9月开始，整个工作环境和生产工具发生了很大的变化，之前工作大部分时间用的是Windows做开发和少数Linux，现在要全部使用mac和公私有云的Linux环境，这种情况下对自己的做事方式、技术要求、技术栈和使用工具都发生了变化。由于之前在Linux上面的积累很少，所以又要开启一段学习之路啦！ 今天，我重点要介绍的是Linux后台任务提交的几种常用方式推荐。 为什...
python内存泄露工具_排查python内存泄露中几个工具的使用
weixin_30068877的博客
03-02 566
本文主要介绍3个工具：pdb，objgraph，以及pympler。1.pdbpdb是专门用于python代码调试，模仿gdb。使用pdb可以查看堆栈，打印变量等。这里介绍的是命令行下的pdb。命令行下使用pdb，代码侵入小，调试方便。本例中，python安装在当前目录下.venv使用pdb加载python程序.venv/bin/python -m pdb orange.py> /Users...
tmux会话自动保存与恢复
qq_38789531的博客
02-09 3799
简介 tmux可以用于会话管理，通过建立session，可以保证当前设备和服务期断开连接之后，会话中的指令继续运行，非常适合用于执行需要长时间运行的任务。但tmux也有一个问题，那就是session在服务器上不会保存，重启断电之后需要重新创建session。可以通过两个tmux插件来实现session断电保存、自动保存和自动恢复： Tmux Resurrect 会话手动保存与恢复 Tmux Continuum 会话定时保存自动恢复 安装插件 # 创建目录 mkdir ～/.tmux cd ~/.tmux
服务器自动保存tmux会话以及恢复tmux会话
Mao_Jonah的博客
04-28 2092
最近服务器总是重启，导致实验中断，同时运行多个实验，tmux包括运行的命令全部消失，重新恢复又要不少时间，所以配置了一下tmux自动保存以及恢复。 插件准备 # 下载 tqm 到~/.tmux/plugins # tqm是tmux插件管理工具 git clone https://github.com/tmux-plugins/tpm ~/.tmux/plugins/tpm # 进入相应位置 cd ~/.tmux/plugins # 下载插件 git clone https://github.com/tm
Tmux使用记录
chengqiu9568的博客
06-13 255
本篇博客记录在Ubuntu系统下安装，使用Tmux(主要用于复用终端)的实例。 首先，安装Tmux很简单，一条命令搞定，暂时没遇到前置包/插件缺失的情况。 # sudo apt-get install tmux # yum install -y tmux（CentOs系统） 在终端使用...
screen和tmux管理shell会话
热门推荐
乌托邦
11-27 1万+
使用screen管理会话       在使用SSH或telnet远程连接服务器时，可能都遇到为一些长时间运行的任务而头疼，比如系统备份、ftp 传输等等。通常情况下我们都是为每一个这样的任务开一个远程终端窗口，因为他们执行的时间太长了。必须等待它执行完毕，在此期间可不能关掉窗口或者断开连接，否则这个任务就会被杀掉，一切半途而废了。也许nohup命令可以达到这个目的，如果程序的标准输出/标准错
Tmux Resurrect: 保存和恢复 tmux 工作状态
一码算一码
04-02 2006
tmux是终端复用器，这个名称很费解，通俗地说，就是在一个 Terminal 窗口里，可以打开多个 shell 同时工作，切换起来会比较方便。tmux 还有很多神奇的用法，感兴趣可以深入了解。 打开电脑进入 tmux，通常都会不停地创建窗口，分屏，cd，ls，花一段时间弄好自己的工作环境。 tmux-resurrect就是为了免去这个过程。在你前一天关闭电脑前，保存整个的工作环境，第二天开...
基于速记游走的例子，使用ndarray和随机数生成函数模拟一个物体在三维空间随机游走的过程
最新发布
03-31
import numpy as np import matplotlib.pyplot as plt # 定义步长和步数 step_size = 0.1 num_steps = 1000 # 初始化位置 position = np.zeros(3) # 创建随机数生成器 rng = np.random.default_rng() ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值