nohup python缓存问题

最新推荐文章于 2023-05-17 12:05:43 发布
最新推荐文章于 2023-05-17 12:05:43 发布
阅读量2.5k 收藏 1
点赞数
分类专栏： Python 文章标签： python nohup
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Quincuntial/article/details/79286298
版权

文章作者：Tyan
博客：noahsnail.com  |  CSDN  |  简书

深度学习用python跑数据时，经常会用到nohup命令，通常的命令格式如下：

nohup python [python source file] (> [log file]) 2>&1 &

如果没有指定输出文件，nohup会将输出放到nohup.out文件中，但在程序运行过程中nohup.out文件中不能实时的看到python的输出，原因是python的输出有缓冲。

解决方案如下：

  • 方案一

使用-u参数，使python输出不进行缓冲，命令格式如下：

nohup python -u [python source file] (> [log file]) 2>&1 &
  • 方案二
export PYTHONUNBUFFERED=1
nohup python [python source file] (> [log file]) 2>&1 &

参考资料

https://stackoverflow.com/questions/12919980/nohup-is-not-writing-log-to-output-file

SnailTyan
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
在python中使用nohup命令说明
01-20
nohup功能 nohup 是 no hang up 的缩写，就是不挂断的意思。 如果你正在运行一个进程，而且你觉得在退出帐户时该进程还不会结束，那么可以使用nohup命令,该命令可以在你退出帐户/关闭终端之后继续运行相应的进程。 实例操作 例如运行django项目 1.例如，进入项目目录： cd ding_month_1 2.运行下面程序： nohup python ./manage.py runserver 0.0.0.0:8080& 3.此时，已经运行了。 注意事项： 原程序的的标准输出被自动改向到当前目录下的nohup.out文件，起到了log的作用。在nohup执行成功后直接
通过python 执行 nohup 不生效的解决
09-17
主要介绍了通过python 执行 nohup 不生效的解决，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
Linux 使用nohup命令运行python文件
Walker-C
12-10 1239
有时我们想要运行的python程序不挂起，即退出终端，程序仍然可以执行。同时，希望可以将日志输出至指定文件，可使用nohup + 重定向实现。
python 输出没有逗号的list_Python-写了1行日志，业务处理完毕为啥没有输出日志
weixin_39960920的博客
11-27 143
1. 前言你有没有试过Python脚本输出日志的时候，看到日志文件没有及时输出日志。为什么会这样，今天跟大家分享下。Question2.实际测试以下例子是在Python-3.7.4环境下操作，请注意。例子1：确保当前环境变量PYTHONUNBUFFERED为空$ export PYTHONUNBUFFERED=""新建一个testoutput.py#!/usr/bin/python# coding...
用nohup重定向python输出到文件不成功的解决办法
Xia Qiaolin - CSDN
05-15 3539
原因是： It looks like you need to flush stdout periodically (e.g. sys.stdout.flush()). In my testing Python doesn't automatically do this even with print until the program exits. You can run Python wit
DockerFile内python环境设置 ENV PYTHONUNBUFFERED 1 是什么意思？
qq_28770757的博客
05-12 4107
DockerFile设置 python 环境变量经常使用的就是ENV PYTHONUNBUFFERED 1 # 相当于设置 python 命令行的 -u 选项 # 不缓冲stdin、stdout和stderr，默认是缓冲的 ENV PYTHONUNBUFFERED 1 设置python的stdout为无缓存模式 #!/usr/bin/env python import sys sys.stdout.write("stdout1 ") sys.stderr.write("stderr1 ") sys.s
Python环境变量PYTHONUNBUFFERED
ZauberC的博客
03-28 1092
简单讲，控制输入buffer，仅此而已。 1，怎么及时输出呢？ 设置环境变量 export PYTHONUNBUFFERED=1，可以加到用户环境变量中去。 执行python脚本的时候加上参数-u 2.啥时候需要缓存呢？ 主要是为了降低io操作，比如写大文件，就可以进行缓存。 方法如下： 设置环境变量 export PYTHONUNBUFFERED= .执行python脚本的时候不要加上参数-u 详细解释以及例子参考 ...
【已解决】nohup 命令 print 不能实时输出至 nohup.out
joyirine的博客
05-17 1045
解决方法：使用 python -u 设置为不使用缓存机制。
nohup python输出延迟
非-浪的博客
10-27 1592
1. shell 环境变量 执行 export PYTHONUNBUFFERED=1， 那么再此shell下源码执行的 nohup python xx.py & 将不再将日志刷新到缓冲区而是直接输出到 nohup.out 2. python -u nohup python -u xx.py & ， 日志将直接输出到 nohup.out ，不走缓冲区 3. flush buffer (非源码部署适用) 强刷 sys.write 的缓冲区, print 的标准输出实际上是到了 sys.
pytorch torch.save()方法保存数据被强制杀死进程，报错：killed 端口号 PYTHONUNBUFFERED=1
weixin_39417324的博客
10-02 1178
使用pytorch的来保存变量的时候，被Ubuntu系统强制杀死，其实原因主要就是因为内存不够，这是Ubuntu的一种自我保护机制，为了防止还加载大数据时内存不够而导致系统崩溃，所以采取的一种系统自我保护措施，我大概是保存了20个G的数据，用torch.save保存成pt文件，都加载完了，结果save的时候被杀死。 解决方法： 设置虚拟内存swap。其实目的就是为了在内存条的容量不够的时候，用硬盘上临时画出来的空间来代替内存条。当然，swap肯定是不如内存条读写快的，所以要费劲一些，但是可以解决内存爆掉的问
jar java 缓存
12-20
jar java 缓存jar java 缓存
解决python nohup linux 后台运行输出的问题
09-15
今天小编就为大家分享一篇解决python nohup linux 后台运行输出的问题，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
利用nohup来开启python文件的方法
01-21
所以需要使用利用nohup来开启python文件： nohup python webSocketFlashServer_inner.py –fork 因为nohup是不中断的意思，也就是ssh终端关闭以后，不会自动停止。 如果出现appending output to nohup out的情况，...
nohup的情况下无法运行python (默认python版本设置)
余欲与鱼语渔
04-28 471
参考https://linuxconfig.org/ubuntu-20-04-python-version-switch-manager。
Python后台运行 -- nohup python xxx.py &
m0_38024592的博客
12-01 3万+
nphup 用法总结代码示例nohup指令2>&1 错误内容重定向到标准输出& 后台运行若不指定输出文件名，默认会在当前目录生成nphup.out文件可能存在的问题原因Reference 代码示例 运行python程序 – my.py脚本 nohup python my.py >> my.log 2>&1 & # 或者 nohup pyt...
nohup python 缓冲问题
沙哈
12-17 1092
在后台运行python命令时，会等到缓冲区满或者脚本结束后再输出。如要取消缓存，直接向屏幕输出，解决办法： 运行时加-u参数 python3 -u 添加环境变量 PYTHONUNBUFFERED=1 Linux系统中 在print后刷新输出sys.stdout.flush() Postscript： 默认向屏幕输出： stdout – 标准输出 stderr – 标准错误输出 官方文档解释...
pythonunbuffered=1_有关python的运行时参数PYTHONUNBUFFERED的用法 | 学步园
weixin_39776991的博客
12-15 1296
发现PYTHON的运行环境中有一个参数为PYTHONUNBUFFERED查了下其用法，并结合以前的一些编程知识，对这一参数总结如下，首先，对于stderr,标准里规定是无缓冲的，而对于stdout,UNIX标准里规定是行缓冲的对于下面的python代码if __name__ == "__main__":import syssys.stdout.write("stdout1")sys.stderr....
Python中list的切片操作
热门推荐
SnailTyan
04-29 3万+
文章作者：Tyan 博客：noahsnail.com  |  CSDN  |  简书 1. list的切片操作 Python中可以对list使用索引来进行切片操作，其语法(Python3)如下： a[:] # a copy of the whole array a[start:] # items start through th...
nohup Python
最新发布
10-10
在这里，nohup后面的Python表示要在后台运行Python脚本或命令。 nohup命令的使用方法如下： nohup command > output.log 2>&1 & 其中： - command代表要在后台运行的命令或脚本。 - > output.log表示将命令的输出...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值