工具
文章平均质量分 79
ACM_Nestling
这个作者很懒,什么都没留下…
展开
-
python实现的ssh失败5次拉黑ip
使用python实现的从/var/log/secure中读取约两小时内登录失败超过5次的ip加入黑名单。如果有误删,可以加入白名单,并删除/etc/hosts.deny。仅自己玩一玩用,实际上有更完善的fail2ban软件可以使用from collections import Counterimport reimport datetimeimport ossecure_log_dir = '/var/log/secure'deny_dir = '/etc/hosts.deny'wit原创 2020-12-04 09:54:20 · 327 阅读 · 0 评论 -
pytorch 分布式多卡
记录一下使用多卡训练时用的方法还有碰到的问题使用dataparallel类相对比较简单,distributeddataparallel可以稍微提升效率,在单节点上面也可以跑。这里就只按照单节点写了。更正式的代码参考pytorch官方给的imagenet分布式训练代码代码:import sysimport ossys.path.append(os.path.join(os.path.dirname(__file__), '..')) import torchfrom xxx.modeling原创 2020-08-31 17:20:15 · 5807 阅读 · 0 评论 -
财政部ppp数据库爬虫
需求给出关键字,然后爬取财政部ppp数据库中相应项目的数据,保存到sqlite中。使用软件:requests、json、sqlite代码写于2020-4-22,以后可能会出现网页改版而导致不可用先上代码:import requestsimport jsonimport sqlite3db = sqlite3.connect('./caizhengbu.db')cursor = ...原创 2020-04-23 11:22:56 · 4514 阅读 · 6 评论 -
Pytorch中Rnn的实现(0.2.0版)
目录使用到的文件列表:torch/nn/modules/rnn.pyRNN实现参考博客:https://zhuanlan.zhihu.com/p/32103001最近需要自己实现基于rnn的attention机制,所以参考了一下pytorch里面对rnn实现的方法。在最新版的pytorch源码中,rnn貌似直接调用的底层接口,没有找到实现的代码。在0.2.0版本中找到了实现的代码。在pytor...原创 2020-01-05 21:06:02 · 965 阅读 · 0 评论 -
PIL存储到pdf中
在做实验的过程中,往往需要将图片和预测的内容输出,从而对模型的的性能有更好的判断。如果将训练集所有图片都放到jupyter中,肯定是放不下的,就算放下了浏览器也会卡死。所以我想将预测的图片和一些测试需要的文字提取放到pdf中去。参考:stackoverflow、user guide 第5.2节官方文档给出的例子只能从文件到pdffrom reportlab.platypus import ...原创 2019-07-20 10:55:55 · 839 阅读 · 0 评论