- 博客(6)
- 收藏
- 关注
原创 Debug Tensorflow :Two checkpoint references resolved to different objects
环境ubuntu 18.04Python 3.8TensorFlow-gpu 2.3.1报错解决方案
2020-12-31 11:31:03 1820 3
原创 机器学习实践:TensorFlow最后一个epoch训练损失函数显著增大
问题:10个epoch,运行到最后一个时,训练数据集的损失函数显著增大解决方法:打印出了learning rate,发现学习率平滑的再减小,没有问题检查数据集是否shuffle。
2020-12-27 17:49:42 1747 2
原创 机器学习实践:本地远程查看服务器训练TensorBoard
服务器端口转发到本地本机terminal运行ssh -L 16006:127.0.0.1:6006 user@host -N -v -v2. 服务器端运行Tensorboard服务器terminal运行tensorboard --logdir=./logs --port=6006本地进行查看本机浏览器输入:http://localhost:16006或http://127.0.0.1:16006...
2020-12-23 11:18:20 205
原创 机器学习实践:onnx模型转为Tensorflow2的pb模型2020
安装Tensorflow,如果已安装则检查 Tensorflow版本是否大于2.3.1安装tensorflow-addons从源码安装最新的onnx(2020/12),参考git将YoloV5中的torch pt模型输出为onnx模型,参考git将onnx转化为tf的pb模型import onnx, onnxruntimefrom onnx_tf.backend import prepareimport torchimport numpy as npimpor..
2020-12-18 11:32:09 1619 2
原创 数据竞赛:记录3天进入比赛Top3%的全过程
原文首发于我的公众号这几天花了3天时间尝试了一个CCF比赛:大数据时代的Serverless工作负载预测。比赛链接:https://www.datafountain.cn/competitions/468/teams这里简单记录一下如何利用三天时间进入Top3%,虽然有2000多队伍,很多人其实从来都没有认真做过,三天时间本身就超过80%的人了。所以Top3%,其实真没什么难度,有巨大难度的是Top5,所以标题党了一下。数据概览比赛类型为时间序列预测。背景:云计算时代,Serverless软件架构
2020-12-04 21:08:56 311 1
原创 数据挖掘:分享两个Pandas使用小陷阱
原文首发:这里这里主要分享数据分析过程中两个很小的陷阱。concat比较耗时背景是有上万个csv文件,想把他们整合到一个文件里,推荐整合后的格式保存为大数据里的.parquet,可以节省很多空间。整合多文件时,不要着急用concat,而是先list到一起,最后统一concat。原因是concat的时候,需要考虑每个dataframe的index对齐,所以速度很慢。我一开始的慢速写法:def concat_high_freq(base_dir, output_name='test_combin
2020-12-03 21:25:19 985
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人