- 博客(6)
- 资源 (5)
- 收藏
- 关注
原创 tensorflow logging
一次训练旷日持久, 所以我们需要必要的日志, 在 若干批次 训练后, 将当前的loss, 验证集上的 accuracy 等信息记录下来.常用类tf.logging.set_verbosity(tf.logging.INFO) 设计日志级别.tf.logging.info(msg, *args, **kwargs) 记录INFO级别的日志. args 是配合msg中的...
2018-03-28 13:44:30 6549 2
原创 HDFS 常用命令
HDFS 是在os的文件系统之上抽象出来的又一个文件系统.权限在命令行前加上 HADOOP_USER_NAME=admin 可临时提升执行权限.命令hdfs dfs 等价于 hadoop fs.常用操作查看 hdfs dfs -ls -R hdfs://a/b 递归地查看目录下的文件与子目录创建 hdfs dfs -mkdir -p hdfs://a/...
2018-03-20 19:01:17 1251
原创 iris 鸢尾花数据集
简介这是个鸢尾花的三分类的数据集, 太经典了. 这里描述一下.tensorflow 的入门教程也有描述, 见 参考[1]. 它的数据集要在运行代码时从网上下载, 因为 Great Fire Wall, 下载会失败. 所以介绍下 sci-kit learn 自带的, 用起来更方便.features四个数值特征. sepal length, sepal width, petal...
2018-03-19 10:25:27 6576
原创 tf custom estimator 与 feature column
简介官方 github 源文件例子见参考[2] .不同的神经网络是有共性的, 阶段上分train,eval,pred, 数据上分feature,label,batch_size, 所以官方提倡围绕 Estimator 类来编码, 整个程序由train_input_fn+Feature Columns+ my_model_fn 构成, 风格统一了, 就方便维护与多人交流.train_in...
2018-03-14 19:21:06 1746
原创 tensorflow dataset 与 I/O
简述最简单的办法, 就是在 sess.run(feed_dict=xx) 填入feed_dict参数. 但数据量大到不方便全部放在内存中时, 需要流式输入, 并提供合理的batch_size.tf.datalow-level-api官方文档见这里.# createmy_data = [ [0, 1,], [2, 3,], [4, 5,],...
2018-03-13 11:42:16 426
原创 odps 中的一些方言语句
阿里的公开可售服务, 类比于业界的 Hive.inset() 类比于mysql中的inset()函数, 我们可以用SPLIT()与ARRAY_CONTAINS()搭配来完成. SELECT ARRAY_CONTAINS(SPLIT('1,2,3',','),'3') from tbcdm.dual; -- true...
2018-03-08 17:45:13 1318
win7防音量过大自干预程序_ vs2010完整解决方案.zip
2013-09-21
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人