2018年03月_我是白小纯

08月 07月 05月 04月 03月 02月

原创 BN实现

这样应该是最接近我对论文的理解写出的bn代码，如果有问题，欢迎指正。def batch_norm(x, n_out,train, eps=1e-05, decay=0.99,affine=True, name=None): with tf.variable_scope(name, default_name='BatchNorm2d'): moving_mean = t...

2018-03-28 22:01:41 1765

原创 python中set(a)-set(b)

set中元素是唯一，无序，不可改变的，不过可以为集合添加或删除元素（x.add()) 这里只说set(a)-set(b)，是求差集，用a中不属于b的元素创建新集合。>>>{'y'}-{'rmax','rmin'}{'y'}>>> {'rmax'}-{'rmax','rmin'}set()>>> {'rmin'}-{'rmax','...

2018-03-28 15:03:46 3696

原创 tf.assign

tf.assign在tensorflow起到赋值的作用，对g进行assign后g的值就变成新的值，同时返回的也是新的值。一旦assign被session run之后，g的值就会变成新的值。这里要特别注意，不然可能造成值溢出。#!/usr/bin/env python3# -*- coding: utf-8 -*-import tensorflow as tfimport osos...

2018-03-22 11:23:22 2311

原创 tf.nn.l2_loss和 tf.nn.l2_normalize

一，L2正则化：tf.nn.l2_loss形如1/2Σw21/2Σw21/2\Sigma w^2,一般用于优化的目标函数中的正则项，防止参数太多复杂容易过拟合。tf.nn.l2_loss(var)Computes half the L2 norm of a tensor without the `sqrt`: output = sum(t ** 2) / 2不过在这里又...

2018-03-21 19:59:45 9270