2018年04月_imcl

12月 11月 10月 09月 05月 04月 03月 02月

原创 tensorboardX tutorial

TensorboardXTensorboardX是一个用于可视化的模块，在pytorch中用的比较多。其支持以下类型的总结scalarimagehistogramaudiotextgraphonnx_graphembeddingpr_curveSummaryWriter提供接口，实现以下功能：在给定的目录下，创建事件文件和向事件文件中添加汇总数据事件...

2018-04-16 12:20:18 2090 1

原创 pytorch core module

torchtorch.nntorch.nn.functionaltorch.optimtorch.autograd

2018-04-18 11:48:58 236

原创 multiprocess threading queue

Referencehttps://morvanzhou.github.io/tutorials/python-basic/multiprocessing/ https://morvanzhou.github.io/tutorials/python-basic/threading/ http://www.runoob.com/python/python-multithreading.html

2018-04-14 22:43:40 185

原创 A3C

A3C tutorial

2018-04-14 16:13:15 931

原创 tf.gradients

tf.gradients tf.gradients( ys, xs, grad_ys=None, name=’gradients’, colocate_gradients_with_ops=False, gate_gradients=False, aggregation_method=None...

2018-04-14 12:22:36 1189

原创 L2: Markov Decision学习笔记

前言本节主要讲述了MP、MRP、MDP的基本概念，并介绍了Bellman方程在计算状态/动作值函数中的应用，进一步说明何为最优策略，最后介绍了MDP的几种扩展形式，例如POMDP。MP 马尔科夫过程具有无记忆性，MP可以用元组<S,P>来表示，S代表状态，P表示状态之间的转移矩阵, 从示例来看，MP仅含有S、P。MRP 相比...

2018-04-10 20:36:17 252

原创 OpenAI

IntroductionOpenAI 是google提供的一个环境库，用以测试和对比不同强化学习算法。下载地址：OpenAIBasic在强化学习中，有两个重要的概念：环境与环境交互的人（你所设计的算法）环境的作用：接受agent作出的某种action，并给予agent反馈，反馈信息主要包含reward 和一些可观测状态量。agent的作用：根据反馈信息，...

2018-04-10 17:26:43 3563

原创计算机算法设计与分析学习笔记1

基本概念程序 = 算法 + 数据结构算法描述如何解决一类问题的一种方法，满足如下性质：-输入：一类问题的实例 - 输出：针对实例的解 - 确定性：每条指令无歧义 - 有限性：有限循环程序不满足有限性性质, eg. 操作系统为无限循环。为某一类问题设计算法，具体流程如下：算法复杂性分析复杂性分析主要体现在：时间复杂性T(n)空间复杂性S(n)...

2018-04-07 21:42:01 2071

原创 tf module

tensor的基本运算：tf.add(x,y) return x + ytf.substract(x,y) return x - ytf.multiply(x,y) return x*ytf.matmul(A,B) return A*Btf.div(x,y) return x/ytf.cumsum(x，axis) 累加...

2018-04-04 23:19:51 347

原创 tf.layers

tf.layers定义在tensorflow/python/layers/layers.py, 为我们提供了一些高层次的构建神经网络的接口。函数提供的主要API包含以下几个方面：卷积pooling全连接批归一化BNdropout卷积tf.layers.conv1d conv1d( inputs, filters, ...

2018-04-04 21:00:38 1811