- 博客(11)
- 资源 (15)
- 收藏
- 关注
原创 马尔科夫过程(MDP)—— 此去的强化学习笔记(二)
我是跟着David Silver 的视频和PPT(链接:http://davidsilver.uk/teaching/)来学习强化学习的,虽然很多人已经写了很多这方面的笔记了,但是我还是觉得应该学一点,记一点,因为我认为写是一个理清思路、加深理解的好方法。希望能坚持学下去,写下去。笔记主要是翻译并记录PPT中的内容,再加上一些个人的理解。今天记录的是David课程中的第二讲。我硕士阶段主要是研究网络测量,一个比较小众的方向。进入博士阶段后,一直在思考如何使用强化学习来解决网络测量中的一些问题,以前遇到问
2021-08-08 15:51:05 556 1
原创 此去的强化学习笔记(一)
此去的强化学习笔记(一)我是跟着David Silver 的视频和PPT来学习强化学习的,虽然很多人已经写了很多这方面的笔记了,但是我还是觉得应该学一点,记一点,因为我认为写是一个理清思路、加深理解的好方法。希望能坚持学下去,写下去。笔记主要是翻译并记录PPT中的内容,再加上一些个人的理解。强化学习简介机器学习方法的类型我们知道机器学习可以分为三种:有监督、无监督、强化学习。David对于三者关系的概括如图1。图1 讲义中对三种机器学习方法关系的说明强化学习的特点是无监督的.
2021-06-05 18:10:43 119 2
原创 初探makefile
说来惭愧,自诩为一个程序猿,最近才接触makefile,记录一下,也算是卖出了第一步。之前写c代码,一直用各种IDE,从VS到XCODE,一直傻瓜的点按钮编译,直到最近,才因为要将一些代码编译成SO文件,才第一次接触到makefile,也算是打开了一扇新的大门。本文参考的博客:https://www.cnblogs.com/wang_yb/p/3990952.htmlhttps:/...
2019-02-10 23:03:16 176
原创 python3调用c语言代码
python 用起来十分方便,但是在执行效率上是硬伤,要是能把一些效率低的循环部分写成C,便可以极大的提升效率。在使用过程中我就遇到了这样的问题,在此做个记录。python调用C主要有以下方法:一、CTYPES将C编译成DLL(WINDOWS)或者SO文件(LINUX)在PYTHON中用接口调用,该方法使用起来十分简单假设有add.c的中有一个叫add的函数1.将该文件编译...
2019-02-08 16:24:44 1238
原创 latex使用心得
第一次用LATEX写论文,感觉还是很好用的,唯一想吐槽的就是MAC的LATEX界面太不友好了。 就按论文从上到下用到的知识来写这篇博客吧,博主是计算机专业的,本文用的就是Springer的lncs模板。 一、引用包 latex也会调用各种包来完成各种格式、各种效果的实现,下面是我用到了的几个包\documentclass[runningheads]...
2018-12-08 14:59:04 8190 1
原创 networkx-图的实战利器
最近在学习图相关的东西,networks真的是个神器,在不追求特别高效率的情况下,简直是不能再方便了,简单记录下心得。一、基础知识(一)数据结构 数据结构在很大程度上决定了图计算的效率,用了有一段时间的python了,要说效率那一定是dict了,英雄所见略同,networks的数据结构也是一系列的dict的嵌套。{'A': {'B': {5}}, 'C': {'B'...
2018-11-12 11:33:26 874
原创 python学习笔记——(2)pandas中的数据类型
在用python进行数据处理的时候,自带的五种数据类型使用起来显然是有局限性的,python之强大在于各种包,在数据处理中用的最多的就是pandas和numpy。本文章主要介绍pandas的数据结构。 pandas有两种数据结构 series dataframe Seriespandas.Series(data=None, index=None, dtype=Non...
2018-07-05 22:03:41 714
原创 Python学习笔记——(1)标准数据类型
最近一直在用python做一些实验,都是一边百度一边写代码,最后代码是写完了,可是回过头一想,感觉知识很零碎。没有构成体系,所以决定写个系列博客,把一些基础知识梳理记录下来,主要是帮助自己加深理解,构建起系统的知识体系,从数据类型开始吧。版本为python3.6 Python标注数据类型 Python在使用的时候,给人最大的感觉就是不用去管复杂的数据类型,极为方便。 Py...
2018-07-03 21:05:47 226
原创 python实现Dijkstra + 堆优化 + 链式前向星
最近在做网络拓扑相关的研究,各种经典算法自然是绕不过去的,由于数据量比较大,决定用链式前向星来存图,网上找一圈,PYTHON+链式前向星的代码没找到,于是乎决定自己写一下,不写不知道,写了才吓一跳,代码能力真是弱掉渣了。 一、背景介绍 1.链式前向星 内容引用自以下两篇文章: https://blog.csdn.net/Binary_Heap/art...
2018-05-14 10:47:12 3580 4
c语言实快速排序算法 quicksort
2019-04-15
c语言实现堆排序算法 heapsort
2019-04-15
堆优化的Dijkstra算法用PYTHON实现
2019-04-15
c语言实现归并排序算法 mergesort
2019-04-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人