- 博客(22)
- 收藏
- 关注
RSS订阅原创 Python之jieba库的安装与使用
jieba库此篇博文主要是为了记录新学的一个有趣的python库。jieba库的安装（cmd命令行）pip install jiebajieba分词原理jieba分词依靠文词库——利用一个中文词库，确定汉词之间的关联概率——汉字间概率大的组成词组，形成分词结果——除了分词，用户还可以添加自定义词组jieba分词的三种模式精确模式，全模式，搜索引擎模式——精确模式：把文本精确地切分开，不存在冗余单词——全模式：把文本中所有可能的词语都扫描出来，有冗余——搜索引擎模式：在精确模式基础上
2020-10-30 08:52:08
1579
原创 Python笔记之PyInstaller库的安装与使用
Python笔记之PyInstaller库的安装与使用PyInstaller库的概述PyInstaller库可将.py源代码转换成无需源码的可执行文件。PyInstaller是第三方库，在使用前需要额外安装，安装第三方库需要使用pip工具。PyInstaller库的安装1.win+R2.（cmd命令行） pip install pyinstaller简单的使用（cmd命令行） pyinstaller -F <文件名.py>此次例子使用的python文件内容如下：import
2020-10-14 21:52:41
311
原创 Mobile Edge Computing —— Paper List
Mobile Edge Computing —— Paper List本博客主要是为了记录看过的一些有关于移动边缘计算的论文，并做一个分类。所有文章均已附上地址以供下载。综述1.张开元,桂小林,任德旺,李敬,吴杰,任东胜.移动边缘网络中计算迁移与内容缓存研究综述[J].软件学报,2019,30(08):2491-2516.2.朱友康,乐光学,杨晓慧,刘建生.边缘计算迁移研究综述[J].电信科学,2019,35(04):74-94.3.丁春涛,曹建农,杨磊,王尚广.边缘计算综述:应用、现状及挑战[J
2020-10-11 09:49:23
3203
8
原创 soft q-learning的一些资料整理
SQL的一些资料整理1.https://www.cnblogs.com/Lzqayx/p/12156899.html2.https://blog.csdn.net/uwr44uouqcnsuqb60zk2/article/details/783339903.https://bair.berkeley.edu/blog/2017/10/06/soft-q-learning/4.https://zhuanlan.zhihu.com/p/70360272
2020-09-05 16:51:42
749
原创 python之7段数码管
python之7段数码管import turtleimport timedef drawGap(): turtle.penup() turtle.fd(5)def drawLine(draw): drawGap() turtle.pendown() if draw else turtle.penup() turtle.fd(40) drawGap() turtle.right(90)def drawDight(dight): d
2020-08-26 15:23:53
203
原创 python笔记之random库的使用
python笔记之random库的使用random库是使用随机数的python标准库。1.random库主要用于生成随机数；2.使用random库：import random。random库包括两类函数，常用共8个1.基本随机数函数：seed()，random()；2.扩展随机数函数：randint(),getrandbits(),uniform(),randrange(),choice(),shuffle()。seed(a=None):初始化给定的随机数种子，默认为当前系统时间。rando
2020-08-25 16:34:26
406
原创 python笔记之time库的使用
python笔记之time库的使用time库是python中处理时间的标准库。1.计算机时间的表达；2.提供获取系统时间并格式化输出功能；3.提供系统级精确计时功能，用于程序性能分析。使用格式：import timetime.()time库的三类函数1.时间获取：time() ctime() gtime();ctime()获取易读时间；gtime()获取计算机可处理的时间格式。2.时间格式化：strftime() strptime();import timet = ti
2020-08-24 15:47:31
326
原创 强化学习之SAC（soft actor-critic）算法
强化学习之SAC（soft actor-critic）算法PPO算法是目前最主流的DRL算法，但是PPO是一种on-policy算法，存在sample inefficiency的缺点，需要巨量的采样才能学习。DDPG及其拓展是面向连续控制的off-policy的算法，相对于PPO来说更sample efficient，但是它存在对其超参数敏感，收敛效果差的问题。SAC算法是面向最大熵强化学习开发的一种off-policy算法。与DDPG相比，SAC使用的是随机策略，相比确定性策略具有一定的优势。随机策略
2020-08-18 19:12:11
26957
3
原创 强化学习之PPO（Proximal Policy Optimization Algorithms）算法
强化学习之PPO（Proximal Policy Optimization Algorithms）算法PPO算法提出了新的目标函数可以再多个训练步骤实现小批量的更新，解决了策略梯度算法中步长难以确定的问题。如果步长太小，训练时间就会过长。如果步长过大，有用信息会被噪音掩盖（因为每个数据影响都很大），或者令性能灾难性的下降，难以收敛。on-policy与off-policy的区别...
2020-08-13 15:45:34
14982
1
原创 论文笔记
Mobility-Aware Edge Caching and Computing inVehicle Networks: A Deep Reinforcement Learning一、文中解决了什么问题？文中研究了联合通信、缓存和计算的设计问题，以实现车辆网络的运行优化和成本收益优化。在此基础上考虑了车辆的流动性和硬性服务期限约束，对资源分配的优化问题进行了研究。二、问题是怎么解决的？开...
2020-08-13 13:53:07
431
原创 论文笔记
论文笔记此篇博文用于记录阅读一些论文之后所得。Computation Offloading in Multi-access Edge Computing using Deep Sequential Model based on Reinforcement Learning一、论文解决了什么问题？由于MEC卸载问题是NP-hard的，现有的卸载策略研究大多都基于启发式算法，但随着MEC应用和...
2020-02-17 19:35:42
1936
1
原创 论文笔记3 2020.1.31
论文笔记3此篇博文用来记录阅读论文《Deep reinforcement learning for mobile edge caching:Reniew,new features,and open issues》后的收获。论文主要内容感觉这篇论文比较像一篇综述。文章对移动边缘缓存中有关DRL的最新研究进行了综合分析。首先介绍了边缘缓存的基本知识，并总结了实现context-aware 和智能...
2020-01-31 14:12:42
292
2
原创 论文笔记2 2020.1.27
论文笔记 2此处用来记录学习论文《Artificial Intelligence Empowered Edge Computing and Caching for Internet of Vehicles》后的收获。论文解决了什么问题？车载应用的异构需求和内容普及的时变性给边缘服务器有效利用其资源带来了巨大的挑战。此外，车辆具有高移动性，增加了联合优化计算和缓存的复杂性质。文中提出了一种新的...
2020-01-27 19:34:51
273
原创 论文笔记1 2020.01.26
论文笔记 1用于记录看论文《Software-Defined Networks with Mobile Edge Computing and Caching for Smart Cities: A Big Data Deep Reinforcement Learning Approach》之后的收获。解决了什么问题？智慧城市正在成为全球研究和发展的重点，为市民提供更高的生活质量和各种创新的...
2020-01-26 20:09:28
223
原创 8.22-8.29强化学习 学习心得
学习心得这一周都在学习强化学习的有关内容，前五章的学习都比较顺畅，到了第六章碰到了小困难，David Silver的第六个视频讲解的不是很清晰，公式一多，脑子就比较混乱了。后来又看了别人的学习笔记，才变得清晰了一些。下面是我对所学算法的理解。算法理解1.DP（动态规划）动态规划又分为策略迭代和价值迭代。策略迭代：从一个初始策略 π 和初始价值函数 V 开始，基于该策略进行完整的价值评估...
2019-08-29 14:22:07
288
原创 8.15-8.22学习心得
学习心得这周主要学习了强化学习的内容，先是在B站上看了三节视频，由于视频语速太快，翻译有点问题，所以看下来觉得有点难以理解，后来发现搭配讲义来看会比较容易理解，于是又把前三节讲义看了一遍，觉得又清晰了很多。总之，这不是一门很容易学习的课程，只能自己多看看，多多理解吧。学习笔记1.我对强化学习的理解：强化学习的目标应该是有两个：一个是时间短，另一个是得到最好的策略。强化学习主要包含有四个元...
2019-08-22 13:19:50
204
原创 8.8-8.15学习心得
学习心得这周 学完了所有的python基础知识部分，也就是 第十章和第十一章的内容。在B站上看了几个介绍边缘计算的视频，对边缘计算有了一定的了解，另外还看了一篇外文《Mobile Edge Computing:A Taxonomy》，第一次不带着翻译看外文，最大的感触就是，每一句分开的话我可以看懂，但全部连起来我就是不知道他在说啥，最后就是自己看一遍外文，再看一遍翻译，勉强能看懂他在表达什么东西...
2019-08-15 21:04:14
146
原创 8.1-8.8 python学习笔记
学习心得这周学习的内容是第八章：《函数》，早在大一学习C语言的时候我就比较怕函数，在寒假看这本书的时候也是看的马马虎虎看不太懂，现在重新翻看这本书，心中还是有些忐忑的。好在仔细看下去没有出现太大的问题，心中稍安。下面是我为了方便记忆做的一些笔记。学习笔记1.形参：函数完成其工作所需的一项信息；2.实参：调用函数时传递给函数的信息；3.位置实参：这要求实参的顺序与形参的顺序相同；4.关键...
2019-08-08 15:56:24
142
原创 7.25-8.1 python学习心得
学习心得这周持续高温天气，学习上有点小小的懈怠，学习了书上的第七章内容——《用户输入和while循环》，这章的内容还是比较容易理解的，课后习题也都能做出来。下面是我为了方便记忆记的一些笔记。学习笔记1.函数input()，将输入解读为字符串，它让程序暂停运行，等待用户输入一些文本；2.函数int()将数字的字符串表示转换为数值表示；3.将数值输入用于计算和比较前，务必将其转换为数值表示...
2019-08-01 15:35:07
112
原创 7.18-7.25 python学习心得
学习心得这周学习时间比较多，所以学习了第五章和第六章的内容，每学习完一小节都认真地做好课后练习，巩固记忆，以下是做的笔记。第五章学习笔记1.一个等号是陈述，car = ‘audi’解读为“将变量car的值设置为’audi’”。两个等号是发问，对于"car == ‘bmw’，可解读为“变量car的值是‘bmw’吗？2.使用and 和 or可以检查多个条件；3.要判断特定的值是否已包含在列表...
2019-07-25 14:31:03
129
原创 7.11-7.18 学习心得
学习心得这周学习了第四章内容——操作列表，每学习一章的内容就会练习后边的习题，加深记忆。下面是为方便记忆做的一些笔记。笔记1.换行符“\n”；2.函数range()让python从你指定的第一个值开始数，并在到达你指定的第二个值后停止，因此输出不包含第二个值。如：要指定数字1-5，需要使用range（1，6）；3.函数list()将range（）的结果直接转换为列表；4.使用rang...
2019-07-17 16:32:35
144
原创 7月4日-7月11日Python学习笔记
这里写自定义目录标题学习心得学习笔记遇到问题学习心得这周主要学习了书上的第三章–列表简介每学习完一小节就会将所有的课后习题都做完，这个学习方法还不错，只有真的上手打代码才能记得更加清楚。以下是我为了方便记忆做的一些笔记。学习笔记1.在Python中，用方括号（[]）来表示列表，并用逗号来分隔其中的元素；2.要访问列表的任何元素，都可将其位置减1，并将结果作为索引；3.通过将索引指定...
2019-07-10 18:21:09
90
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人