- 博客(8)
- 收藏
- 关注
RSS订阅原创 有约束的MDP（Constrained MDP, CMDP）——强化学习处理
1、如果约束是对每个时隙的约束，比如，稍微复杂一点的，不同约束条件中的变量的重叠的，即约束条件之间是有耦合关系的（我猜这就是耦合），或者稍微简单一点的，一个约束条件是所有任务的计算功率总和不超过阈值。此时，可以直接根据拉格朗日对偶的原理（见下面）：以在功率阈值的约束下，最小化（平均）时延为例，1）在每个时隙中，把约束条件写到目标函数上形成L(x,λ)，2）在每个时隙，做了个动作后（有了个x），希望改变λ以让L(x,λ)最大（若x在约束条件内，则最大时约束项为0，L(x,λ)=D(x)，若x不在约束条件内，则
2021-07-27 22:15:42
4525
原创 神经网络计算梯度的过程、大样本集为何要用mini-batch
若只有一个样本（x,y），x,y均为向量，则将x输入神经网络，输出y’，然后y’-y，然后再对他的每个元素平方后相加，即得损失函数，这个函数对每个w求导后即得你要的梯度。如果有个样本集，则，样本集的多个x组成矩阵X，将其输入神经网络，则神经网络将也会输出多个y’组成的矩阵Y'，然后Y’-Y，然后再对他的每个元素平方后相加，即得损失函数，这个函数对每个w求导后即得你要的梯度。这里，每个元素都是关于w的函数，元素数等于 （样本数 *y的维度），那如果样本数越多，则计算梯度时的计算量就越大。所以，会有S.
2021-07-02 16:13:15
293
原创 matlab在mac上的仿真图到非mac电脑上文字模糊
用word写论文需要插仿真图，一开始是在mac电脑上跑的仿真，将仿真图复制到word中，图是清晰的。但是老师那边看到的word中仿真图的文字严重不清晰。怀疑是mac分辨率比较高的问题。总之，在非mac电脑上重新仿真即可。...
2020-07-31 18:18:12
273
原创 模拟、数字基带/频带通信系统：编码、信源/信道编码、调制、码间串扰
关于模拟信号和数字信号模拟信号就是sinx这种，数字信号就只有脉冲那种吧。计算机内部或印制电路板内机箱内才可以发没有编码过的数字信号（可以传直流分量）（《通信原理》樊昌信P139）（其实只有数字基带信号没有数字带通信号吧，数字信号一经过调制就变成模拟信号了），局域网可以发数字基带信号，发的也是数字信号（在LAN中又有数字调制过的频带信号，又有数字基带信号）。无线信道、传统的电话信道、计算机网络...
2019-11-08 19:52:37
4403
原创 边缘智能（edge intelligence）
以前海量数据是从数据中心产生的（如淘宝浏览记录），若想将这些数据将以利用去训练神经网络（大数据和AI的结合可以有效利用大数据，蓬勃发展AI），则在数据中心旁搭建自己的大数据处理平台，或者租用云计算服务器。而未来随着物联网的发展，大部分数据将从边缘用户设备上产生（智能手环监测数据、各类传感器），此时若想使用AI对这些大量的数据加以挖掘利用，则需要利用边缘网络设备或用户设备的计算能力。总之，边缘智能主...
2019-10-30 20:18:29
2609
1
原创 智能家居--有意思的方向思考
所谓智能，就是仿佛他自己动脑子了一般，才可以提供的服务。智能家居：单身——晚上在家能干的事有工作、吃饭吃水果喝水、看电视、打游戏、看手机、健身、睡觉。根据一天发生的事、他的习惯、他进门时的情绪判断他今晚想要干什么事，把家调成他最想要的样子。吃饭、吃水果：例如手表通过分析今天他收到的消息发现他今天没时间回家做饭且在公司没吃饭的话，让家里点餐设备自动点餐（根据身体状况和喜好习惯），快递员把...
2019-10-30 10:33:32
214
原创 理解Welch Powell法求m色优化问题
图着色问题包含两个子问题：m色优化问题：求最少需要几种颜色m色判断问题：判断用m种颜色够不够这两个问题可以用贪心算法、非贪心算法、回溯算法（时空复杂度高）来解。其中，用贪心算法来解这两个问题时，可以用Welch Powell法来求出子问题一的上界：m色优化问题（不知道能不能解子问题二）。（来自《图着色算法研究及其在时间表问题中的应用》）Welch Powell法：1、按...
2019-05-18 12:28:42
2540
原创 详解PHP json_decode的TURE
【以下"红粗"代表PHP代码，"黑细"代表在该代码作用下的页面返回。】总结对json进行解析：[ { "id" : "5b554a7df297cb2830ba5be7", "header" : "{ \"endpointKeyHash\" : { \"string\" : \"x8T4iIiKfrjE2YIOQRhWuuG59Fs=\&q
2018-07-24 13:54:35
1305
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人