- 博客(30)
- 收藏
- 关注
RSS订阅原创 深度学习笔记（二）前馈神经网络（MLP）
神经网络的历史神经网络：1943反向传播：1960（改进于1986）卷积网络：1980（改进于1998）DBN：2006自动编码机：2006深度学习：2007神经网络的优缺点优点只要有数据就能用不依赖于人类对领域的理解可以用来建立非线性依赖关系的模型对噪声较为鲁棒即使输入的信息不完整也能够给出一些答案网络很容易维护缺点需要足够的数据对超参数敏感计算精度存在局限尚不具备可解释性前馈神经网络假设在输入与输出间存在对应函数f∗(x)=yf^*(x)=yf∗(x
2022-05-29 22:25:25
1523
原创 强化学习笔记（二）马尔可夫决策过程
马尔可夫性序贯决策：智能体状态会随时间发生转移马尔可夫性：未来状态只依赖于当前状态。这里涉及到对“状态”的定义。P[st+1∣s1,⋯ ,st]=P[st+1∣st]\mathbb P[s_{t+1}|s_1,\cdots,s_t]=\mathbb P[s_{t+1}|s_t]P[st+1∣s1,⋯,st]=P[st+1∣st]部分可观测：智能体不能获得环境的全部信息s，只能获得观测量ost≠ots_t\neq o_tst=ot部分情况可以通过观测量推测出状态，从而将部分可
2022-05-07 21:48:37
269
原创 强化学习笔记（一）强化学习基本概念
强化学习笔记目录强化学习概述马尔可夫过程动态规划⽆模型预测⽅法⽆模型控制⽅法基于逼近器实现的强化学习算法策略梯度⽅法基于博弈理论的强化学习强化学习基线算法逆强化学习深度强化学习什么是强化学习强化学习是一类基于最大化奖励的决策算法。面临的主要困难动作集不好定义奖励不好设定奖励可能非常稀疏只适用于可以进行大量实验的场景序贯决策过程智能体在特定环境中产生一系列的动作，而这些动作会改变智能体的状态。强化学习与其他机器学习算法的区别产生的动作可能会影响数据的分布
2022-05-03 15:58:28
668
原创 模式识别笔记（四）聚类、SVM、决策树
聚类聚类任务：给定一个度量标准，对样本集进行划分。不同的度量标准产生了不同的聚类方法。统计聚类、概念聚类距离、密度、连通性几种度量标准连续问题Minkowski度量：d(x,y)=(∑i=1d∣xi−yi∣q)1qd(\mathbf x,\mathbf y)=(\sum_{i=1}^d\vert x_i-y_i\vert^q)^{\frac1q}d(x,y)=(∑i=1d∣xi−yi∣q)q1Mahalanobis距离：d(x,y)=(x−y)TM(x−y)d(\mathbf x
2022-01-05 18:36:00
731
原创 模式识别笔记（一）概论、贝叶斯决策（参数估计、非参数估计）
概论人工智能：机器对人类智能的模仿人类智能：感知、学习、思考、语言、行动模式识别（机器感知）：将非结构化数据转化为结构化知识模式识别基本方法：特征提取、特征选择特征空间上的分类器分类器设计过程：选择分类器类型、设计损失函数/似然函数、训练（参数估计）数据集分类：训练集、验证集、测试集验证集：训练后在这一数据集上对模型进行评价、修改泛化性：测试数据上的分类性能过拟合：在训练集上性能好，但泛化性不好；分类器越复杂，数据量越少，越容易过拟合模式识别的分类表示方式分：统计
2022-01-05 14:43:25
1829
原创 炼丹笔记（一）MNIST
一、从SGDm到AdamMNIST是每个炼丹术士都要尝试的一颗丹药，众所周知，同一种丹药可能有着不同的数十乃至数百种丹方。在尝试了入门中的入门级丹方：三层FC夹BN并取得了98%纯度的好结果后，我开始尝试二级丹方：CNN。所用丹方为两层CNN接Pooling，后接两层FC，ReLU激活。在料想之中，FC都已经98纯了，CNN一出，那不是手到擒来？于是我手持SGDm款炼丹铲，向Model中加入了其他所需原料。但没想到的是，甫一测试，结果却没有显著变好（十轮还是在98%左右），而且还有一个奇怪的陡坡——这个
2021-05-19 16:07:55
254
原创 李宏毅课程笔记（常见架构）
一、CNN3*3卷积核，边缘补值，共享参数（filter）Convolutional Layer（卷积层）产生Feature MapPooling Layer（池化层）本身没有参数，是为了把图片变小减少运算量Max Pooling：在n*n个值中选择最大的那个作为代表Flatten把矩阵拉直成一个向量Spacial Transformer Layer二、Attentionword embedding每个输入一个输出Sequence Labeling、所有输入一个输出、Seq2Se
2021-05-14 18:23:30
147
1
原创 李宏毅课程笔记（机器学习基础
机器学习的分类从输出角度分类Regression（回归）：输出是一个值Classification（分类）：做选择题（需要准备好答案）用n维单位向量来表示一类SoftMax：yi′=ln(yi)∑ln(yi)y_i'=\frac{ln(y_i)}{\sum ln(y_i)}yi′=∑ln(yi)ln(yi)在两个Class的情况下softmax等价于两个sigmoidStructured Learning：产生一个有结构的机器学习的训练过程LossMAE（mean abso
2021-05-14 10:40:41
193
原创 深度学习的相关技术
深度学习的相关技术一、归一化（Normalization）功能：减缓乃至解决内部协变量偏移（internal covariate shift），加快梯度下降的求解速度，使得可以使用更大的学习率更稳定地进行梯度传播，甚至增加网络的泛化能力线性归一化yi=(xi−xmin)/(xmax−xmin)y_i=(x_i-x_{min})/(x_{max}-x_{min})yi=(xi−xmin)/(xmax−xmin)零均值归一化yi=xi−μσy_i = \frac{x_i-\mu}{\sig
2021-05-12 19:24:33
837
1
原创 一些有用的博客摘要
Linux命令执行的屏幕输出内容重定向到日志文件https://www.cnblogs.com/cssdongl/p/6679346.html
2019-06-11 17:20:33
313
原创 Selenium使用总结
创建使用代理的无头浏览器def get_driver(proxy={'ip': ip, 'port': port}): chrome_options = webdriver.ChromeOptions() chrome_options.add_argument('--headless') chrome_options.add_argument('--proxy-server=h...
2019-05-30 18:10:37
162
原创 C++访存（地址、指针、堆栈）
内存与地址如果把内存类比为一座城市，那么地址就是城市里的街道和门牌号。数据就像是居民，居住在房子里，每座房子都有一个地址。而房子都是为居民量身打造的，房子的面积单位不是平方米，而是字（byte，即8 bit）。在C++中，往往不仅要求你知道房子的地址，还要求你知道房子里居民的种族（类型）。指针C++中的指针是一种特殊的对象，专门用于保存地址。指针的类型实际上是以指针所指向的地址及其之后所保存...
2019-05-23 17:49:59
715
原创 readme写作指南
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...
2019-05-15 15:13:18
257
原创 Python重要包及其简要用法
pdfplumberOMG！怎么会有这么好用的pdf解析包？import pdfplumberpdf = pdfplumber.open(file_name)for page in pdf.pages: text = page.extract_text()中文也好用！真是太强大了！...
2019-05-10 21:58:37
655
原创 C++基础（语句、函数、类，基本类型、运算符）
目录基本概念语句块域注释语句基本语句声明语句赋值语句调用语句复合基本语句声明赋值语句赋值调用语句声明赋值调用语句条件语句if-else语句switch语句循环（迭代）语句for语句while语句do-while语句函数、类、模版类函数类模版类基本数据类型修饰符整数类型族浮点数类...
2019-05-08 18:32:55
235
原创 Scrapy爬虫框架学习
目录五大模块DownloaderSpiderItemPipelineScheduleEngine四个配置参数三个对象scrapy.http.Request常用属性常用方法Response常用属性常用方法Item两类中间件DownloaderMiddlewareSpiderMiddleware五大模块Downloa...
2019-04-29 01:28:07
129
原创 linux常用命令及其python调用
文件及文件夹夹操作以下path指路径名称，filename指文件名，-args指可用多种参数文件夹操作linux命令 作用 python调用 pwd 展示当前路径 cd path 切换文件夹 ls path 展示文件夹内容 os.listd......
2019-04-26 17:48:46
495
原创 PythonHTML解析
目录BeautifulSoup基础方法基本元素TagNameAttributesNavigableStringComment下行遍历tag.contentstag.childrentag.descendants上行遍历tag.parenttag.parents访问平行节点tag.next_siblingtag.next_...
2019-04-25 19:51:06
724
原创 Python爬虫反反爬总结
针对以下各反爬手段的反制措施Headers最基本的反爬手段，一般被关注的变量是UserAgent和Refer，可以考虑使用浏览器里的。其中的ContentLength字段requests包会填写，可以不用。Content-Type字段是post表单的格式，必须和网站的一样。UA待续拉黑高频访问IP数据量大用IP池（伪装成多个访问者），爬取速度要求低用sleep()（伪装成人...
2019-04-25 15:06:28
378
原创 re库的使用及正则表达式
常用正则表达式from re import compilepercent = compile('([1-9]?[0-9]|100)%’) # 百分比date = compile(r'20\d{2}-(0[1-9]|1[012])-(0[1-9]|[12]\d|3[01])’)time = compile("([01]\d|2[0-3]):([0-5]\d):([0-5]\d)")w...
2019-04-25 00:11:39
253
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人