- 博客(19)
- 收藏
- 关注
RSS订阅原创 代价函数、梯度下降、cnn
e = aw^2+bw+c,a>0.根据代价函数，找出拟合效果最好的代价函数，找到使得误差代价最小的参数，即最低点。寻找最低点的过程，就是梯度下降。想找的数学模型在统计学中被称为预测函数，y = f(x),假设是直线即 y = wx+b,则称为线性回归（Linear Regression）。给定一些父亲和子女的身高数据， 找到一个数学模型，描述这种关系，从而预测一个人的身高。通信（信号—频率、调制）、物理、电路学、信号处理（滤波）、图像处理。e = aw^2+bw+c:代价函数（损失函数）...
2022-08-04 17:44:51
361
1
原创 pyltp库的安装
一、Pyltp库是什么？LTP提供了一系列中文自然语言处理工具，用户可以使用这些工具对于中文文本进行分词、词性标注、句法分析等等工作。pyltp 是 LTP 的 Python 封装，提供了分词，词性标注，命名实体识别，依存句法分析，语义角色标注的功能。二、Pyltp库的安装Pyltp库支持python2和python3。但是直接在python3.8进行安装会报错。pip install pyltp解决办法是安装低版本python，使用wheel1、我安装的是Anaconda3-4
2022-01-19 13:42:23
2857
4
原创 Ptyorch入门之张量
一、学习目标知道张量和Pytorch中的张量知道Pytorch中如何创建张量知道Pytorch中张量的常见方法知道Pytorch中张量的数据结构知道Pytorch中如何实现张量在cpu和cuda中转Z化二、张量Tensor1、什么是张量？张量（tensor）理论是数学的一个分支学科，在力学中有重要应用。张量这一术语起源于力学，它最初是用来表示弹性介质中各点应力状态的，后来张量理论发展成为力学和物理学的一个有力的数学工具。张量之所以重要，在于它可以满足一切物理定律必须与坐标系的选择无关的特
2021-12-07 22:36:48
763
原创 新更----初学Pytorch
Pytorch框架终、终、终于来了！！！(可能会迟到，但不会缺席!)一、什么是Pytorch？PyTorch是一个开源的Python机器学习库，基于Torch，用于自然语言处理等应用程序。2017年1月，由Facebook人工智能研究院（FAIR）基于Torch推出了PyTorch。它是一个基于Python的可续计算包，提供两个高级功能：1、具有强大的GPU加速的张量计算（如NumPy）。2、包含自动求导系统的深度神经网络。【取自百度百科】二、为什么是Pytorch？关于深度学习的框架（
2021-12-03 11:26:51
204
原创 8 爬虫之windows安装scrapy
1、通过cmd正常安装：pip install scrapy安装结果：结束。2、cmd异常：‘pip’ 不是内部或外部命令，也不是可运行的程序或批处理文件"解决措施：找到python下Scripts文件夹复制其路径添加到环境变量中：重复1操作。结束。3、无法自动安装scrapy下载whl格式的包安装，安装whl格式包需要安装wheel库，输入：pip install wheel。scrapy的whl包地址: http://www.lfd.uci.edu/~gohlke/py
2021-11-12 20:38:53
903
原创 深度学习之卷积神经网络
卷积神经网络（CNN）应用于图像识别、语音识别等。1、整体结构全连接（Affine层）VS CNN全连接：CNN：2、卷积层2.1 全连接层存在的问题当输入数据是图像时，图像通常是高、长、通道方向上的3维形状，全连接层输入时，需要将3维数据拉平为1维数据，如手写数字识别。因为全连接层会忽视形状，将全部的输入数据作为相同的神经元（同一维度的神经元）处理，所以无法利用与形状相关的信息。而卷积层可以保持形状不变。当输入数据是图像时，卷积层会以3维数据的形式接收输入数据，并同样以3维数据的
2021-11-11 19:26:42
2541
原创 IP地址与dos命令
一、 IP地址1、IP地址的定义给每个连接在Internet上的主机分配一个32位二进制地址。2、IP地址的版本IPV4与IPV63、IP地址的分类3.1 公有IP地址分类Inter NIC 机构分配给注册组织机构的IP地址。3.2 私有IP地址分类私有地址属于非注册地址，专门为组织机构内部使用。以下列出留用的内部私有地址：A类：10.0.0.0-10.255.255.255B类：172.16.0.0-172.31.255.255C类：192.168.0.0-192.168.255
2021-11-09 21:02:52
1470
原创 神经网络之输出层设计
一、输出层的设计神经网络可以用在分类问题和回归问题上，不过需要根据情况改变输出层的激活函数。一般而言，回归问题用恒等函数，分类问题用softmax函数。1、恒等函数和softmax函数恒等函数：将输入按原样输出，对于输入的信息，不加以任何改动地直接输出。softmax函数：图示：代码实现：import ...
2021-11-02 19:35:36
4278
原创 神经网络之损失函数
什么是损失函数损失函数（loss function）或代价函数（cost function）是将随机事件或其有关随机变量的取值映射为非负实数以表示该随机事件的“风险”或“损失”的函数。神经网络以某个指标为线索寻找最优权重参数。神经网络的学习中所用的指标称为损失函数（loss function）。这个损失函数可以使用任意函数，但一般用均方误差和交叉熵误差等。损失函数是表示神经网络性能的“恶劣程度”的指标，即当前的神经网络对监督数据在多大程度上不拟合，在多大程度上不一致。均方误差（MSE）yk
2021-10-31 19:49:22
10407
1
原创 7 爬虫学习之反爬与反反爬
一、常见的反爬手段和解决思路1、服务器反爬的原因 a、爬虫占总PV（PV是指页面的访问次数，每打开或刷新一次页面，就算做一个PV）比例较高，这样浪费钱（尤其是三月份爬虫【爬虫高峰期】）。 b、公司可免费查询的资源被批量抓走，丧失竞争力。 c、状告爬虫成功的机率小（法律的灰色地带）。 2、服务器常反什么样的爬虫 a、十分低级的应届毕业生 b、十分低级的创业小公司 c...
2021-10-28 20:14:04
1690
原创 6 爬虫学习之Selenium
一、selenium的介绍 Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，Selenium可以直接调用浏览器，它支持所有主流的浏览器，可以接受指令，让浏览器自动加载页面，获取需要的数据，甚至页面截屏等。 1、selenium运行效果展示import timefrom selenium import webdriver#创建浏览器对象driver =webdriver.Chrome(r'C:\Users\86151\Downloa...
2021-10-21 21:40:32
326
原创 5、爬虫学习之百度贴吧示例
鸠兹古镇贴吧页面标题、链接及翻页爬取。1、导入第三方库import requestsfrom lxml import etree 2、爬取思路 url----headers----发送请求，获取响应------从响应中提取数据（数据和翻页用的url）-------终结条件 3、url、headers ...
2021-10-16 17:23:40
201
原创 4 爬虫学习之数据提取
一、重点知识掌握 1、了解响应内容的分类 2、了解xml和html的区别二、响应内容的分类 1、结构化的响应内容 a、json字符串（字典） 可以使用re、json等模块来提取特定数据 json字符串的例子如下： ...
2021-10-16 15:53:40
160
原创 3 爬虫学习之requests模块
一、重要知识掌握 1、掌握headers参数的使用 2、掌握发送带参数的请求 3、掌握headers中携带cookie 4、掌握cookieJar的转换方法 5、掌握超时参数timeout的使用 6、掌握代理ip参数proxies的使用 7、使用verify参数忽略CA证书 8、掌握requests模块发送post请求 9、掌握利用requests...
2021-10-15 10:43:36
644
原创 1 爬虫是什么
一、爬虫的概念 网络爬虫就是模拟客户端（主要指浏览器）发送网络请求，接收请求响应，一种按照一定的规则，自动地抓取互联网信息的程序。 原则上，只要是客户端（浏览器）能做的事请，爬虫都能够做。 爬虫也只能获取客户端（浏览器）所展示出来的数据。二、爬虫的作用1、数据采集a、抓取微博评论（机器学习，舆情监控） b、抓取招聘网站的招聘信息（数据分析、挖掘） c、新浪滚动新闻 ...
2021-10-04 16:43:48
335
原创 神经网络基础知识 1
1、什么是神经网络？ 神经网络是由具有适应性的简单单元（神经元模型）组成的广泛并行互连的网络，它的组织能够模拟生物神经系统对真实世界物体所作出的交互反应。【Kohonen 1988】神经网络的一 个重要性质是它可以自动地从数据中学习到合适的权重参数。用图来表示神经网络的话，如图所示。我们把最左边的一列称为 输入层，最右边的一列称为输出层，中间的一列称为中间层。中间层有时 也称为隐藏层。“隐藏”一词的意思是，隐藏层的神经元（和输入层、输出 层不同）肉眼...
2021-10-04 00:45:39
457
原创 感知机简单逻辑电路实现
1.什么是感知机？感知机是由美国学者Frank Rosenblatt在1957年提出来的，是作为神经网络（深度学习）的起源的算法。 感知机接收多个输入信号，输出一个信号。这里所说的“信号”类似于电流或河流等具备“流动性”的东西。像电流流过导线，感知机的信号也会形成流，向前方输送信息。但是，感知机的信号只有“流/不流”（1/0）两种取值。两个输入神经元的感知机网络结构示意图 图示为接收两个输入信号的感知机。x1,x2为输入信号，y为输出信号，...
2021-09-19 15:21:35
692
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人