52 文本预处理【动手学深度学习v2】（笔记）

最新推荐文章于 2024-08-13 17:25:37 发布
最新推荐文章于 2024-08-13 17:25:37 发布
阅读量64 收藏
点赞数
分类专栏： 动手学深度学习 文章标签： 深度学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hlllllllhhhhh/article/details/129897659
版权
本文介绍了Python中字符串处理的.strip()方法，用于去除两端空白。接着探讨了Word2Vec在自然语言处理中的应用。同时，解释了在Python类中如何通过__getitem__重载索引操作符[]，实现自定义对象的访问方式。
摘要由CSDN通过智能技术生成

一、代码

1、.strip() 移除字符串开头和结尾的空格

2、Word2Vec

3、python 类里面__getitem__就是重载了[ ]运算符

hlllllllhhhhh
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
52 文本预处理【动手学深度学习v2】
qq_53826699的博客
04-22 534
建立一个词表，将拆分的词元映射到数字索引;将文本转换为数字索引序列，方便模型操作。将字符串拆分为词元（如单词和字符）。将文本作为字符串加载到内存中。
[学习笔记]动手学深度学习v2
zhangyifeng_1995的博客
03-16 631
[学习笔记]动手学深度学习v2
动手学深度学习之文本预处理
qq_34563147的博客
02-14 357
文本预处理 文本是一类典型的序列数据，一篇文章可以看作是字符或单词的序列，当使用神经网络处理文本时，是无法直接作用于字符串的，需要对其进行预处理。本节将介绍文本数据的常见预处理步骤，预处理通常包括四个步骤： 读入文本； 分词； 建立字典将每个词映射到一个唯一的索引(index)； 将文本从词的序列转换为索引的序列，方便输入模型； 读入文本 以H. G. Wells的小说The Time Mac...
动手学深度学习 Task2学习笔记-文本预处理等
Aeroaz的博客
02-14 226
文本预处理；语言模型；循环神经网络基础 2.11-2.14 一、文本预处理 （1）读入文本 import collections import re #逐行读取文本 def read_time_machine(): with open('/home/kesci/input/timemachine7163/timemachine.txt', 'r') as f: lines ...
微博短文本预处理及学习研究综述
03-18
认为因短文本具有特征稀疏性和高度冗余性,微博短文本的预处理及学习方法研究已经成为微博信息挖掘及应用的关键,并在许多方面有着非常重要和广泛的应用。重点分析微博短文本的特性,并对微博短文本的预处理和学习方法...
动手学深度学习pytorch.pdf
02-26
《动手学深度学习PyTorch》是一本面向实践的深度学习教程，旨在帮助读者通过动手实践来掌握深度学习的核心概念和技术。这本书由Aston Zhang、Zachary C. Lipton、Mu Li和Alexander J. Smola等人撰写，最新版本为...
python:基于深度学习的文本预处理
05-06
采用深度学习进行文本预处理，整个过程代码简单，适合大多数人理解
《动手学深度学习》学习笔记
01-06
文本预处理 常见的四个步骤： 读入文本 分词 建立字典，将每个词映射到一个唯一的索引（index） 将文本从词的序列转换为索引的序列，方便输入模型 import collections import re def read_time_machine(): with...
动手学深度学习课程作业和答案
03-21
本资源"动手学深度学习课程作业和答案"提供了一个学习深度学习的实践平台，帮助学生和研究人员巩固理论知识，提升实战技能。 在深度学习中，我们通常会涉及以下几个核心概念： 1. **神经网络**：神经网络是深度...
Attention注意力机制
russwest44的博客
08-13 245
【代码】Attention注意力机制。
Depth Anything: Unleashing the Power of Large-Scale Unlabeled Data精读
最新发布
weixin_49053303的博客
08-13 397
这项工作介绍了 Depth Anything1，一个高度实用的解决方案，用于稳健的单目深度估计。我们不追求新的技术模块，而是旨在构建一个简单而强大的基础模型，以处理任何环境下的图像。为此，我们通过设计一个数据引擎来收集和自动标注大规模的未标记数据（约6200万），从而显著扩大数据覆盖范围，减少泛化误差。我们探讨了两种简单而有效的策略，使得数据规模的扩大变得有希望。首先，通过利用数据增强工具创建了一个更具挑战性的优化目标，迫使模型积极寻求额外的视觉知识并获取稳健的表征。
AI换脸模型（384-448模型430万底丹）
harryxia2014的博客
08-13 494
AI换脸模型（384-448模型430万底丹） 模型训练素材19万张来自于 1、香港中文大学CelebA预训练集-WF512版-量大角度全-11万5千张 2、DST全角度训练图集V3.1 WF512【2.6W张 6GB 】 3、女性人脸数据，预训练炼丹专用 4、补全SRC极限角度 5、全角度512分辨率7万张素材
大模型微调--文章2
sccum的博客
08-13 465
答案：冻结不需要更新的参数答案：bitfit的主要思想是改变某些层中的bias参数答案：离散的模板在自然语言处理（NLP）任务中，尤其是在与预训练语言模型交互时，是指以自然语言文本形式编写的固定提示或框架，用来引导模型生成特定的输出。这种模板是由人类直接设计或通过自动化方法生成的，由于其离散性和固定性，称为“离散的模板”。离散性是因为它们由固定的、不可分割的自然语言单元组成，具有明确的边界，并且在使用时作为一个整体来使用，不可分割。答案：指的是在输入数据的前面加上可以预训练的向量，在整个过程中进行迭代。
【Pre-training】Rethinking ImageNet Pre-training
bryant_meng
08-13 766
ICCV-2019。
直流电机（二）
liangwqi的博客
08-12 453
直流电机作为一个电磁装置，对于用户来说要哪些参数是他们关注的呢。• 额定功率PN：电机在铭牌规定的额定状态下运行时电机的输出功率(W/kW)• 额定电压UN：电机出线端额定电压(V )• 额定电流IN：电机出线额定电流(A)• 额定转速nN：(r/min,r.p.m)• 额定励磁电压UfN：(V)• 额定励磁电流IfN： (A)• 额定效率ŋN： (%)PN​UN​⋅IN​PN​UN​⋅IN​⋅ηN​。
深度学习-----------------多个输入和输出通道
Einstein·Jun
08-12 1101
①输入通道数是卷积层的超参数。②每个输入通道都有独立的二维卷积核，所有通道结果相加得到一个输出通道结果。③每个输出通道有独立的三维卷积核。
时空序列顶会文章
weixin_52153243的博客
08-12 541
ICLR 2024 时间序列（Time Series）高分论文 - 知乎 (zhihu.com)
22 注意力机制—Transformer
kaszxc的博客
08-13 164
和 seq2seq 有点类似，不同之处在于 Transformer 是一个纯使用注意力的编码-解码器编码器和解码器都有 n 个 Transformer 块每个块里使用多头（自）注意力（multi-head attention），基于位置的前馈网络（Positionwise FFN），残差连接和层归一化编码器和解码器中各有一个自注意力，但是在编码器和解码器中传递信息的是一个正常的注意力。
深度学习入门：动手学PyTorch
"动手学深度学习pytorch.pdf" 是一份深度学习的学习文档，专注于通过PyTorch框架进行实践教学。该文档由AstonZhang、ZacharyC.Lipton、MuLi和AlexanderJ.Smola合作编写，内容涵盖深度学习的基础知识、PyTorch的使用...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值