- 博客(30)
- 收藏
- 关注
RSS订阅原创 CondaHTTPError: HTTP 000 CONNECTION FAILED问题解决
CondaHTTPError: HTTP 000 CONNECTION FAILED问题解决
2023-11-17 22:52:52
994
原创 scp命令传输文件（包括带端口的传输，使用秘钥传输，以及文件夹传输示例）
Linux scp 命令用于 Linux 之间复制文件和目录。scp 是 secure copy 的缩写, scp 是 linux 系统下基于 ssh 登陆进行安全的远程文件拷贝命令。scp【本地或远程文件的路径】【服务器用户名】@【服务器地址】：【远程或本地文件的路径】-1： 强制scp命令使用协议ssh1-2： 强制scp命令使用协议ssh2-4： 强制scp命令只使用IPv4寻址-6： 强制scp命令只使用IPv6寻址-B： 使用批处理模式（传输过程中不询问传输口令或短语）
2023-11-16 16:54:07
2978
原创 PyTorch中余弦相似度计算及应用
余弦相似度是衡量两个向量之间相似程度的一种常用方法，特别在机器学习领域中，它经常被用于比较两个向量之间的相似性。在PyTorch中，计算余弦相似度非常简便，本文将介绍如何在PyTorch中使用余弦相似度
2023-11-11 00:09:45
1003
原创 自然语言模型（LM）之Tokenizer的介绍（3）--SentencePiece
SentencePiece是谷歌推出的子词开源工具包，它是把一个句子看作一个整体，再拆成片段，而没有保留天然的词语的概念。
2023-11-09 23:42:43
727
原创 自然语言模型之tokenizer的介绍（2）--wordpiece
WordPiece是一种用于分割和表示文本的子词分割技术。它是由Google研究员开发的，用于提高机器翻译和自然语言处理任务的性能。WordPiece将文本分割成更小的子词单元，从而可以更好地处理语言中的复杂性。
2023-11-09 00:39:15
294
原创 Dataloader中pin_memory参数的使用及注意事项
在DataLoader中，pin_memory参数是一个关键的选项，它可以显著提高训练速度，但需要谨慎使用。在本博客中，我们将介绍pin_memory参数以及使用它的注意事项。
2023-11-06 23:51:21
5216
3
原创 错误解决：RuntimeError: CUDA error: device-side assert triggered
解决错误：RuntimeError: CUDA error: device-side assert triggered
2023-11-06 00:53:01
237
原创 pytorch中scatter函数的用法
当在PyTorch中需要根据指定的索引来将值分散（scatter）到张量的特定位置时，可以使用scatter函数。
2023-11-04 23:48:08
415
4
原创 多GPU训练模型--使用DistributedDataParallel
本文介绍DistributedDataParallel的简单使用流程。DistributedDataParallel是Pytorch中用于支持分布式训练的模块，允许在多个GPU和多台机器上训练深度学习模型。
2023-11-03 23:20:03
116
原创 python中针对同一目录或不同目录下的其他文件或文件夹的import用法
在Python中，import关键字用于导入其他文件或模块的内容，让你可以在当前文件中使用这些内容。下面我将介绍如何使用import来导入同一目录或不同目录下的文件或文件夹。
2023-06-28 21:41:23
10072
1
原创 使用chatgpt的api实现个人聊天机器人demo（可实现多轮对话）
之前写过一篇文章，初步实现调用chatgpt的api实现与机器人的对话，但是并没有提及多轮对话如何实现。在这篇文章中，我将介绍如何利用openai的api实现聊天机器人的多轮对话。定义一个变量history存放历史记录，这是实现多轮对话的关键。content：对话的内容。model：所采用的模型。如果用户输入‘stop’，则停止对话。
2023-05-30 18:19:55
2678
原创 ssh将服务器端口转发到本地
iterm2连接实验室服务器，在远程某端口启动服务后，希望在本地浏览器上查看可视化界面，先通过端口转发到本地端口，再在浏览器上查看本地端口
2023-03-23 16:51:29
1499
原创 （项目必备）python读写常见文件各种方式（json，csv，excel）
最近做项目，由于经常要读写一些文件并进行处理，总是需要上网搜索相关读写代码，效率有些低。故在此总结一下常见文件的python读写方式，形成一个工具库，便于自己使用。
2022-10-23 14:59:14
1021
原创 pandas读取excel文件并读取某一列
andas读取excel文件（xlsx后缀），得到DataFrame格式数据，从而能够对其进行处理。
2022-08-22 15:12:01
8903
1
原创 itertools.chain.from_iterable用法
以单个迭代器为输入，并且该输入每个元素也应该是可迭代的返回一个迭代器，包含输入iterable的所有元素的展品的iterableitertools.chain.from_iterable(iterable)示例：import itertoolssplit_task_list = {'train':["MNLI", "MRPC", "SST-2", "QQP", "QNLI", "RTE", "SNLI"], 'val':["MNLI", "MRPC", "SST-2", "QQP", "Q
2022-02-23 11:59:53
1370
原创 分类问题常用算法——SVM概述
SVM（支持向量机）是一种分类模型，作为机器学习中很基础的一个知识点，本文将对其进行一个较简洁并且容易理解的描述，也是自己的一个复习，若有疏漏，请多指正。
2022-02-08 21:20:28
2330
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人