- 博客(36)
- 收藏
- 关注
RSS订阅原创 一个例子搞懂模型训练和参数更新的过程
模型训练和更新参数的过程是机器学习中的核心。这个过程通常涉及多个步骤，包括前向传播、损失计算、反向传播和参数更新。
2024-04-19 11:21:04
552
原创 使用 Docker 容器来安装和使用特定版本的 CUDA
最近配置一个模型运行环境时,由于模型需要的一些依赖库包括tensorflow,CUDA的的等版本与系统原有cuda冲突,使用conda配置了半天还是没能解决,因此改用docker来配置环境,以达到与主机系统完全隔离的目的.
2024-04-16 14:03:09
574
原创 curl: (7) Failed to connect to 127.0.0.1 port 7890: Connection refused
Failed to connect to 127.0.0.1 port 7890: Connection refused” 表明 curl 尝试通过本地的 7890 端口作为代理访问互联网，但此端口没有响应。这通常是因为本地代理服务器（如 Shadowsocks 或类似服务）未运行或配置错误。直接在命令中忽略代理:为了确保 curl 命令不使用代理，可以在命令中显式地忽略代理设置。
2024-04-16 11:17:30
591
原创 Prompt Learning：人工智能的新篇章
Prompt learning是一种新兴的机器学习方法，它通过在训练数据中嵌入特定的提示（prompts）来引导模型学习。这种方法的灵感来自于人类学习过程，我们在学习新概念时往往会通过问题和提示来加深理解。Prompt learning的核心在于，它能够使模型在面对新任务时表现出更好的泛化能力。
2024-03-13 19:59:58
1768
原创 Prompt Engineering（提示工程）
Prompt 工程是大模型应用的一个关键环节，它通过设计有效的提示语句来引导模型的行为，从而提高模型的性能和适用性。随着人工智能技术的不断发展，Prompt 工程将会成为一个越来越重要的研究领域，为大模型的应用开辟更广阔的天地。
2024-03-13 19:32:46
783
原创 探索机器学习：智能时代的魔法
想象一下，如果你的电脑或手机能够像孩子一样学习新事物，而且速度更快、记忆力更好，那就是机器学习的魅力所在。机器学习让机器通过海量数据的“熏陶”，自我进化，无需人类一步步指导，便能识别图像、理解语言，甚至预测未来。
2024-03-12 20:20:25
471
原创 指令微调（Instructional Fine-tuning）
指令微调（Instructional Fine-tuning）是一种自然语言处理（NLP）技术，特别是在大型预训练语言模型（如 GPT、BERT 等）的应用中。在指令微调中，模型被进一步训练以更好地理解和遵循人类给出的指令或命令。这种方法可以提高模型在特定任务上的性能，使其能够根据给定的指令生成更准确的结果。
2024-03-12 10:05:27
1376
原创 LLM(大语言模型)常用评测指标-困惑度（Perplexity）
困惑度（Perplexity）是自然语言处理（NLP）中常用的一种评估语言模型的指标。它衡量的是模型对测试数据的预测能力，即模型对测试集中单词序列出现概率的预测准确度。困惑度越低，表示模型对数据的预测越准确。
2024-03-11 11:05:42
1507
原创 LLM(大语言模型)常用评测指标-BLEU
BLEU 是一种广泛用于自然语言处理领域，特别是在机器翻译评估中的评分方法。它通过比较机器翻译输出和一个或多个人工翻译的参考翻译来计算分数，以此来评估翻译的质量。
2024-03-11 09:22:53
1046
原创 LLM(大语言模型)常用评测指标之F1-Score
F1-Score 是一种常用于评估分类模型性能的指标，特别是在数据不平衡的情况下。它是精确度 (Precision) 和召回率 (Recall) 的调和平均值，用于衡量模型对正类的预测能力。其中，TP (True Positives) 是真正类的数量，FP (False Positives) 是假正类的数量。因此，该模型的 F1-Score 为 0.761，反映了模型在平衡精确度和召回率方面的性能。：是指正确预测为正类的数量与所有预测为正类的数量之比。：是指正确预测为正类的数量与实际正类的数量之比。
2024-03-10 16:44:52
1005
原创 LLM(大语言模型)常用评测指标-MAP
MAP (平均平均精度) 是一种常用于评估信息检索系统、推荐系统或其他排名模型的性能指标。它特别适用于任务中涉及到返回一组排序结果的场景，如搜索引擎、推荐系统、图像检索等。
2024-03-10 16:40:25
574
原创 LLM(大语言模型)常用评测指标-MAP@R
MAP@R 通常用于评估搜索引擎、推荐系统、文本检索、图像检索等领域中的模型性能，特别是在关注顶部结果的精确性时。
2024-03-10 16:33:40
465
原创 并行训练和分布式训练
并行训练（Parallel Training）和分布式训练（Distributed Training）都是深度学习中提高训练效率和加速训练过程的方法，它们利用多个计算资源（如多个GPU或多个服务器）来同时执行训练任务。
2024-03-10 16:23:41
611
原创 预训练和微调
预训练（Pre-training）和微调（Fine-tuning）是深度学习中常用的两个概念，特别是在自然语言处理（NLP）和计算机视觉（CV）等领域。这两个过程通常是顺序进行的，先进行预训练，然后进行微调。
2024-03-08 09:38:39
1006
1
原创 TypeError: WikipediaQueryRun._run() got an unexpected keyword argument ‘search‘
Gemini api使用agent代理调用进行维基百科搜索时遇到报错:`TypeError: WikipediaQueryRun._run() got an unexpected keyword argument 'search'`
2024-03-07 20:17:45
316
1
原创 ValueError: ‘..../agent_toolkits‘ is not in the subpath of ‘/n the subpath of ‘/langchain_corre‘ OR
ValueError: '/home/dell/anaconda3/lib/python3.11/site-packages/langchain/agents/agent_toolkits' is not in the subpath of '/home/dell/anaconda3/lib/python3.11/site-packages/langchain_core' OR one path is relative and the other is absolute.
2024-03-07 10:23:01
203
1
原创 ImportError: cannot import name ‘URL’ from ‘sqlalchemy’
ImportError: cannot import name ‘URL’ from ‘sqlalchemy’
2024-03-06 10:25:04
589
1
原创 ValidationError: 2 validation errors for DocArrayDoc returned when try to execute the RAG Search Exa
ValidationError: 2 validation errors for DocArrayDoc
2024-03-06 10:19:03
201
1
原创 DefaultCredentialsError: Your default credentials were not found. To set up Application Default Cred
DefaultCredentialsError: Your default credentials were not found. To set up Application Default Credentials, see https://cloud.google.com/docs/authentication/external/set-up-adc for more information.
2024-03-06 09:59:11
833
1
原创 Gemini api 报错 IndexError: list index out of range
经过查阅，是gemini内容过滤器将生成的内容过滤导致返回的内容为空，因此在安全设置中将过滤器禁止即可，在代码response请求时，添加 safety_settings。在使用Gemini api批量访问时报错 IndexError: list index out of range。
2024-03-03 20:24:27
237
原创 Failed building wheel for sentencepiece
【代码】Failed building wheel for sentencepiece。
2023-12-05 15:26:28
489
原创 张量和向量
张量（Tensor）和向量（Vector）都是数学中的概念，它们在线性代数和深度学习中有着重要的应用。简而言之，向量是一维的，可以看作是一阶张量，而张量是一个更广泛的概念，可以有多个维度。在深度学习中，张量是非常重要的数据结构，用于表示和处理多维数据。
2023-11-07 15:07:08
994
1
原创 解决 “E: 仓库xx没有 Release 文件。N: 无法安全地用该源进行更新，所以默认禁用该源”
【代码】解决 “E: 仓库xx没有 Release 文件。N: 无法安全地用该源进行更新，所以默认禁用该源”
2023-05-02 20:52:40
8205
原创 kali linux重启网卡失败：Job for networking.service failed because the control process exited with error...
1.取消勾选dhcp2、配置静态ip（ip地址和默认网关查看虚拟网络编辑器）(1)vim /etc/network/interfaces(2)vim /etc/resolv.conf3、重启网卡配置，命令 systemctl restart networking 或者 service networking restart 4、报错：Job for network.service failed because the control processexited with
2022-01-06 16:34:01
9580
2
原创 mkvirtualenv: command not found 问题
1、执行以下命令sudo pip install virtualenvsudo pip install virtualenvwrapper2、 找到virtualenvwrapper.sh所在的位置find / -name 'virtualenvwrapper.sh'3、修改bashrc文件vim .bashrc在文件末尾添加两行代码，保存退出export WORKON_HOME=~/.environmentssource /usr/share/virtualenvwrapper/v
2021-12-09 10:28:05
1646
原创 利用桥接联网实现虚拟机下window7和linux kali互ping
1.确保主机已经联网且不要用校园网！（可用手机热点）2.vmware 编辑->虚拟网络编辑器,VMnet0勾选桥接模式，桥接至主机所用网卡，无线网络为 Wireless LAN3.vmware 虚拟机->设置->网络适配器，勾选自定义，选择VMnet03.此时虚拟机下win7可上网，若不能，在网络设置中更改为家庭网络4.kali进行静态ip配置查看主机ip地址和网关修改 kali下interfaces文件vim /etc/network/interfaces
2021-10-08 15:55:57
3641
原创 使用xshell实现linux kali远程登录
1.下载xshell,使用邮箱申请个人免费版https://www.netsarang.com/en/xshell/2.ifconfig查看虚拟机ip地址3.xshell新建会话，输入用户名密码4.连接遇到报错解决办法：（1）开启linux ssh服务：service ssh start（2）修改 vim /etc/ssh/sshd_config将 PermitRootLogin 这一项改成 yes（3）重启ssh服务 ：service ssh restart（4）xsh
2021-10-05 14:49:26
183
原创 AJAX与fastapi使用post传数据时出现 422 Unprocessable Entity
客户端传参名必须与服务端参数名一致！客户端：服务端
2021-09-25 09:24:50
5965
原创 python 使用 Crypto.PublicKey.RSA遇到的问题:from Crypto.PublicKey import RSA ModuleNotFoundError: No module
from Crypto.PublicKey import RSA ModuleNotFoundError: No module named ‘Crypto’解决方法：（1）安装pycryptodome库 pip install pycryptodome如果site-packages中存在crypto、pycrypto，在pip之前，需要pip uninstall crypto、pip uninstall pycrypto，否则无法安装成功。（2）安装完成后将site-packages中cr
2021-09-24 15:24:37
7901
原创 pycharm安装gmpy2
1.安装whell（轮子） https://www.lfd.uci.edu/~gohlke/pythonlibs/2. 下载好后，把文件拖入到python38的Scripts文件夹里3.打开终端，使用cd命令进入Scripts文件夹使用如下命令参考 https://www.jb51.net/article/194349.htm...
2021-09-24 14:56:49
1193
原创 pip 安装错误Fatal error in launcher: Unable to create process using ‘“‘
pip 安装错误Fatal error in launcher: Unable to create process using ‘"’双版本python问题：将命令改为 python3 -m pip install
2021-09-24 14:37:39
105
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人