- 博客(21)
- 收藏
- 关注
RSS订阅原创 InternLM + LangChain RAG 实践项目——动漫知识大模型(1)
在做完RAG的demo后，想再深入学习一下RAG对于大模型输出效果的提升，想做一个动漫知识大模型，想着自己实践一下。
2024-09-26 14:44:46
328
原创 书生浦语大模型实战营第三期 L2 MindSearch 快速部署学习笔记
最后，将 /root/mindsearch/mindsearch_deploy 目录下的文件（使用 git）提交到 HuggingFace Space 即可完成部署。硅基流动提供了免费的 InternLM2.5-7B-Chat 服务，MindSearch 的部署与使用进一步降低了部署门槛。来准备 API Key。首先创建新 API 密钥，然后点击密钥进行复制，以备后续使用。来注册硅基流动的账号，在完成注册后，打开。
2024-08-28 10:36:58
332
原创 书生浦语大模型实战营第三期 L2 茴香豆：企业级知识库问答工具学习笔记
这里参考一位用户分享的b站会员有关acg内容相关的答题题库，利用茴香豆搭建一个动漫知识的问答助手，在 huixiangdou 文件加下创建 repodir 文件夹，用来储存知识库原始文档。知识库创建成功后会有一系列小测试，检验问题拒答和响应效果，如图所示，关于“mmpose 安装”、“请问ncnn全称是什么”等问题，不在知识库范围内，测试结果显示拒答，说明我们的知识助手工作正常。可以看到给出的回答相对来说还是比较准确，且有出处的。命令进行向量知识库的重新创建和应答阈值的更新。
2024-08-27 14:30:18
270
原创 书生浦语大模型实战营第三期 L2 Lagent 自定义Agent智能体学习笔记
实现一个调用 MagicMaker API 以完成文生图的功能。'dongman', # 动漫'guofeng', # 国风'xieshi', # 写实'youhua', # 油画'manghe', # 盲盒else:else:@tool_apiArgs:Returns:"""try:}),最后，修改# 添加# 在第27行添加# 在68行修改模型名称。
2024-08-13 10:40:50
423
原创 XTuner 微调个人小助手实践学习笔记(2)
由于之后想自己微调一个角色扮演的小助手，于是先试着微调一下公开数据集，练练手，后续再自己准备数据集。
2024-08-12 15:27:01
377
原创 书生浦语大模型实战营第三期 L2 LMDeploy量化部署实践学习笔记
启动后就可以与InternLM2-Chat-1.8B大模型对话了，输入问题，然后需要按两下回车键（这里得注意，之前没注意还以为卡住了这么慢），速度确实比之前使用Transformer库来运行模型的速度快。Function call，即函数调用功能，它允许开发者在调用模型时，详细说明函数的作用，并使模型能够智能地根据用户的提问来输入参数并执行函数。InternVL2-26B需要约70+GB显存，但是为了能够在50%A100上运行，需要先进行量化操作，这也是量化本身的意义所在——即降低模型部署成本。
2024-08-08 10:57:32
843
原创 书生浦语大模型实战营第三期 L1 OpenCompass 评测 InternLM-1.8B实践学习笔记
上海人工智能实验室科学家团队正式发布了大模型开源开放评测体系 “司南” (OpenCompass2.0)，用于为大语言模型、多模态模型等提供一站式评测服务。
2024-08-05 19:15:01
635
原创 书生浦语大模型实战营第三期 L1 XTuner 微调个人小助手实践学习笔记
任务：使用 XTuner 微调 InternLM2-Chat-1.8B 实现自己的小助手认知。
2024-08-05 15:14:30
297
原创 书生浦语大模型实战营第三期 L1 InternLM + LlamaIndex RAG 实践学习笔记
结果如下，加入xtuner项目的说明文档后，大模型可以回答出“xtuner是什么?--local-dir后接本地下载的地址，运行该代码，完成源词向量模型。
2024-07-30 16:55:32
302
原创 书生浦语大模型实战营第三期 L1 浦语提示词工程实践学习笔记
近期相关研究发现，LLM在对比浮点数字时表现不佳，经验证，internlm2-chat-1.8b (internlm2-chat-7b)也存在这一问题，例如认为。的提示词专家助手，国内有KIMI与LangGPT合作的提示词专家网页服务，更方便一些，模型返回结果是13.8大于13.11，是对的，可能在这方面做了优化。利用LangGPT生成数学专家提示词，github上是。：利用LangGPT优化提示词，使LLM输出正确结果。还是不行，没有明显改进，留待后续继续优化。
2024-07-29 12:29:32
424
原创 书生浦语大模型实战营第三期 L1 8G玩转大模型Demo学习笔记
InternLM2-Chat-1.8B 模型的部署，并生成 300 字小故事。实战营ID2570。来启动我们的 Demo。
2024-07-25 15:50:31
191
原创 书生浦语大模型实战营第三期 L1 书生大模型全链路开源体系学习笔记
总结：书生·浦语大模型构建了全链路开源体系，并深入介绍了其发展历程与独特特点。大模型作为通用人工智能的关键路径，已展现出解决多元化任务与模态的强大能力。具体而言，书生葡语大模型凭借其超长上下文处理能力，实现了综合性能的全面飞跃，不仅支持结构化创作，还确保了数据分析的可靠性。此外，该模型还强化了内生计算能力并集成了先进的代码解释器，在多个能力维度上均取得了优异的评测成绩。
2024-07-24 16:39:32
275
原创 书生浦语大模型实战营第三期 L0 python学习笔记
下面是实现的一个wordcount函数，统计英文字符串中每个单词出现的次数。返回一个字典，key为单词，value为对应单词出现的次数。这里原本的示例代码中，最后的result是没有赋值的，在函数中加一行return sum即可。使用本地vscode连接远程开发机，进行debug。
2024-07-22 17:30:10
187
原创 书生浦语大模型实战营第三期 L0 linux学习笔记
不过这里我遇到了问题，vscode一直远程连接不上，后续我查了一下好像是由于最新版本vscode对于ubuntu不太支持...（开发机上是ubuntu20.04），后续懒得debug了，还是继续用Mobaxterm吧。首先是学习一些基础的linux基础知识，这里利用的是InternStudio开发机，原来远程连接我使用Mobaxterm多一些，不过感觉vscode确实要更方便一些，这次就刚好学一学怎么用。报名了书生浦语大模型实战营第三期，想学一学大模型相关的一些实践知识。
2024-07-22 10:38:11
209
原创 MMYOLO目标检测部署（CPU环境，mmcv2.0.1对应pytorch2.0.0）
导致，之前网上很多教程的解决办法是重装mmcv以适配pytorch版本，但mmcv与mmdet等库版本也需对应，且在requirements/mminstall.txt中也要求了指定版本，实际安装后为mmcv2.0.1，故换pytorch版本应更为稳妥。由于我想在CPU环境下先跑一下测试，根据官方教程装的pytorch版本是目前最新的torch2.1，后续查阅mmcv2.0官方文档，将torch版本更换后，其他环境安装均不变，即可解决报错，成功运行。完全按照教程一步步部署环境，最后测试时遇到了。
2023-10-08 14:07:57
975
原创 C语言实现稀疏矩阵运算，求解线性方程组问题（基于eigen）
近期导师让我将一个matlab代码改写成C，其中涉及到大量的矩阵运算和稀疏矩阵运算，经过一段时间的摸索和实践，记录一下这段时间的学习经验首先由于要基于C语言实现一些矩阵的运算，加减乘除，求逆，以及解线性方程组AX=B之类。这种矩阵运算自己写的话就有点浪费时间，而且效率肯定不会很高了...故选择eigen库，开源库不用考虑引用问题，且数据结构、函数等相对简单，安装方便，很好上手。Windows下Eigen + vs配置_wilsonass的博客-CSDN博客基础的一些矩阵定义及基础矩阵操作可参
2021-12-06 16:06:28
2908
3
原创 scikit-image 0.18.0版本计算PSNR、SSIM、MSE(Python代码)
由于版本问题，安装的最新版本的scikit-image，代码会报错：from skimage.measure import compare_ssim, compare_psnr, compare_mse将其改为：from skimage.metrics import mean_squared_error as msefrom skimage.metrics import peak_signal_noise_ratio as psnrfrom skimage.metrics import
2021-10-29 17:03:55
13925
5
原创 SARscape报错Attempt to call undefined function:等问题
安装好ENVI5.3.1+SARscape5.2.0以后，正打算试一试发现SARscape不能用报错：问题原因：参照ENVI官网新浪博客问题15中描述：电脑的操作系统是家庭版，这个原因也处理不了啊所以我猜测可能与版本不符有关。解决方案：安装ENVI5.3.1+SARscape5.2.1，并注意SARscape5.2.1默认安装到C盘，就可以正常使用SARscape了。参考博客：ENVI5.3+SARscape5.2安装教程SARscape_5.2.0和SARsca..
2021-08-08 16:28:17
3721
9
原创 ICEYE SAR数据介绍及相关预处理（使用SNAP）
前几日导师要求处理一些ICEYE卫星的SAR影像数据，以前没有接触过，不甚了解，发现关于此卫星影像数据的相关介绍及处理资料很少，故特此记录一下，方便大家一起交流学习。数据介绍：ICEYE官网ICEYE是近几年才发射的卫星，相关参数就不做赘叙，这里主要介绍一下他的主要数据：数据格式大致分为：SLC和GRD数据预处理：处理软件：SNAP（ENVI啥的都可以，不过我菜鸡一个还不太熟悉，官网有用SNAP处理的教程）SLC数据的处理感觉和哨兵差不多，预处理需要对其进行辐射定标、地形校正、极
2021-07-24 14:15:06
1843
3
原创 SNAP/PolSARPro 进行数据处理过程中地形校正/地理编码无法获取DEM的问题
说明：该问题是2021年1月前版本的SNAP会遇到的问题，以后的版本无此问题。SAR初学者，最近在学习snap和PolSARpro软件的使用，分别参考了一位大佬的两篇博客：06-SNAP处理Sentinel-1 IW SLC数据（极化SAR预处理）以及PolSARpro v5.1.3 处理Sentinel-1A SLC数据大佬的过程说明很详细了，但在实践的过程中，无法实现snap中的地形校正（包含地理编码），同样的，PolSARpro中地理编码的部分也无法实现，估计PolSARpro也是利用
2021-07-21 15:49:08
6289
26
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人