- 博客(22)
- 收藏
- 关注
RSS订阅原创 书生·浦语大模型实战营作业（四）
构建数据集，使用 XTuner 微调 InternLM-Chat-7B 模型, 让模型学习到它是你的智能小助手，效果如下图所示，本作业训练出来的模型的输出需要将不要葱姜蒜大佬替换成自己名字或昵称！将训练好后的模型应用部署到 OpenXLab 平台，参考部署文档请访问：https://aicarrier.feishu.cn/docx/MQH6dygcKolG37x0ekcc4oZhnCe。
2024-01-15 03:27:10
449
原创 书生·浦语大模型实战营笔记（四）
按照教程说的：假如显示bash: xtuner: command not found的话可以考虑在终端输入 export PATH=$PATH:'/root/.local/bin’不管用。XTuner的原理是LoRA和QLoRA，降低显存开销，只对大模型的部分进行训练。其中–prompt-template后跟的是底座模型，不同底座模型对应的参数不同。直接使用现成的大语言模型，在某些场景下效果不好，需要根据具体场景进行微调。最终重新安装一遍xtuner后解决的。
2024-01-15 03:26:46
495
原创 书生·浦语大模型实战营笔记（三）
外挂知识库，对用户的问题首先从知识库中找到相关回答，再把问题和回答交给大模型，可以提高知识储备。特点：个性化微调效果好，需要重新训练，无法实时更新，训练成本高。对于新的数据集，使用预训练数据集进行微调来符合新数据集。特点：可实时更新，新知识只要放到知识库中即可，较简单。1）数据库构建：加载源文件，转化为无格式字符串。prompt方面：迭代优化策略。检索方面：基于语义分割。
2024-01-11 06:16:41
475
1
原创 书生·浦语大模型实战营作业（三）
一开始的检索问答链输出结果，效果并不好，还有乱码。群里有人反映后助教说有可能是为了加速虚拟环境的创建，从本地的压缩文件创建导致的 bug。选择一个垂直领域，收集该领域的专业资料构建专业知识库，并搭建专业问答助手，并在 OpenXLab 上成功部署（截图，并提供应用地址）但是对GNSS这类专业性较强的知识效果还是不好，想针对这个问题构建知识库。bug修改后结果如下，感觉好多了，能看出检索问答链使用前后的输出区别。复现课程知识库助手搭建过程 (截图)
2024-01-11 06:15:39
394
1
原创 书生·浦语大模型实战营作业（二）
熟悉 hugging face 下载功能，使用 huggingface_hub python 包，下载 InternLM-20B 的 config.json 文件到本地（需截图下载过程）。使用 InternLM-Chat-7B 模型生成 300 字的小故事（需截图）。完成 Lagent 工具调用 Demo 创作部署（需截图）完成浦语·灵笔的图文理解及创作部署（需截图）可在路径下看到下载的config.json。多模态对话稍微有点弱智。
2024-01-10 00:56:13
439
1
原创 配置anaconda+CUDA+cudnn+pycharm深度学习环境
这里写自定义目录标题使用anaconda配置pycharm虚拟环境使用anaconda配置pycharm虚拟环境安装时到这一步注意选择第一项“添加环境变量”，否则需要手动添加。win+R打开cmd，输入：conda --version显示以下conda版本信息则说明安装成功了开始栏菜单搜索Anaconda Powershell Prompt，打开
2023-05-30 11:27:51
229
原创 普通Kriging算法笔记
区域内已知输入点坐标xi，对应值为zi=f(xi)；待插值点表示为x，估计值为z∗，真值为z1）待插值点可由一系列已知点的加权和表示，z=∑i=1nλizi2）区域内均值一致，即E[z]=μ；方差一致，即Var[z]=δ23）区域内距离和方差满足变异函数；
2022-11-19 17:38:40
553
原创 使用git gui备份代码至github
这里仅是记录如何上传代码至github备份，其他复杂的功能暂未涉及，以后再补充。创建respository首先在github上创建仓库；打开Git Gui，选择新建，选择相应的路径。
2022-01-22 22:54:00
247
原创 linux用法小结
anaconda下载和安装为了在服务器上配置环境且不影响其他人（项目），通常安装anaconda配置虚拟环境下载Anaconda3-5.3.1-Linux-x86_64.sh运行 sh Anaconda3-5.3.1-Linux-x86_64.sh然后开启安装，在安装过程中，基本上不断按回车或者yes默认就行了。不过注意最后一步有一个询问你是否安装vscode，emm如果你没有需要就输入no，毕竟在服务器里面都是用vim编辑器的，没必要多装一个新建anaconda环境https://blo
2021-11-29 21:58:01
1055
原创 论文图片导出
在写论文时，需要导出高清图片，常用的是matlab和visio，下面以这两者为例讲讲如何导出符合清晰度的图片。matlab文件-导出设置-渲染-分辨率-600dpi，选好后 应用于图形-导出 即可导出的图片为矢量格式，清晰度很好，大概有几十M。visio直接导出pdf格式，再将pdf转成bmp图片（或许有更简单的方法？）之前在导出pdf格式时遇到黑框的现象后来发现是导出时设置的问题。在导出选项中去掉‘符合PDF/A’即可：在线PDF转BMP网站：https://convertio.co
2021-11-14 16:46:20
1133
原创 CORS网信息导入奥维地图
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录一、常用的CORS站二、将CORS网经纬度导入奥维地图1.获取CORS站点名称2.导入到奥维一、常用的CORS站美国NOAA CORS 2000多个站（NCN）：ftp://geodesy.noaa.gov/cors/rinex/欧洲EPN CORS 500多个站：ftp://ftp.epncb.oma.be/pub/obs/全球MGEX CORS 500多个站（密度较小）：ftp://igs.ign.fr/pub/igs
2021-07-10 11:30:25
903
原创 gnss方程中参数可估性判断
在看论文过程中，常常会遇到一些文章对gnss观测方程进行了参数重整，获得新的有偏参数，如何判断这些新参数是否可估呢？判断参数可估性并在不可估（即设计矩阵秩亏）时给出参数
2021-05-30 20:52:03
1040
3
原创 利用Histcite+Web Of Science帮助领域文献了解
Web Of Science可以进行文献检索，但无法直观分析某领域内关键文献及引用关系图。结合Histcite软件，可以进行画图，分析重要节点文章，快速了解领域发展进程。下载Histcite：http://pan.baidu.com/s/1hsIwJzQ#list/path=%2F使用教程：https://zhuanlan.zhihu.com/p/20902898有一点需要注意：在WOS导出txt时，可能遇到没有“全记录与引用的参考文献”一项，在检索时选择数据库为：Web of Science核
2021-04-20 22:52:45
803
原创 RTKLIB-PPP精密单点定位代码不完全解读
corr_meas(ppp.c)static void corr_meas(const obsd_t *obs, const nav_t *nav, const double *azel, const prcopt_t *opt, const double *dantr, const double *dants, double phw, double *L, double *P,
2020-08-24 10:45:51
4419
原创 安装Cygwin并跑通CLASLIB
目录安装Cygwin编译CLASLIB中的SSR2OSR安装Cygwin由于CLASLIB的编译需要用到makefile，所以要安装一个在windows平台上运行的类UNIX模拟环境，官方建议的是Cygwin。安装教程看这里，并装好编译需要的包：https://blog.csdn.net/u010356768/article/details/90756742编译CLASLIB中的SSR2OSR打开Cygwin，cd进入D:\softwork\clas_test_library
2020-08-09 20:51:22
602
11
原创 用RTKLIB中的rtkpost进行ppp和spp定位（附用CUI rnx2rtkp 编译）
rtkpostrtkpost是一个后处理软件，可对采集到的数据进行后期处理定位；而rtknavi则是实时定位的软件数据集：obs选用rover_trimble.obs，这个数据所用的接收机比rover_ublox.obs要好一点ppp其中.obs是输入源数据，.sp3是精密星历，.clk是精密钟差，.pos是输出定位obs是动态数据，故选PPP Kinematic模式；如果是静态数据就选PPP Static；单频数据的话选L1；如果已知有哪些卫星的数据就选哪些，不清楚
2020-07-31 16:47:49
17087
33
原创 Clion中设置ROS开发环境
Clion中设置ROS开发环境在catkin_ws文件夹下sourcesource devel/setup.bash在catkin_ws文件夹下命令行打开clionsh /home/lvsijie/clion-2019.1.4/bin/clion.shclion中File/Open打开Cmakelist.txtclion中File/New Cmake Project from Source选择catkin_ws/src文件夹...
2020-05-31 21:21:38
322
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人