- 博客(41)
- 收藏
- 关注
RSS订阅原创 计算PCC，VIF，TOL，IG
新加一列——Label，滑坡点赋值为1，非滑坡点赋值为0，土地利用都是forest，没有参考价值，所以删去土地利用的列。高程 0.319816 1.384757e-08。7 坡度 13.297419 0.075203。距水系 0.298895 1.254533e-07。距道路 0.298421 1.316152e-07。年降雨量 0.241787 2.230360e-05。地形起伏度 0.258536 5.512872e-06。
2025-03-28 16:11:58
735
原创 （158点）数据集制作5——非滑坡点选择及因子提取
研究区选整个浙江省的话，非滑坡点四散，不在管道周围，因此应该根据管道位置，建立缓冲区，作为研究区，然后再选择非滑坡点。基于158个灾害点，构建数据集，需要在研究区内选择相同数量的非滑坡点，并提取相关环境因子进行分析。完整管段，直接建立缓冲区……再根据浙江省区域进行裁剪。github上这个工具箱具备以下功能，我使用非滑坡点生成这个功能。两个管段，分别建立【缓冲区】，在进行缓冲区【合并】。红色滑坡点，绿色非滑坡点。根据点提取因子属性，同。
2025-03-27 16:18:41
327
原创 （158点）数据集制作4——灾害点多指提取到点
如果想详细统计面要素内的要素值（比如岩性、土壤类型、土地利用），使用【空间连接】，如下图，一个个的把。如下图，各个图层已经准备就绪，点的shp文件也准备就绪，接下来按照点来提取各个图层的值。统一投影坐标系——WGS1984 UTM Zone 51N、统一分辨率为30m。最后是这样的，这土地利用类型除了forest就是空值，看来要剔除啊……多指提取到点，另外绘制一副包含所有因子的好看的图片！加入到158点的属性表中，注意！如下图，岩性、土类、土地利用属性都加上了。下一步还有非滑坡点的制作！
2025-03-26 14:31:32
169
原创 （158点）数据集制作3——土地利用、岩性、土壤类型、降水、NDVI、NDBI
浙江省500米分辨率归一化植被指数NDVI（2019年）——数据来自国家地球系统科学数据中心，每人每天只能申请5个数据下载。然后，进行一下投影。浙江省1：100万土壤类型图（2018年），忘记从哪获得了。数据也是来自OpenStreetMap，转换成投影坐标系。降水量数据怎么都是以市为单位的，有没有精度高点的数据啊。
2025-03-19 16:38:46
348
原创 ArcGIS如何裁剪想要形状的数据+如何根据某一属性设置颜色显示
文件夹右键，新建shapefile——>编辑里点击创建，然后就可以绘制想要的形状。点击颜色属性，找到符号系统，选择唯一值，然后在字段1下拉选择属性。
2025-03-19 13:39:39
426
原创 基于斜坡单元的机器学习模型预测滑坡易发性，考虑条件因素的异质性
共有22个基于扩展坡度单位的条件因子，相关性可以忽略不计（相关系数的绝对值小于0.3），包括高程（平均值和范围变量）、坡度（平均值、范围和STD变量）、剖面曲率（平均值变量）、平面曲率（平均值、范围和STD变量）、 地形湿度指数（平均变量）、NDBI（平均变量）、NDVI（平均变量）、道路密度（平均和范围变量）、排水密度（平均和范围变量）、土壤厚度（平均变量）、形状指数（平均变量）、紧凑度（平均变量）、坡向、岩性和到河流的距离。同时，基于坡度单元的条件因子的非均质性特征不能通过网格单元的平均值来综合考虑。
2025-02-12 10:40:33
1687
原创 频率比（滑坡易发性评估）
频率比模型基于滑坡发生的频率与各影响因素之间的关系来评估滑坡易发性。它通过计算每个影响因素不同等级或类别中滑坡发生的频率与整个研究区域内滑坡发生总频率的比值，来确定该因素对滑坡易发性的贡献程度。比值越高，说明该因素在该等级或类别下引发滑坡的可能性越大，对滑坡易发性的影响也就越显著。
2025-02-06 09:28:31
587
原创 根据kmz管段位置建立研究区域缓冲区
一开始对整个.kmz根据丽水区域做裁剪，没输出，后来想先建立缓冲再裁剪，也不行。搜了一下kmz文件，说是是 KML 文件（Keyhole Markup Language）的压缩版本，其中包含与地图或地理位置相关的标记、路径、区域、多边形和模型等信息。应该先把kmz解压一下可能。使用“kml转图层”——将kml或kmz文件转换为要素类和图层文件。【开始怀疑这步操作是否有用了】再利用丽水区域进行裁剪，只要丽水区域的管段。裁剪还是有这个报错——输入与输出的基准面发生冲突？？？？
2025-01-09 15:49:18
270
原创 贝叶斯因果推理
使用的贝叶斯可视化软件Netica主要包括三个步骤：结构学习、参数学习、推理分析。由于采用具有唯一子节点的朴素贝叶斯网 络结构（见图１），目标节点的条件概率表将会非常庞 大，进行参数学习时会作为模型变量极大地增加工作 量。因此，考虑到贝叶斯网络具有双向风险分析的能 力 ，为 了 简 化 结 构 ，本文提出了一种改进的发散朴素 贝 叶 斯 网 络 结 构。
2025-01-09 14:37:23
1110
原创 计算机网络基础——网络协议
1）利用子网数来计算在求子网掩码之前必须先搞清楚要划分的子网数目，以及每个子网内的所需主机数目。(1) 将子网数目转化为二进制来表示;如欲将B类IP地址168.195.0.0划分成27个子网：27=11011；(2) 取得该二进制的位数，为N；该二进制为五位数，N = 5(3) 取得该IP地址的类子网掩码，将其主机地址部分的的前N位置1即得出该IP地址划分子网的子网掩码。将B类地址的子网掩码255.255.0.0的主机地址前5位置 1，得到 255.255.248.02）利用主机数来计算。
2025-01-08 14:43:31
1402
1
原创 贝叶斯网络
学习贝叶斯的动机：１、不确定性推理２、高维稀疏表征问题：利用条件独立降低复杂度３、局部概率模型：贝叶斯网的因子分解４、有限状态转移的动态贝叶斯过程：因果推理与证据推理贝叶斯网络的有向无环图中的节点表示随机变量，它们可以是可观察到的变量，或隐变量、位置参数等。有因果关系（或非条件独立）的变量或命题，用箭头来连接。若两个节点间以一个单箭头连接在一起，表示其中一个节点是“因（parents）”，另一个是“果（children）”，两节点就会产生一个条件概率值。
2025-01-07 16:18:19
902
原创 关联、干预、反事实推理
不能仅仅根据观察到的两个变量之间的关联来合理推断两个变量之间的因果关系。相关性是对称的（双向箭头），而因果关系是不对称的（单向箭头）。Pearl在《The Book of Why:The New Science of Cause and Effect》中将因果关系分为三个层次（“因果关系之梯”），自底到顶分别是：关联、干预、反事实推理。最底层关联——就是我们通常意义下所认识的深度学习在做的事情，通过观察到的数据找出变量之间的关联性。
2025-01-02 16:25:25
1426
原创 12.26 学习卷积神经网路（CNN）
基于深度神经网络DNN实现的手写数字识别，将灰度图像转换后的二维数组展平到一维，将一维的784个特征作为模型输入。在“展平”的过程中必然会失去一些图像的形状结构特征，因此基于DNN的实现方式并不能很好的利用图像的二维结构特征，而卷积神经网络CNN对于处理图像的位置信息具有一定的优势。因此卷积神经网络经常被用于图像识别/处理领域。
2024-12-26 16:38:32
976
原创 12.25 VScode+jupyter使用
我的老电脑明明有GPU，之前运行过深度学习的代码发现找不到GPU，那我应该是配置torch的时候没有下载cuda，所以我新建了一个环境torch_cuda，通过nvidia-smi，可以看到自己电脑本身的GPU，我的是11.2，一般torch的cuda小于等于这个型号。在打开的 Jupyter 笔记本中，点击右上角的内核选择器，选择你已经配置好的 Python 环境。以及torch和python版本的对应。创建一个新环境，要新装jupyter。我用的是，预计是一个半小时。
2024-12-25 21:16:10
1432
原创 进阶岛-第6关-L2G6000-MindSearch 快速部署
MindSearch 是一个开源的 AI 搜索引擎框架，具有与 Perplexity.ai Pro 相同的性能。
2024-12-23 14:26:19
746
原创 笔记本通过HDMI转VGA线连接戴尔显示器，wifi不可用或网速变慢
设备管理器——>显示适配器——>第一个Intel……右键更新驱动、禁用设备再启动设备，目前来看好像好了。确实有网络了，但是网速非常慢。
2024-12-23 11:30:51
642
原创 12.20 根据经纬度坐标制作.shp文件
选择XY点数据，提前把坐标点写到txt文件，经纬度用逗号隔开。得到的是.gdb文件，再右键这个文件，导出为shp类型。
2024-12-20 16:59:25
416
原创 进阶岛-第4关-L2G4000-InternVL 多模态模型部署微调实践
通过接口来构造多轮对话管线，核心代码为：## 1.导入相关依赖包## 2.使用你的模型初始化推理管线## 3.读取图片（此处使用PIL读取也行）## 4.配置推理参数## 5.利用 pipeline.chat 接口 进行对话，需传入生成参数## 6.之后的对话轮次需要传入之前的session，以告知模型历史上下文。
2024-12-20 16:33:16
999
原创 3D爱心墙——如何构建自己的合照墙
从上面找了爱心墙的代码，只需要把img文件夹里的放入自己的8张照片，然后再html文件修改这部分及以下包含照片路径的地方，改成自己的照片就好。看看最后的效果呢，是会动的，可以跟着鼠标动，对照片的大小好像没要求，很容易改改。
2024-12-20 15:23:24
398
原创 12.18-19 GIS学习——基于GIS和DEM的地形地貌特征提取与分析 + 多值提取到点
今天过了两关书生实战营，也不要忘了学习GIS。今天学啥呢？今天学整一个浙江省丽水市的dem数据，试着提取出来，然后以栅格为单元，进行多值提取到点。坡向、坡度、高程差、平面曲率、剖面曲率、径流强度指数、地形湿度指数（TWI）、地形起伏度、地表粗糙度这里主要介绍三个在线转换工具mapshaperMapJS和geojson.io，其中前两个均可以进行；而另一个在线工具仅能实现。【我之前有shp边界数据，这里我也没试过】什么时候需要投影栅格？？？
2024-12-19 16:31:50
1770
原创 进阶岛-第3关-L2G3000-LMDeploy 量化部署进阶实践
要运行参数量为7B的InternLM2.5，由查询InternLM2.5-7b-chat的config.json文件可知，bfloat16所以我们需要大于14GB的显存，选择(24GB显存容量)，后选择，等状态栏变成运行中，点击，我们即可开始部署。在终端中，让我们输入以下指令，来创建一个名为lmdeploy的conda环境，python版本为3.10，创建成功后激活环境并安装0.5.3版本的lmdeploy及相关包。【我还使用之前的lagent虚拟环境，不想创新的了】
2024-12-18 16:05:34
1015
原创 进阶岛-第2关-L2G2000-Lagent 自定义你的 Agent 智能体
安装环境出现错误：解决办法：通过源码安装的方式安装 lagent。# 创建目录以存放代码安装torch要科学上网！！！
2024-12-18 13:06:22
850
原创 12.17 栅格单元的选择＋历史滑坡点的形式（点/面）＋CNN适合处理图像＋在表格数据上，树模型优于深度学习？
现在论文都是使用栅格单元来进行深度学习，栅格单元划分简单粗暴，斜坡单元符合地形特征。为什么使用栅格单元不用斜坡单元的几个原因：１、空间分辨率统一性：栅格单元具有固定的空间分辨率（如 30m × 30m 或 100m × 100m），这使得在广泛的地理区域内，数据能够统一管理和处理。无论是土地利用、坡度、降水量等数据，它们都可以在相同的栅格坐标系统中对齐，形成一个结构化的数据库，方便后续的分析与建模。２、标准化输入数据。
2024-12-17 19:40:50
935
原创 12.16 ArcGIS学习尝试
找到arcgis的python command prompt，然后pip install scikit-learn --user 以及pip install seaborn --user，注意！！！关掉代理服务器。ArcGIS pro工具箱，右键添加工具箱。谁能告诉我，怎么把这些英文显示成中文啊？
2024-12-16 17:44:12
333
原创 12.16 shap可解释性
需要注意shap_values的维度是（样本数，特征数，分类类别数），test_values/X_test_df的维度是（样本数，特征数），两个绘图输入的维度要是一样的。假如在做二分类的时候，非滑坡/滑坡，就可以针对发生滑坡这一类别，进行shap可视化，假如shap_values[:, :, 0]代表的是发生滑坡的矩阵。
2024-12-16 15:13:41
440
原创 基础岛-第6关-L1G6000-OpenCompass 评测书生大模型实践
torch版本降低后，又报错“ModuleNotFoundError: No module named 'rouge'”然后scikit-learn又报错，把1.5.0版本降为1.2.1试试。又有其他的报错，torch的版本还是高，降为2.1.2试试。把torch的版本从2.5.1降到2.4.1试试。出现报错，torch里面没有device？看群里大佬，增加了一个命令。然后再运行，成功运行。
2024-11-11 20:54:01
166
原创 基础岛-第5关-L1G5000-XTuner 微调个人小助手认知
训练864次之后，回答如下：改成：就不会找不到文件了hf 文件夹即为我们平时所理解的所谓 “LoRA 模型文件”对于 LoRA 或者 QLoRA 微调出来的模型其实并不是一个完整的模型，而是一个额外的层（Adapter），训练完的这个层最终还是要与原模型进行合并才能被正常的使用。对于全量微调的模型（full）其实是不需要进行整合这一步的，因为全量微调修改的是原模型的权重而非微调一个新的 Adapter ，因此是不需要进行模型整合的。使用 XTuner 微调 InternLM2-Chat-7B 实
2024-11-11 18:56:38
285
原创 基础岛-第2关-L1G2000-玩转书生「多模态对话」与「AI搜索」产品
(24 封私信 / 44 条消息) 目前生成式AI在学术和工业界有什么最新进展？ - 知乎
2024-11-11 14:30:16
185
原创 基础岛-第4关-L1G4000-InternLM + LlamaIndex RAG 实践
说是传的url是一个元组？后来把代码改成浦语API文档里的格式，直接赋值，不进行传递，就没报错了。注意修改词向量模型的地址！也是成功运行，使用RAG也是让lm学到了xTuner是什么。
2024-11-07 11:28:34
260
原创 基础岛-第3关-L1G3000-浦语提示词工程实践
这个模型是如何工作的？- **细腻的情感描写**：通过主角的内心独白和与其他角色的互动，展现她在不同时空中的情感变化和成长。- **紧张的情节设置**：在穿越过程中设置一些突发事件或挑战，增加故事的紧张感和吸引力。使用提示词后，得到的回答更符合一个剧本的配置，而单纯的回答知识剧本的场景的描述，我们在设计剧本的时候，应该是先设置大体框架，再逐渐具体到场景情节。- Profile: 你是一位专业的商务沟通专家，拥有丰富的商务邮件撰写和沟通经验，擅长根据不同的商务场景和目的，提供恰当的邮件撰写指导和优化建议。
2024-11-06 16:33:20
1715
原创 基础岛-第1关-L1G1000-书生大模型全链路开源开放体系介绍
新发布的2.5版本的相对于之前2.0版本的，在以下三个方面有所改进。InternLM2.5支持100万字上下文，而GPT-4o支持128k上下文，达10倍之多。在同量级参数大小下，书生大模型的性能是比其他模型更好的，InternLM2.5-20B-Chat甚至达到和GPT-4的性能。开放一系列工具链，兼容多种模型和框架，方便开发者开发。数据质量驱动模型性能发展。
2024-11-06 14:45:56
291
原创 第4关-L0G4000-玩转HF/魔塔/魔乐社区
下载了internlm2_5-7b-chat的config.json文件、model.safetensors.index.json文件。修改index.html文件内容，然后push到远程仓库，注意出现报错，需要设置项目的验证。将下载好的config.json文件上传到HF平台，如下所示。进入Space界面，就可以看到实战营的共建活动了。
2024-11-05 19:48:49
292
原创 第3关-L0G3000-Git基础知识
如下图，我的分支 class_4871被推送到远程仓库。fork了开源模型chatglm3，地址为。提交更改分支and推送分支到远程仓库。
2024-11-05 15:08:31
571
原创 第2关-L0G2000-Python基础知识
激活share的环境，创建一个自己的文件夹，把jieba安装在我创建的目录里。) 包围，而且不能包含未转义的换行符或特殊字符。在 JSON 格式中，键和字符串值必须用双引号 (成功运行一个demo。
2024-11-05 13:27:26
659
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人