- 博客(444)
- 资源 (18)
- 收藏
- 关注

原创 Nowcoder export notes and convert to md files
摘要 该Python脚本实现从牛客网导出用户笔记并转为Markdown文件的功能。主要流程分为三个步骤:1)使用requests获取网页数据;2)通过BeautifulSoup解析HTML提取笔记ID和内容;3)利用html2text将HTML内容转为Markdown格式。脚本支持两种获取笔记ID的方式:直接请求API或从本地文件加载,并自动创建目标目录保存转换后的MD文件。执行过程中包含错误重试机制和请求间隔,确保稳定运行。最终每个笔记以标题命名保存为单独的MD文件。
2025-06-11 00:53:31
197

原创 Nowcoder export solutions and convert to md file
本文介绍了一个将牛客网(Nowcoder)题解导出为Markdown文件的Python脚本实现方案。该脚本主要包含三个处理步骤:1)通过requests库获取网页数据;2)使用BeautifulSoup解析HTML内容;3)借助html2text工具将HTML转换为Markdown格式。脚本支持两种获取题解ID的方式(API接口或读取本地文件),并自动保存为结构化的MD文档,包含标题、原题链接和题解内容。执行过程中加入了延时和重试机制,确保稳定获取数据。最终生成的md文件按题解标题命名,便于整理和查阅。
2025-06-10 10:19:56
221

原创 RAG部署本地知识库
本文介绍了在本地部署RAG知识库的详细步骤。首先提供了包含Ollama、pgvector等关键组件的requirements.txt文件清单。随后分步说明实现流程:1)通过Ollama拉取llama3和nomic-embed-text模型;2)使用Docker启动pgvector数据库服务;3)创建Python3.11虚拟环境并安装依赖包;4)验证Streamlit版本并启动应用。整个过程涉及模型下载、数据库配置、环境搭建和应用程序运行等关键技术环节,为构建本地知识库系统提供了完整的技术实现方案。
2025-06-08 16:50:26
196

原创 PEFT模型微调及推理验证
PEFT(Parameter-Efficient Fine-Tuning)模型微调技术通过调整少量参数实现大模型适配。该方法在保持预训练模型主体参数不变的情况下,仅优化部分网络层或适配器模块,显著降低计算资源需求。实验表明,PEFT在保持90%以上原模型性能的同时,训练参数量减少80%,推理速度提升35%。该技术适用于文本分类、问答系统等NLP任务,为资源受限场景下的大模型部署提供了高效解决方案。
2025-06-08 10:45:44
82

原创 Llama3模型微调量化及部署应用
本文详细介绍了Llama3大语言模型从微调部署到应用落地的完整流程。首先通过LLaMA-Factory工具完成模型微调,配置Python3.11环境并安装相关依赖。接着使用llama.cpp工具链进行模型量化,将HuggingFace格式转换为GGUF格式并执行4-bit量化。最后通过Ollama框架部署量化后的模型,并展示两种应用方案:基于Docker的OpenWebUI(内置RAG功能)和可配置知识库的AnythingLLM系统。全流程涵盖环境搭建、模型优化及实际应用部署,为开发者提供开箱即用的技术方案
2025-06-07 16:06:40
87

原创 Redis Cluster - 外网访问redis集群 - create-cluster脚本
Versionredis 6.0.6Shell scriptcd /redis-6.0.6/utils/create-clustervi create-cluster#!/bin/bash# SettingsBIN_PATH="../../src/"#CLUSTER_HOST=127.0.0.1CLUSTER_HOST=YOUR_REMOTE_IPPORT=30000TIMEOUT=2000NODES=6REPLICAS=1#PROTECTED_MODE=yesPROTE
2020-10-09 14:26:37
840
1

原创 Internal Sorting: Natural Two-way Merge Sort: Sorting by Merging
Algorithm NAlgorithm N (Natural two-way merge sort). Records R1,…,RN are sorted using two areas of memory, each of which is capable of holding N records. For convenience, we shall say that the reco
2015-05-31 14:50:13
1238

原创 Internal Sorting: Straight Two-way Merge Sort: Sorting by Merging
Algorithm SAlgorithm S (Straight two-way merge sort). Records R1,… ,RN are sorted using two memory areas as in Algorithm N. S1. [Initialize.] Set s <– 0, p <– 1. (For the significance of variables
2015-05-31 14:46:37
1172

原创 Searching: Shar's Method
Comparison treeJava programIn this program, R1,…,RN were simplified to K1,…,KN./** * Created with IntelliJ IDEA. * User: 1O1O * Date: 12/11/13 * Time: 6:52 PM * :)~ * Shar's Method:Searching */
2015-05-31 13:26:37
576

原创 Searching: Balanced Tree Search And Insertion
Algorithm AAlgorithm A (Balanced tree search and insertion). Given a table of records that form a balanced binary tree as described above, this algorithm searches for a given argument K. If K is no
2015-05-31 12:53:49
647
各种区块链白皮书合集(14种)
2018-08-01
get-pip.py
2015-05-13
Algorithms 4th Edition
2015-02-25
算法导论 英文版 第二版 pdf
2015-02-25
算法导论中文版.pdf
2015-02-25
算法导论 第三版英文版 有索引.pdf
2015-02-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人