- 博客(113)
- 收藏
- 关注
RSS订阅原创 语言学：自然语言处理 (NLP) 的底层逻辑
本文系统阐述了语言学作为自然语言处理(NLP)基础的理论框架。文章按照语言层级结构，从语音学/音系学(声音层面)、形态学(词汇构成)、句法学(语法结构)、语义学(意义理解)到语用学(语境意图)，逐层解析语言运作机制。同时分析了中英文在构词法、句法等方面的差异对NLP的挑战，并探讨了各语言层级在语音识别、机器翻译、知识图谱等NLP任务中的应用。最后指出大语言模型(LLM)通过海量数据隐式学习这些语言规则，而语言学知识有助于理解模型局限并优化提示工程。全文揭示了语言学理论与现代NLP技术的内在联系。
2025-12-27 00:00:00
1986
原创 现代LLM分词技术
现代大语言模型采用子词分词(Subword Tokenization)技术解决传统词级分词的三大问题：词表膨胀、OOV问题和语言不公平性。主流算法包括：BPE(GPT系列采用，基于高频字符对合并)、WordPiece(BERT系列采用，使用##前缀表示词缀)和SentencePiece(T5采用，将空格视为普通字符)。三种方法各有优势：BPE编码效率高，WordPiece适合理解任务，SentencePiece能完美还原原文且对中日韩语友好。这些技术实现了用有限词表覆盖无限语言表达的目标，成为现代LLM的基
2025-12-22 09:00:00
643
原创 自然语言处理 (NLP)：破解人类沟通的源代码
与编程语言（如 Python、C++）精确、严谨的语法不同，人类语言充满了随意性和不确定性。是人工智能领域中最迷人、也最困难的分支之一。如果说计算机视觉（CV）是 AI 的眼睛，那么 NLP 就是 AI 的大脑皮层。NLP 的发展史，本质上是人类试图教会机器理解世界的尝试史。
2025-12-21 00:57:58
925
原创 NLP 入门：从原理到实战的个人经验总结
一、核心是在解决什么问题？二、谁更有优势？三、你得准备好的“工具包”四、比较靠谱的学习路径五、真实的就业方向教计算机听懂人话，以及让计算机像人一样说话。如果你想入行或者转行做这个，别被网上那些花里胡哨的“速成”教程迷了眼。
2025-12-21 00:44:30
1030
原创 deepseek-r1大模型的本地部署
登录chatbox ai，点击设置，选择ollama，在API主机输入http://127.0.0.1:11434，在模型中点击“获取”会弹出“deepseek-r1:1.5b”在本地按win+R，输出cmd，打开终端，输入 ollama run deepseek-r1:1.5b运行模型。登录https://chatboxai.app/en下载Chatbox AI软件，打开下载的ollama，选择刚刚下载的模型即可在可视化界面中开始对话。设置deepseek-r1:1.5b为默认模型。
2025-12-11 23:41:56
256
原创 【NLP实战项目：中文文本分类】数据集THUCNews
THUCNews是清华大学自然语言处理实验室基于2005-2011年新浪新闻RSS数据构建的中文文本分类数据集，包含74万篇UTF-8格式新闻文档（2.19GB），涵盖14个类别（如财经、科技、体育等）。该数据集提供10类和14类两个子集下载，已被广泛应用于文本分类任务，包括机器学习、BERT模型等多种方法的对比实验。相关资源包括数据集下载链接、分类实现教程、多模型对比项目等，为中文NLP研究提供了重要基准数据。
2025-12-10 23:16:25
431
原创 Hugging Face介绍
Hugging Face是一个开源AI平台和生态系统，致力于让机器学习更开放便捷。它包含Model Hub（提供200多万个预训练模型）、Datasets Hub（开源数据集）、Spaces（AI应用托管）等核心模块，并开发了Transformers、Datasets等工具库。Hugging Face降低了AI开发门槛，推动开源共享文化，已成为全球AI开发的中枢平台，让"获取数据-加载模型-部署应用"的流程从数周缩短至几分钟。
2025-10-24 23:18:34
1290
原创 （22）100天python从入门到拿捏《【网络爬虫】网络基础与HTTP协议》
URL是互联网上资源的地址，就像网页的“门牌号”。协议://主机名:端口/路径?参数#锚点解读协议：https，是一种通过SSL/TLS对传输的数据进行加密的安全通信协议；主机名：blog.csdn.net，主机名即服务器的域名，浏览器需要通过DNS域名解析协议把域名转为服务器的IP，才能与服务器进行通信；端口：没有显示指定，此时使用https协议的默认端口443，完整的访问地址应该是；路径：/qq_64736204，指明了在服务器上要访问的特定资源位置，是用户的ID，应着CSDN博客平台上的。
2025-10-22 22:16:02
1102
原创 （21）100天python从入门到拿捏《XML 数据解析》
XML是一种用于存储和传输数据的标记语言，与HTML不同，它专注于数据而非显示。Python提供了多种解析XML的方式，包括内置的xml.etree.ElementTree、xml.dom.minidom和第三方库lxml，各适用于不同场景。XML在企业数据交换、配置文件等领域仍有应用，尽管JSON在现代开发中更流行。文章还介绍了如何解析、生成XML文件，并与JSON进行了对比。
2025-10-17 22:49:31
1050
原创 （七）机器学习之图神经网络
图神经网络（Graph Neural Networks, GNN）是专门用于处理图结构数据的深度学习架构，通过消息传递机制学习节点和图的表示。本文深入解析GNN的核心原理、消息传递范式、主要变体以及从基础理论到现代应用的发展历程，帮助读者全面理解这一重要技术。关键词： 图神经网络、GNN、消息传递、图学习、节点嵌入图神经网络（GNN）是一类专门设计用于处理图结构数据的神经网络架构。与传统的深度学习模型不同，GNN能够直接处理非欧几里得空间中的图数据，在社交网络分析、推荐系统、分子性质预测、知识图谱等领域取得
2025-10-17 09:30:00
761
原创 （六）机器学习之图卷积网络
GCN的核心思想是在图上定义卷积操作。对于节点iiihil1σ∑j∈Ni1didjhjlWlhil1σ⎝⎛j∈Ni∑didj1hjlWl⎠⎞hilh_i^{(l)}hil是节点iii在第lll层的特征表示NiNi是节点iii的邻居集合did_idi是节点iii的度WlW^{(l)}Wl是可学习的权重矩阵σ\sigmaσ。
2025-10-16 23:38:32
761
原创 【机器学习算法篇】K-近邻算法
K-近邻算法(KNN)是一种基于实例的监督学习算法，通过计算待分类样本与训练集中各样本的距离，选取最近的K个邻居，统计其类别频率来预测结果。文章介绍了7种距离度量方法，包括欧式距离、曼哈顿距离、余弦相似度等，并分析了Scikit-learn机器学习库的主要模块结构和应用场景。KNN算法简单直观，是机器学习中最基础且常用的分类算法之一。
2025-10-16 23:23:42
1711
原创 （20）100天python从入门到拿捏《JSON 数据解析》
JSON是一种轻量级数据交换格式，具有跨语言通用、结构清晰和易于解析的特点。本文介绍了JSON的基本语法规则、优势以及Python中的json模块使用方法，包括json.dumps()序列化和json.loads()反序列化操作，并通过多个案例展示了JSON在文件读写、网络响应解析和复杂嵌套数据处理中的实际应用。JSON凭借其简洁性和通用性，已成为Web数据传输和配置文件的主流格式。
2025-10-14 10:30:00
1845
1
原创 （19）100天python从入门到拿捏《多线程》
本文介绍了Python中的多线程技术。主要内容包括：1) 多线程概念，即同一进程中运行多个线程；2) Python特有的GIL机制限制了CPU密集型任务的并行性；3) 创建线程的三种方式：Thread类、继承Thread类和使用线程池；4) 线程同步与锁机制解决共享资源冲突；5) 使用Queue实现线程间通信；6) 多线程适用于IO密集型任务如网络请求、文件操作等场景；7) 通过爬虫案例展示实际应用。文章还对比了多线程和多进程的特性差异，指出多线程更适合IO密集型任务，而多进程更适合CPU密集型任务。
2025-10-13 23:42:24
844
原创 （18）100天python从入门到拿捏《网络编程》
Python网络编程采用分层架构，从应用层调用socket API到物理层数据传输形成完整流程。核心包括TCP三次握手建立连接、可靠数据传输和四次挥手断开连接。服务器端通过socket()、bind()、listen()、accept()管理连接，客户端使用connect()发起请求，双方通过send()/recv()交换数据。内核协议栈负责TCP/IP协议处理，包括分段、封装、路由和确认机制。网络编程需理解端口、套接字缓冲区、阻塞模式等概念，以及操作系统内核与用户空间的交互方式。
2025-10-13 15:00:22
638
原创 （17）100天python从入门到拿捏《正则表达式》
正则表达式是一种用来描述字符串匹配规则的模式语言。判断字符串是否符合某种格式；提取字符串中符合条件的部分；替换匹配的内容；拆分字符串。
2025-10-12 16:35:09
1169
原创 （16）100天python从入门到拿捏《标准库》
Python 的是 Python 自带的一组功能强大的模块，无需额外安装即可使用。它为开发者提供了文件操作、网络通信、数据结构、并发、多线程、正则表达式、日期时间、数学计算、序列化等几乎所有常用功能。
2025-10-12 13:51:03
1028
原创 （15）100天python从入门到拿捏《面向对象编程》
class 类名:def 方法(self):pass📘 案例print("你好，我是学生！")# 创建对象🧾输出你好，我是学生！概念关键词功能类class定义对象模板对象实例类的实际存在构造函数__init__初始化属性封装_var__var隐藏内部实现继承class A(B)代码复用多态同一接口不同实现提高灵活性类方法操作类属性静态方法工具型函数魔法方法__xxx__定义特殊行为python学习专栏导航（1）100天python从入门到拿捏《Python 3简介》
2025-10-11 22:06:28
782
原创 （14）100天python从入门到拿捏《Python的错误与异常机制》
我们可以自定义异常类型，用于业务逻辑错误。所有自定义异常都应继承自Exception。案例"""自定义异常：输入负数时触发"""passif x < 0:raise NegativeNumberError("不能对负数开平方！")try:print("自定义异常:", e)🧾输出自定义异常: 不能对负数开平方！结构用途示例try包含可能出错的代码except捕获并处理异常else无异常时执行else: print("成功")finally无论如何都会执行。
2025-10-11 21:25:41
846
原创 （13）100天python从入门到拿捏《目录操作》
os模块是 Python 内置的一个标准库，用于与操作系统进行交互。它可以执行文件与目录的创建、删除、重命名；获取文件属性；遍历目录；获取系统信息（如路径、环境变量）；以及执行系统命令。import os功能方法说明获取当前目录获取路径改变目录切换工作目录创建目录os.mkdir()新建文件夹删除目录os.rmdir()删除空目录列出内容遍历文件夹重命名文件改名删除文件删除文件判断存在检查路径判断类型文件或目录拼接路径合成路径拆分路径分离目录与文件。
2025-10-11 20:04:49
812
原创 （12）100天python从入门到拿捏《文件操作》
文件操作（File I/O）指程序对计算机磁盘文件的创建、读取、写入、修改与删除等操作。在 Python 中，文件操作主要依赖内置函数 open()与文件对象的方法完成。操作类别常用模块常用函数/方法基本读写内置open()read()write()close()路径操作osos.pathmkdir()listdir()exists()文件复制shutilcopy()move()rmtree()表格文件csvcsv.readercsv.writerJSON文件jsonjson.load。
2025-10-11 19:26:25
685
原创 （五）机器学习之Transformer
Transformer是一种基于注意力机制的神经网络架构，彻底改变了自然语言处理和深度学习领域。本文深入解析Transformer的核心原理、注意力机制、网络架构以及从基础理论到现代大语言模型的发展历程，帮助读者全面理解这一革命性技术。Transformer、注意力机制、自注意力、多头注意力、大语言模型。
2025-10-11 12:42:55
584
原创 （11）100天python从入门到拿捏《模块》
模块是 Python 程序的基本组织单元，是一个包含了函数、类、变量以及可执行代码的文件。一个.py文件就是一个模块；模块是为了代码复用逻辑分层结构清晰。你可以创建自己的模块文件，然后导入使用。案例：自定义模块mymath.pymymath.py# 自定义数学模块main.pyprint(mymath.add(3, 5)) # 输出 8print(mymath.PI) # 输出 3.14159✅Python 导入模块时，会执行模块中的顶层代码；模块名就是文件名（不包含.py。
2025-10-11 12:30:11
1107
原创 （10）100天python从入门到拿捏《Python中的数据结构与自定义数据结构》
1. 栈实现"""栈 - 后进先出(LIFO)数据结构""""""入栈操作""""""出栈操作"""raise IndexError("栈为空，无法执行出栈操作")"""查看栈顶元素"""raise IndexError("栈为空，无法查看栈顶元素")"""判断栈是否为空""""""返回栈的大小"""
2025-10-11 11:42:16
573
原创 （9）100天python从入门到拿捏《装饰器》
在 Python 中，是一种非常强大的工具，它允许你在不修改函数本身的情况下，动态地增加或修改函数的行为。装饰器广泛应用于函数的增强、权限验证、日志记录、缓存、计时等场景。
2025-10-11 00:39:23
796
原创 （8）100天python从入门到拿捏《函数和匿名函数》
在 Python 中，函数是通过def关键字来定义的，后跟函数名和圆括号()，其中圆括号内可以指定参数。函数体通过缩进的方式来表示。# 函数体# 执行的代码return value # 可选：函数名。parameters：函数的参数（可以为空）。return：可选的返回值，表示函数的结果。案例name }!") greet("Alice") # 调用函数，输出：Hello, Alice!name }!") greet("Alice") # 调用函数，输出：Hello, Alice!
2025-10-11 00:27:18
928
原创 （7）100天python从入门到拿捏《迭代器和生成器》
迭代器是一个对象，它实现了 __iter__()和 __next__()方法，使得对象可以在循环中逐个返回其元素。迭代器用于遍历一个集合数据，比如列表、元组、字典等。可以通过定义一个类，并实现__iter__()和__next__()方法来创建自己的迭代器。# 使用自定义的迭代器输出123生成器是一个特殊类型的迭代器。它是通过 yield关键字定义的函数（也叫生成器函数）。与普通函数不同，生成器函数在执行时会暂停并记住当前位置，直到下次调用生成器时再继续执行。迭代器。
2025-10-10 22:12:41
846
原创 （6）100天python从入门到拿捏《推导式》
Python 中的推导式提供了一种非常优雅和高效的方式来生成或操作集合数据。它能够通过简洁的语法实现复杂的操作，从而提高代码的可读性和执行效率。python学习专栏导航（1）100天python从入门到拿捏《Python 3简介》（2）100天python从入门到拿捏《python应用前景》（3）100天python从入门到拿捏《数据类型》（4）100天python从入门到拿捏《运算符》（5）100天python从入门到拿捏《流程控制语句》
2025-10-10 22:02:14
1127
原创 （5）100天python从入门到拿捏------流程控制语句
但是，如果循环是通过break语句终止的，else块将不会执行。else 语句用于在循环结束后执行一段代码，如果在循环过程中遇到了 break 语句，则会中断循环，此时不会执行 else 子句。match 后的对象会依次与 case 后的内容进行匹配，如果匹配成功，则执行匹配到的表达式，否则直接跳过，它不会终止循环，而是跳过本次循环，进入下一次循环。Python 还提供了一个简洁的条件表达式（三元运算符），用于根据条件判断返回不同的值。的缩写，用于在多个条件中选择执行的代码。语句内部再写条件语句。
2025-10-10 12:18:30
728
原创 （4）100天python从入门到拿捏
Python 中的注释有和单行注释以#开头多行注释用三个单引号 ‘’'或者三个双引号 “”"将注释括起来。
2025-10-10 10:32:37
967
2
原创 （四）机器学习之长短期记忆网络
长短期记忆网络（Long Short-Term Memory, LSTM）是循环神经网络（RNN）的重要变体，专门设计用于解决传统RNN的梯度消失问题。本文深入解析LSTM的核心原理、网络架构、关键技术以及从RNN到现代序列建模的发展历程，帮助读者全面理解这一重要技术。长短期记忆网络、LSTM、循环神经网络、序列建模、梯度消失。
2025-10-10 10:30:00
748
原创 （3）100天python从入门到拿捏
整数（int）浮点数（float）和复数（complex）。可变数据类型是指对象的值在创建后可以改变。这意味着，当你修改一个可变对象时，它的内存地址不会改变，只会改变对象的内容。不可变数据类型是指对象的值一旦创建后不能修改。如果你尝试修改不可变对象的内容，Python 会创建一个新的对象，并将修改后的值赋给新的对象。
2025-10-10 00:27:19
1075
原创 （2）100天python从入门到拿捏
Python 被广泛用于 Web 开发，尤其是在构建动态网站和 Web 应用程序时，得益于其简洁的语法和强大的开发框架（如 Django、Flask）。
2025-10-09 23:41:52
7703
3
原创 （1）100天python从入门到拿捏
Python 3 是一种高级、解释型的编程语言，广泛用于 Web 开发、数据科学、机器学习、自动化、人工智能等领域。与 Python 2 相比，Python 3 在语法、库和功能上进行了改进和更新，旨在提升语言的易用性和一致性。
2025-10-09 23:29:38
3154
5
原创 (三) 机器学习之循环神经网络
循环神经网络（Recurrent Neural Network, RNN）是一类专门用于处理的神经网络架构，具有和的特点。本文深入解析RNN的核心原理、数学基础、网络架构以及从基础理论到现代应用的发展历程，帮助大家全面理解这一重要的序列建模技术。循环神经网络、RNN、序列建模、梯度消失、时间序列。
2025-10-09 10:30:00
2069
原创 (二) 机器学习之卷积神经网络
卷积神经网络（Convolutional Neural Networks, CNN）是深度学习领域最重要的架构之一，在计算机视觉任务中取得了革命性的突破。本文深入解析CNN的核心原理、网络架构、关键技术以及从LeNet到现代CNN的发展历程，帮助读者全面理解这一重要技术。卷积神经网络、CNN、计算机视觉、深度学习、图像识别。
2025-10-08 17:06:11
1401
原创 (一) 机器学习之深度神经网络
深度神经网络(DNN)技术演进与应用解析 深度神经网络(DNN)作为人工智能的核心技术，经历了从感知机到深度学习的重大演进。本文系统介绍了DNN的基本原理、网络架构和训练算法，包括： 神经元模型和多层感知机(MLP)的基本结构 常用激活函数(如ReLU、Sigmoid等)的特性比较 深度学习网络从输入层到输出层的完整处理流程 通过代码示例展示了神经网络的实现方式，并分析了DNN在图像识别、自然语言处理等领域的应用优势。文章还探讨了DNN发展历程中的重要里程碑，包括反向传播算法的发明和深度学习的复兴。
2025-10-07 22:49:38
1006
3
原创 一文搞定 LoRa 微调技术
是 Meta 推出的开源大模型（如LLama-2-7B/13B/70B），由于其性能优异且开源，成为LoRA微调的热门对象。LoRA 并非独立模型，而是一种 “微调插件”，通常嵌入在 Transformer 架构的注意力模块中（这是大模型学习任务信息的核心区域）LoRA（Low-Rank Adaptation，低秩自适应）是由微软研究院在2021年提出的一种大模型参数高效微调技术，相关论文。研究表明，基于LoRA的微调在中文指令数据上能达到与全参数微调相近的效果，但训练成本大幅降低。
2025-09-06 19:12:59
3513
原创 一次性讲清楚缩放点积注意力
AttentionQKVsoftmaxQK⊤dk⏟注意力权重V\left(\frac{QK^\top}{\sqrt{d_k}}\right)}_{\text{注意力权重}} VAttentionQKV注意力权重softmaxdkQK⊤VQK⊤产生相似度匹配分数QK^\top 产生相似度/匹配分数QK⊤产生相似度匹配分数用dk做温度缩放再进softmax。
2025-08-19 11:45:00
1129
原创 transform中的位置编码是如何实现的
在中，模型的输入是一个序列。每个词首先会被转换成一个向量。为了让模型能够感知，我们必须给每个 embedding 加入“位置信息”,这就是。位置编码的维度与embedding相同，因此两者可以相加。
2025-08-17 18:48:56
830
人工智能领域深度神经网络技术原理与Python实现
2025-10-11
【Python编程】面向对象核心概念解析：类与对象、继承封装多态及学生管理系统设计实现
2025-10-11
【Python科学计算】基于NumPy的多维数组处理与矩阵运算：数据类型、数组操作及可视化分析系统设计
2025-10-09
嵌入式系统中IIC与SPI串行总线接口技术及应用
2025-10-09
【计算机组成原理】基于408真题的汇编语言程序分析：x86与RISC-V指令系统及机器级执行机制解析
2025-10-09
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人