自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(39)
  • 收藏
  • 关注

原创 ffmpeg学习4:opencv在音视频领域常用指令+rvm抠图

本文系统介绍了基于OpenCV的视频与图像处理流程,涵盖视频/图像读写、预处理(缩放、色彩转换等)、RVM模型抠图(C++/ONNX实现)及多线程RTSP流处理。核心流程为:读取视频/图像 → 帧预处理 → 模型推理(如RVM) → 结果输出。重点展示了VideoCapture/VideoWriter使用、多线程拉流、帧处理与GPU加速推理,适用于实时视频分析与智能剪辑应用。

2026-11-10 13:53:40 266

原创 webrtc 流程:以Unity webrtc为例

它的作用是把各种 NAT 穿透技术(如 STUN、TURN)整合在一起,制定了一套标准的流程:如何收集候选地址(Candidate)、如何对候选地址进行优先级排序、如何发起连通性检查(Connectivity Checks)、以及最终如何选定最优路径。作用:帮助处于 NAT(网络地址转换)环境下的设备获取公网 IP 地址,或者在无法直连时提供中继(Relay)服务,实现 NAT 穿透。"all"(默认):允许使用所有类型的候选者(包括本地 IP、STUN 反射 IP、TURN 中继 IP)。

2026-11-06 18:09:07 238

原创 ffmpeg学习3:opencv使用vs资源文件

双击rc文件,打开资源视图窗口。

2026-11-06 15:48:35 77

原创 FFmpeg学习2:opencv编译和demo

(ProjectDir)表示项目所在的目录。2 勾玄opencv_world 勾选后,会让后面构建生成的各模块dll合并为一个。并在thirdparty文件夹中创建lib include文件夹。lib文件夹存放用于编译链接时的opencv导入库(步骤二生成)。在解决方案(sln)同级文件夹中创建thirdparty文件夹。1 选择下载的源码目录,然后点击config,会下载资源。include中存放opencv的头文件库(步骤二生成)动态库需要放在运行时目录中,也就是输出目录文件夹下。

2026-11-06 15:02:38 193

原创 FFmpeg C++学习(一):ffmpeg编译和demo

新建终端,输入./demo.发现只输出了hello ffmpeg info,表明了设置了log等级,会过滤掉低于该等级的数据。AV_LOG_WARNING (24):警告信息,有些东西看起来不太对,有可能出问题。AV_LOG_VERBOSE (40):详细的信息,比 INFO 级别输出更多内容。AV_LOG_TRACE (56):非常冗长的跟踪调试信息,对底层开发非常有用。AV_LOG_DEBUG (48):调试信息,通常只对库的开发者有用。AV_LOG_PANIC (0):确实出了问题,程序即将崩溃。

2026-10-30 15:32:00 185

原创 Ros 学习十三:IK Demo

使用 Pinocchio 库进行基于雅可比矩阵的迭代逼近 IK 计算,通过设置合理的初始构型来保证解的唯一性与连续性,并引入阻尼最小二乘法(DLS)中的阻尼因子来克服奇异点带来的关节角剧烈跳变,确保运动的平滑与鲁棒。

2026-10-26 14:21:00 33

原创 VR ATW原理

是一种专为虚拟现实(VR)和增强现实(AR)设备设计的底层渲染优化与中间帧生成技术。它的核心目的是在 GPU 渲染性能不足、无法稳定维持目标帧率(如 90 FPS)时,通过生成“补偿帧”来消除画面抖动(Judder)并降低运动到光子延迟(Motion-to-Photon Latency),从而有效缓解用户的晕动症。ATW 运行在一个独立于主渲染线程的高优先级线程中。主渲染线程(生产者)负责生成场景图像,而 ATW 线程(消费者)在每次垂直同步(VSync)信号到来前异步工作,两者互不阻塞。

2026-10-23 17:57:06 163

原创 socket通信

与之前的 TCP 流程图相比,最显著的区别在于。,且数据收发使用的是 sendto()和 recvfrom()

2026-10-23 16:54:21 104

原创 VR视频渲染-重映射

相机内参和FOV计算公式。

2026-10-22 17:20:24 58

原创 B站下载m4s文件合成mp4

所以在其它平台可以手动删除前九个字节,然后使用ffmpeg进行合成即可。将大的那个m4s文件命名为video,小的重命名为audio。核心是去除前9个字节的头数据,然后用ffmpeg进行合成。在powershell中执行./

2026-10-21 18:15:20 187

原创 QT+OpenGL(3):FBO离屏渲染

可以把画面渲染到一张纹理或者RenderBuffer,

2026-10-15 09:29:41 167

原创 QT+OpenGL(2):渲染纹理

效果。

2026-10-14 14:23:28 71

原创 QT+Opengl (1):渲染一个三角形

delete ui;

2026-10-13 18:49:08 45

原创 iOS Metal 与 Android OpenGL 对比(AI生成)

在 OpenGL 中,如果纹理(FBO 挂载的 Texture)和 glViewport 设置的分辨率不一致,渲染结果完全取决于绑定的 FBO 纹理尺寸,而不是 Viewport 尺寸。而 Metal 的 Device 就是真实的物理 GPU 本身,它通过现代的”命令队列”机制原生解决了并发问题,因此不再需要、也不允许创建多个 Device。OpenGL 允许(甚至鼓励)创建多个上下文(Context),而 Metal 的设计哲学则是”一个 GPU 对应一个 Device(设备)“。

2026-09-24 14:26:24 237

原创 Ros2 十二:gazebo仿真

- 机器人的底盘参考系 -->1 关节发布插件(joint_state_publisher)中声明topic,这样就可以避免在launch文件中进行话题重映射。-- 发布的里程计话题 -->通常让ai帮写即可。-- 里程计的全局参考系 -->-- 订阅的速度控制话题 -->

2026-09-13 14:29:43 197

原创 Ros2 十一:urdf渲染mesh

如果dae在建模时使用的材质rviz2能够解析时:就会显示材质的效果,实测Blender的材质只有基础色能用(仅个人测试结果)。但Ros2仅支持一部分材质解析等能力,对于复杂的材质解析存在一定问题。:scale参数是必须的,否则rviz2会解析失败。如果无法正常解析时:显示很奇怪的渐变材质效果(我使用blender导出的),不会使用urdf的材质。stl导出时需要使用二进制格式,不要使用ASII文本格式,不然无法解析。stl:输出的为白模,只具有网格信息。要导出的模型,选择“仅选中”进行导出。

2026-09-04 17:35:25 201

原创 Ros2 学习十:parameter-参数基本使用

ROS 2 中的参数(Parameter)本质上是节点的配置值,你可以把它理解为节点的"配置项"。

2026-09-04 16:56:34 227

原创 Ros2 学习九:Rviz2 可视化urdf

只有robot_state_publisher和joint_state_publisher/joint_state_publisher_gui进行了发布才可以。使用robot_state_publisher和joint_state_publisher_gui/joint_state_publisher进行状态发布。安装joint_state_publisher,安装gui版本时,robot_state_publish会一起被安装。joint_state_publisher:不具有图形化。

2026-09-03 11:39:18 161

原创 Ros2 学习八: 图像发布和显示

安装完ros2后就安装了opencv-python,采用cpu对图像进行处理。opencv获取的图像需要转换为ros2可以识别的消息格式。有了上述demo,把它集成到node节点中,并进行发布。进入ros环境,执行rviz2后进行配置显示。

2026-09-02 14:27:54 226

原创 Ros2 mac 安装

用官方的源码安装,编译时总是各种奇怪的报错,因此采用conda的robotstack源去安装。

2026-09-01 16:03:27 51

原创 Ros2 学习七:Action(动作)- Goal(目标) 结果(result)反馈(feedback)

action文件格式。

2026-08-06 00:02:49 211

原创 Ros2 学习六:spin的作用

它进入一个无限循环,但每次循环都会先“闭上眼睛睡觉”(wait_for_work 阻塞等待)。只有当底层网络(DDS)拍一拍它说“有新消息来了”,它才会“睁开眼睛”,精准地抓取一个任务执行,处理完后,如果没别的事,它又会继续“闭上眼睛睡觉”。本质上就是一个事件池,循环读取事件池中的人物进行触发。而spin_once则是只读取一帧事件池中的事件。

2026-08-03 23:48:48 228

原创 Ros2 学习五:服务-请求响应模式

【可选】:当需要使用自定义的接口srv时,需要进行配置。如果使用系统的,则不需要。我定义的srv文件如下,使用三条“---”去划分请求和响应。# 请求int32 age---# 响应。

2026-08-03 23:39:37 230

原创 Ros2 学习四:通过cmake包管理自定义接口消息

在packege.xml文件中添加以下内容。

2026-08-02 13:05:28 155

原创 Ros2学习三:话题-发布订阅模式

节点名称还会作为默认的前缀,影响该节点内部创建的服务(Services)和参数(Parameters)的命名。它必须在创建任何 ROS 节点之前被调用,其底层实际上是通过 Python 的 C 扩展接口调用到了底层的 C 函数。它会初始化 ROS 2 的通信环境,包括与底层 DDS(数据分发服务)网络进行交互,确保节点能够成功注册到网络中。如果在节点运行期间发生了未捕获的异常(例如代码逻辑错误、内存问题等),程序会中断执行,它会创建并初始化 ROS 2 上下文,这是管理所有节点共享资源的核心环境。

2026-08-01 15:21:40 159

原创 Ros2 学习二:节点创建与管理

ROS的文件管理是按照树状结构,为外层为工作空间(workspace),中间层为包(package),最内层为节点(node)。

2026-08-01 13:15:47 186

原创 LangGraph学习二:流程控制

实现:通过不同的边和连接关系组织节点,实现节点之间的执行顺序。

2026-06-26 14:43:08 346

原创 Langgraph学习一:基本流程

图在激活时,需要传入初始化的状态State(input=0),这里没有对state的output进行初始化,是由于代码中node1中会对state的output进行初始化。如果要输出用于外发,个人认为输出markdown文本就行,然后用专业的工具进行展示和显示效果优化。LangGraph:多智能体和记忆管理,是对langchain的封装,避免了复杂的会话状态管理。个人认为开发时使用ASCII画图就行,配置简单,显示够用。通过add_edge绑定节点,确定了数据流转的顺序。mac电脑,安装系统级依赖包。

2026-06-25 21:27:38 329

原创 Qwen ASR+TTS 本地部署使用

限制并行数量安装,适用于:多cpu或内存低<96G的本地设备。flash-attn 在mac电脑上好像装不上,就没安装。千问的TTS依赖SOX,下载解压sox后并配置环境变量。voicedesign:使用文本描述语音音色信息。mac电脑,不支持cuda,因此使用cpu运行。支持transform架构和vLLM架构。customvoice:预设的9种音色。tts的内存占用率很高,处理时间更长。base:基座,可以克隆用户音色。

2026-06-25 14:52:46 609

原创 Langchain 学习四:文本嵌入模型Embedding

文本嵌入模型的原理是:将文本进入向量化,通过向量之间的相似度,得到匹配结果。当浏览器用就行。

2026-06-24 15:58:50 321

原创 Langchain学习三:使用记忆模块(已废弃)

由于架构的变动,langchain的记忆模块已经被封装到LangGraph中了,因此记忆模块的学习将放到LangGraph模块进行讲解。

2026-06-23 19:40:31 413

原创 LangChain 学习二:工作流

这个链包含输入提示词->大模型直接输出,不包含StrOutputParser(),可以发现除了回复,还包含而外的元数据metadata,metaData中包含toolcall等信息,如果有toolcall则调用工具(后面会进一步说明)。提示词包括系统提示词(System prompt)、用户提示词(Human prompt)、模型回复的上下文结果(AI Message),在多轮对话中,这些提示词构成了对话的上下文context。用户输入提示词给大模型,大模型判断是否需要调用工具。

2026-06-23 09:08:23 248

原创 LangChain学习一:开发一个小Demo

学前准备· 安装conda:可选,用于管理python环境,可以参考我之前的文章。· 安装本地或者申请大模型API。本地环境可以使用ollma进行下载方便快速部署。

2026-06-22 16:57:10 412

原创 Ros2 学习一:环境搭建

ros2是机器人操作系统。按我的理解,ros2是运行在操作系统(win/unbuntu)上的机器人服务管理管理应用。

2026-06-22 13:54:33 216

原创 VS Code + Cmake C++程序编写(Windows)

Windows下使用MinGW和CMake配置C++开发环境 本文详细介绍了在Windows系统中配置C++开发环境的步骤: 安装MinGW:从GitCode或官网下载MinGW-w64,解压后配置环境变量(添加bin目录到Path)。 安装CMake:直接下载安装包完成安装。 VSCode配置:安装C/C++扩展包,通过命令面板选择MinGW作为CMake工具链。 项目初始化:使用CMake创建多层级项目,通过CMakeLists.txt管理编译流程,将子目录代码编译为库文件,最终链接生成可执行程序。 编

2026-06-20 00:10:21 390

原创 AnaConda Windows

Anaconda主要是用于python版本管理。我使用的是windows版本。

2026-06-19 12:29:43 159

原创 Docker 封装自定义程序初入门

在Unity导出的Linux工程中创建Dockerfile文件。docker镜像包是mac电脑构建,在windows上启动。Registry:Docker Hub中注册的镜像库。Docker daemon:docker的守护进程。Docker_host::Docker客户机程序。Container:Docekr创建的容器本身。Client:Docker对外暴露的交互接口。Images:Docker的镜像。默认没有,表明docker可用了。将镜像保存为tar包,以用于传播。docker加载tar包。

2026-06-19 11:11:41 213

原创 Unity热加载之HyBirdCLR

本文介绍了HybridCLR热更新方案在Unity项目中的配置与使用流程。主要内容包括:1)推荐通过离线方式安装HybridCLR插件;2)配置Unity项目的IL2CPP编译环境;3)创建热加载程序集时的注意事项,需单独建立工作目录;4)提供了本地和HTTP两种加载DLL的方式及示例代码,强调StreamingAssets路径和.bytes后缀要求;5)展示了日志显示组件的实现。文中特别标注了多个实践中的常见问题(如安装失败、路径限制等),并提供了解决方案,适合开发者快速掌握HybridCLR热更新的核心

2026-06-12 11:46:34 333

原创 MCP协议

MCP(Model Context Protocol)是一种通信协议,通过MCP协议可以像电脑一样挂载一些“外设”,扩展大模型的能力,提升效率。

2026-05-12 16:47:20 363

webrtc 协商流程:以Unity webrtc为例

webrtc 协商流程:以Unity webrtc为例

2026-11-06

FFmpeg学习2:opencv编译

FFmpeg学习2:opencv编译

2026-11-06

Ros 学习十三:IK Demo

Ros 学习十三:IK Demo

2026-10-26

B站下载m4s文件合成mp4

B站下载m4s文件合成mp4

2026-10-21

QT+OpenGL(3):FBO离屏渲染

QT+OpenGL(3):FBO离屏渲染

2026-10-15

QT+OpenGL(2):渲染纹理

QT+OpenGL(2):渲染纹理 (工程命名存在错误)

2026-10-14

QT渲染Opengl三角形demo

QT渲染Opengl三角形demo(工程创建时命名错了)

2026-10-13

Ros2 学习十三:IK Demo(匹诺曹)

Ros2 学习十三:IK Demo(匹诺曹)

2026-09-24

Ros2 十二:gazebo仿真

Ros2 十二:gazebo仿真

2026-09-13

CPPDemo Cmake C++

CPPDemo Cmake C++

2026-06-20

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除