你是不是也经常被图片/视频编辑困扰?特别是抠图,简直是每个小白的心头痛!
说起抠图,大家都能想到绿幕。抠除视频中的物体需要使用PS钢笔工具一点点的抠掉,工作量非常大,效果不一定好,耗时费力不说,还限制了创作的自由度。
而对于图片来说,抠图的第一大难点,就是图片上的物体有复杂边缘,比如细小的发丝,又或物体边缘与背景颜色相近处。
今天给大家推荐1款超赞的抠图神器SAM2,无需任何辅助输入,就能让你一秒把目标物高精度抠出,没有使用限制,操作简单,速度极快,抠图效果惊人,即便是发丝这样的细微之处也能处理得干净利落,真正实现了动态抠图的极致体验。这种“有手就会用”的效果,简直是不会PS的小白福音。
SAM2是什么?
继2023年4月开源SAM,实现对图像的精准抠图后,Meta近期开源了能够做视频抠图的新模型SAM2(Segment Anything Model 2)。SAM2将图像抠图和视频抠图功能整合到一个模型中。所谓“抠图”,是指区别视频中的特定对象与背景,并可以追踪目标。
SAM2将图像抠图能力泛化到了视频领域,其响应能力和准确度是第一代SAM的6倍,也是目前最优秀的视觉分割模型。Meta AI发布此版本时强调:“相信我们的数据、模型和见解将成为视频分割和相关感知任务的重要里程碑。”
SAM2核心优势
- 准确性提升:相比SAM,SAM2抠图精度大大提高。
- 速度更快:处理速度提高了约6倍,可以更快地生成分割掩模,提升效率。
- 图片/视频抠图:除了静态图像抠图外,SAM2还支持视频中的动态对象抠图。
- Zero-Shot泛化:拥有对不熟悉物体和图像的零样本泛化能力,无需额外训练。
- 可提示的模型架构:能根据不同的提示(如点、框,甚至是文本)来生成抠图结果。
- 实时处理:只需单击一帧视频中的任何物体,即可实现对目标对象的实时追踪,快速处理未来每一帧。非常适合需快速响应的应用场景,如增强现实(AR)和虚拟现实(VR)应用。
SAM2应用场景
- 视频创作:精准巧妙抠出视频物体图像,快速实现特效制作、更换场景等功能,为视频创作提供更广阔的想象空间。
- 医学影像分割:用来自动分割医学影像中的器官或病变区域,比如SAM2在LiTS2017肝脏和肿瘤分割数据集上表现出色,不仅显著提升了分割精度,还大幅减少了误差。
- 自动驾驶:可以帮助车辆识别和理解道路场景中的不同元素。
- 遥感图像处理:SAM2在遥感图像分割任务中,能通过多尺度特征融合技术,实现对地物的精准识别。
- 增强现实(AR)和虚拟现实(VR):实时抠出用户周围的环境,增强用户体验。
SAM2本地部署中文整合包
SAM2虽已开源,但至今为止,并没有可供技术小白使用的有操作界面的平台或工具,小白根本没办法用上如此强大的SAM2。F5 AI社区当然不能让这种事情发生了,连夜组织了社区的几个技术老师攻关,经过几天努力,给大家准备了SAM2本地一键部署的中文整合包,超级简单便捷,一键就能上手。
- 一键运行,免安装:整合包下载解压后就能用,不用复杂的环境配置和安装过程。
- 汉化版:全中文支持,包括界面菜单、操作说明、文件路径等,符合中国人操作习惯。
- 无限制使用:自定义上传图片、视频素材,无模板限制。不限次数,不限时间,不限设备,操作简单,小白也能轻松一键抠图。无需连网,本地离线更方便。
- 简洁的UI界面:界面友好易懂,操作简洁明了,哪怕你是0基础0专业技术背景,只要有手即可轻松上手。
- 极致视频抠图效果:除了静态图像抠图外,SAM2还支持视频中的动态对象抠图。只需单击一帧视频中的任何物体,即可实现对目标对象的精准追踪。
- 极速抠图体验:各种场景下的单个/多个对象的实时抠图,切换自如,速度极快。
- 服务保障:F5 AI社区提供图文+视频教程,7*12小时一对一在线服务。
SAM2保姆级教程,小白1分钟轻松上手
除了给大家准备了SAM2一键整合包,F5 AI社区还提供了详细的视频课程和图文教学资料以及1对1指导等服务。即便技术小白,也能确保一分钟熟练上手。
下面,为大家演示一下:
第一步:下载SAM2整合包
将【SAM2.zip】压缩包,下载到您的电脑本地(下载链接放在文章末尾)。
第二步:启动程序
解压【SAM2.zip】后,压缩包里有四个文件夹,我们双击【SAM2.exe】文件,启动程序。
稍等片刻,控制台窗口已经打开,如下图(请注意,使用过程中,请勿关闭此窗口,可以最小化):
同时,系统将通过浏览器自动打开操作界面(如打开异常,可能是因为浏览器兼容问题,这时候,需要下载最新版谷歌Chrome浏览器并将网址复制到地址栏中),如下图:
SAM2提供了图像抠图和视频抠图2种模式。
好了,那我们正式开始学习使用SAM2工具。
第三步:抠图的详细操作步骤
SAM2支持对静态图片、动态视频进行任意抠图,我们将分2种情况给大家详细讲解具体操作步骤:
图像抠图
① 选择设备,如果电脑装有英伟达独立显卡,选择CUDA;没有的话,选择CPU。
② 选择【图像抠图】模式。
③ 上传一张图片或者在【示例图片】中选择一张图片。
④ 选择标记类型【对象】,用鼠标在抠图对象上标记几个点(通常1-3个点即可)。
⑤ 点击【图像抠图】按钮,在操作界面的右侧可以预览抠图效果。
对象标记点及抠图预览效果
⑥ 抠图后的图片自动保存在【SAM2.exe】同一目录下的【output】
文件夹中。我们也可以通过点击预览模块的右上角下载按钮来下载。
完整的图像抠图操作步骤如下图所示:
Tips:可以通过调整标记点,来获得满意的抠图效果。标记过程中会涉及到两种类型的标记点:“对象”和“背景”。“对象”表示标记点所在区域是抠图对象的一部分,“背景”表示标记点所在区域不希望被抠出。如果预览效果时,发现抠出了一部分不是我们想要的,可以鼠标选择“背景”在该区域做一个标记点。我们提供了标记点操作按钮【撤销】和【清除】,分别用来撤销当前标记点和清除所有标记点。
视频抠图
① 选择设备,与图像抠图一样的,如果电脑装有英伟达独立显卡,选择CUDA;没有的话,选择CPU。
② 选择【视频抠图】模式。
③ 进入视频抠图的正式流程:
第1步:上传一个视频文件或在【示例视频】模块中选择一个视频。
第2步:标记对象。
此处与图像抠图存在较大差异:视频抠图可以抠取视频中出现过的多个对象,我们需要逐个标记每个对象,标记步骤如下:
标记第一个抠图对象:
- 选择抠图对象所在的视频帧(出现过的任一视频帧都可以);
- 在抠图对象上标记几个点(通常1-3个点即可);
- 点击【抠图预览】按钮,查看抠图效果,与此同时,抠图对象会自动添加到【对象】模块中。如果抠图效果不满意,可以通过标记类型和标记操作来调整,与图像抠图方法一样。
视频抠图步骤之一
标记第二个抠图对象:
- 点击【对象】模块中的“+”按钮来添加抠图对象;
- 选择第二个抠图对象所在的视频帧;
- 在第二个抠图对象上标记几个点;
- 点击抠图预览按钮,查看抠图效果,第二个抠图对象将自动添加到【对象】模块中。
视频抠图步骤之二
- 与标记第二个抠图对象一样,标记第N个抠图对象,直到所有抠图对象都标记好为止。
- 如果某个对象抠图效果不满意,我们还可以选择【对象】模块中标记了的抠图对象,通过标记类型和标记操作来调整,与图像抠图方法一样。如果不需要某个抠图对象时,选择该对象,点击【删除对象】按钮进行删除。
删除抠图对象
第3步:点击【视频抠图】按钮,提交任务。
第4步:保存抠图后的视频文件,绿幕视频和遮罩视频都自动保存在【SAM2.exe】同一目录下的【output】文件夹中。
怎么样,操作是不是真的很简单!SAM2作为新一代图像抠图算法,凭借其高精度、强适应性和高效率的优势,必将在各个应用领域中发挥重要作用。赶紧行动去下载学习运用吧~
以下是下载地址:
百度网盘下载链接(永久有效):
• 链接:https://pan.baidu.com/s/13kdNqTdr2S7_ampAc71kVg?pwd=3fy9
• 提取码:3fy9
123网盘下载链接(永久有效):
• 链接:https://www.123pan.com/s/5DsaTd-OAPc.html
• 提取码:无需提取码
夸克网盘下载链接(永久有效):
• 链接:https://pan.quark.cn/s/6557b6989579
• 提取码:无需提取码
关于F5 AI社区
F5 AI社区是一个紧跟全球AI技术和AI产品,秉承“有教程就会有工具”的运营理念,及时为用户整合、提供各类AI工具教程的社区,不管你是0基础学员还是有基础,我们从提供本地离线AI工具整合包开始,让您无限量不限时使用,更有全套在线教程助您无忧学完快速上手,同时我们的AI专家24小时在线,为您解答各种技术疑难问题,助您真正0门槛,0成本,即使是从未接触过的技术小白也能快速无脑掌握前沿的AI技能。
提示及说明
• F5 AI社区分享的仅为全球AI产品的安装和使用教程,不对其产品的稳定性及可用性负责。
• AI产品,既可用于有益目的,也可用于有害目的。在使用相关技术时,请您了解并遵守法律及道德准则。切勿侵权、传播非法及错误信息欺骗他人。
常见问题解答
问:F5 AI社区支持在线指导吗?
答:支持,可以下载安装包后,联系客服安排远程协助。
问:F5 AI社区只提供SAM2工具吗?
答:F5 AI社区不是AI工具开发商,我们的使命是帮助技术小白,快速掌握全球前沿AI知识,以适应新形势下的就业或商业市场,我们会不断提供最新、最前沿、效果最好的各类AI学习教程。
问:SAM2使用对电脑配置有要求吗?
答:SAM2作为视频抠图神器,当然是电脑配置越高越好,这样视频抠图会更加丝滑,建议初次使用,先拿几秒或十几秒钟的视频来替换,先测试下。F5 AI社区提供的整合包也支持纯CPU下运行,但建议使用5G以上显存的电脑。毕竟,硬件配置好,稳定性及运行速度都会更好。
问:我是一点技术都不懂的小白,也能学会吗?
答:F5 AI社区提供的整合包,可一键上手,无需专业技能。同时,详细的教程和24小时技术专家在线服务,确保你几分钟内快速掌握使用技巧,成为创意大师!
问:可以在社交媒体平台上发布我的视频作品吗?
答:是的,在遵守法律及道德准则、尊重隐私权并获得内容涉及个人的明确同意的情况下,可以在社交媒体平台上分享您的作品。在此之前,请您充分理解国家相关法律法规条例,包括但不限于:
《民法典》第1019条:任何组织或者个人不得以丑化、污损,或者利用信息技术手段伪造等方式侵害他人的肖像权。未经肖像权人同意,不得制作、使用、公开肖像权人的肖像,但是法律另有规定的除外。未经肖像权人同意,肖像作品权利人不得以发表、复制、发行、出租、展览等方式使用或者公开肖像权人的肖像。对自然人声音的保护,参照适用肖像权保护的有关规定。
《名誉权》第1024条:民事主体享有名誉权。任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权。
《作品侵害名誉权》第1027条:行为人发表的文学、艺术作品以真人真事或者特定人为描述对象,含有侮辱、诽谤内容,侵害他人名誉权的,受害人有权依法请求该行为人承担民事责任。行为人发表的文学、艺术作品不以特定人为描述对象,仅其中的情节与该特定人的情况相似的,不承担民事责任。