公共资源速递
This Weekly Snapshots !
5 个数据集:
* SA-V:Meta 构建的视频分割数据集
* GoPro 大型模糊图像数据集
* Fall Detection 跌倒检测数据集
* DPO-zh-en-emoji 表情符号问答数据集
* RealBlur Dataset 现实世界模糊图像数据集
1 个模型:
* Gemma2-2B
3 个教程:
* Kolors 快手可图文生图大模型 Demo
* PhotoMaker V2 秒级生成个性写真图片 Demo
* HiDiffusion 文生图功能三合一 Demo
访问官网立即使用:http://openbayes.com
公共数据集
该数据集包含了约 51k 个真实世界视频和 643K 个时空遮罩 (masklets) 注释,在大小上比其他同类数据集大 50 倍左右。这个数据集的发布,加上 SAM 2 模型的开源,为研究者和开发者提供了强大的工具,以探索视频编辑、混合现实、机器人技术、自动驾驶和视频内容理解等多个领域的新应用和创新。
* 直接使用:
https://go.openbayes.com/IIXsS
该数据集包含 3,214 张大小为 1,280×720 的模糊图像,其中 2,103 张是训练图像,1,111 张是测试图像。该数据集由一一对应的真实模糊图像与 ground truth 图像组成,均由高速摄像机拍摄。
* 直接使用:
https://go.openbayes.com/CHxoR
3. Fall detection Dataset 跌倒检测数据集
该数据集是用于检测跌倒行为的图像数据集,包含图像文件夹和标签文件夹。图像文件夹包含两个子文件夹 train(374 张图像),用于训练,Val(111 张图像)用于验证。
* 直接使用:
https://go.openbayes.com/7gngH
该数据集包含了大量的问答对数据,每个问题都有中文和英文两个版本的答案,并且答案中融入了趣味幽默的元素,包括表情符号 (emoji) 的使用。
* 直接使用:
https://go.openbayes.com/hgVTv
5. RealBlur Dataset (RWBSD) 现实世界模糊图像数据集
该数据集是一个大规模的现实世界模糊图像和真实清晰图像数据集,用于学习和对单幅图像去模糊方法进行基准测试。通过测试表明,该数据集显著提高了现实世界模糊图像的去模糊质量。
* 直接使用:
https://go.openbayes.com/OBhrf
公共模型
Gemma2-2B 是 Google 发布的轻量级模型,具有 20 亿参数大小,旨在实现性能与效率之间的平衡。它采用了与更大模型相当的先进技术,包括滑动窗口注意力机制和软封顶技术,这些特性有助于提升模型的效率和性能。此外,Gemma2-2B 还通过知识蒸馏技术进一步提高了小模型的性能上限,这项技术是未来小模型提升性能的关键技术之一。
* 直接使用:
https://go.openbayes.com/wYXsG
公共教程
Kolors 是快手 Kolors 团队开发的基于潜在扩散的大规模文本到图像生成模型。经过数十亿个文本图像对的训练,Kolors 在视觉质量、复杂语义准确性以及中英文字符的文本渲染方面比开源和闭源模型表现出显着优势。此外,Kolors 支持中文和英文输入,在理解和生成中文内容方面表现出强大的性能。该教程已经将相关环境和依赖安装完毕,一键克隆启动即可体验。
* 在线运行:
https://go.openbayes.com/1clJk
2. PhotoMaker V2 秒级生成个性写真图片 Demo
PhotoMaker 是腾讯团队开源的一个高效的人像定制文生图模型,可以快速地根据人物照生成定制的艺术风格照片。该教程是 PhotoMaker 的 2.0 版本,跟 V1 比起来,在角色一致性和可控性上有了大提升。相关环境已经搭建完成,只需输入一个指令即可体验 Demo。
* 在线运行:
https://go.openbayes.com/9nAPz
3. 教程上新 | 文生图、图生图、图像修复三合一神器, HiDiffusion 一键启动教程现已上线!
HiDiffusion 是旷世科技开源的高分辨率框架,不仅支持文生图、图生图,还具备图像修复功能。OpenBayes 现已上线「HiDiffusion 可快速生成高质量 8k 图像 Demo」教程,无需输入任何命令,一键克隆即可启动。
* 在线运行:
https://go.openbayes.com/3NpCJ
以上就是小贝上周在 OpenBayes 的全部更新内容啦~