处理速度快6倍 Meta推新影像处理模型SAM 2

2024 年 8 月 1 日 0 comments Article clash安卓版教程

编译／黄竣凯

科技巨头Meta 宣布推出全新的人工智慧（AI）影像处理模型Segment Anything Model 2（SAM 2），进一步提升了影像处理能力，这款模型具有极高的精度和处理速度，还能在影片和图片中进行「图像分割」，为用户提供更加流畅和高效的体验，与前一代模型相比，SAM 2 在处理速度上提高了六倍，同时在互动式图像分割和数据集的处理上也显着改善。

Meta藉由建立新的影片物件分割资料集（SA-V Dataset）来训练SAM 2。（图 / 取自Meta）

具备互动式图像分割能力

据报导，支援影片和影像中的图像分割是SAM 2的主要亮点，无论是静态照片还是动态影片，SAM 2都能够精确地识别和分割影像或影片中的各种对象，让用户可以更容易地处理和分析影像内容，而除了静态影像，SAM 2 也能够在影片中进行图像分割，支援在不同的影片数据集上进行即时处理，为影像创作者带来更强大的工具。

更多新闻：微软释出Designer行动版 用AI可生成各式影像图片

图像分割技术能够识别图像中属於某个对象的画素，应用广泛，如科学影像分析或包裹管理等，在机器视觉系统中具有极高的重要性。

SAM 2表现优於前一代

根据Meta，SAM 2 在多个方面都优於前一代产品：

  • 在所需的人工互动减少了大约三倍的同时，改进了 17 个零镜头影片资料集的互动式图像分割能力。
  • 在使用 23 个资料集的零样本基准测试中，速度提高了六倍。
  • 在多个标准影片数据集（如DAVIS、MOSE、LVOS、YouTube-VOS）中表现优於现有标准。
  • 能以大约 44 FPS 的速度提供即时推理
  • 与先前模型的手动每帧标注相比，它的区块图像分割标注速度提高了 8.4 倍。

Meta 提供免费 Demo 版

用户现在可以透过 Meta 提供的免费 Demo 版试用这一强大工具，轻松进行影像剪辑和为影片添加效果，此外，Meta 提供的 SAM 2 模型也是开放授权的，允许用户根据自己的需求创建和使用各种功能，随着 AI 技术的持续进步，SAM 2 也成为提高影像处理效率的一个重要工具。

参考资料：gearrice