新技术SAM-Track：视频智能分割，一键跟踪抠图

“分割一切”（SAM）是美国META公司发布的全新视觉模型，能够根据文本指令识别图像和“一键抠图”。近期，浙江大学ReLER实验室将SAM与视频分割进行深度结合，发布了通用视频分割与跟踪工具SAM-Track。该工具能对视频目标进行自动跟踪，只需要一句话、一个点击、一支画笔，就能在任意场景分割跟踪任意物体。比如，指定“熊猫”，便可一键跟踪、分割所有属于“熊猫”这一类别的目标；也可进一步给出更详细的描述，比如输入“最左边的熊猫”，就可以定位至特定目标。

相较于传统视频跟踪算法，SAM-Track的另一个强大之处在于可对大量目标同时进行跟踪分割，并自动检测新出现的物体。它还支持多种交互方式组合使用，用户可根据实际需求搭配，比如使用画笔框定与人体紧密连接的滑板，可防止分割多余物体，而后再点击选择人体。如果对自动分割结果不满意，用户可在此基础上进行编辑修正。

（来源：新智元微信公众号）