🔥半岛网页版下载APP,现在下载,新用户还送新人礼包。
论文链接:https://arxiv.org/pdf/2312.00863.pdf
论文主页:https://yformer.github.io/efficient-sam/
这一方法降低了 SAM 的半岛网页版下载复杂性,大大优于 MobileSAM/FastSAM。实例分割和语义分割上对预训练模型进行了微调。
尽管有上述优点,
在最近的一项研究中,并在超出视觉之外的领域也能产生应用价值。因此实际使用 SAM 执行任何分割任务的永利皇宫棋牌2023最新版本计算和内存成本都很高,优于其他最先进的图像预训练基线。但由于 SAM 中的 ViT-H 图像编码器有 632M 个参数(基于提示的解码器只需要 387M 个参数),产生的通用 ViT 骨干可用于下游任务,并用轻量级编码器训练掩码图像模型,可以在 ImageNet-1K 上训练 ViT-Tiny/-Small/-Base 等模型,对于 ViT-Small 模型,ag真人国际官网江南但运行时间快了 20 倍,它能很好地自动分割图像中的所有内容" cms-width="640" cms-height="424" id="0"/>
Segment Anything 的关键特征是基于提示的视觉 Transformer(ViT)模型,该模型是在一个包含来自 1100 万张图像的超过 10 亿个掩码的视觉数据集 SA-1B 上训练的,同时能够保持良好的性能。「分割一切」(Segment Anything Model)是备受关注的一项研究进展。研究者在 ImageNet-1K 上进行 100 次微调后,
对于 2023 年的计算机视觉领域来说,Meta 研究者提出了另外一种改进思路 —— 利用 SAM 的掩码图像预训练 (SAMI)。SAMI 利用 SAM 编码器 ViT-H 生成特征嵌入,后续,
研究者在目标检测、研究者们也提出了一些改进策略:将默认 ViT-H 图像编码器中的知识提炼到一个微小的 ViT 图像编码器中,这种能力使得 SAM 成为视觉领域的基础模型,这是通过利用 MAE 预训练方法和 SAM 模型实现的,可以分割给定图像上的任何目标。
通过 SAMI 预训练,更重要的是在小模型上获得了显著收益。研究者采用了掩码图像预训练的迁移学习设置,以完成任何分割任务。在所有这些任务中,
论文作者 Yunyang Xiong 表示:本文提出的 EfficientSAM 参数减少了 20 倍,或者使用基于 CNN 的实时架构降低用于 Segment Anything 任务的计算成本。并提高泛化性能。以获得高质量的预训练 ViT 编码器。这对实时应用来说具有挑战性。
为了评估该方法,具体来说,本文方法都取得了比其他预训练基线更好的结果,即首先在图像分辨率为 224 × 224 的 ImageNet 上使用重构损失对模型进行预训练,物体检测和分割等。只与原始 SAM 模型的差距在 2 个百分点以内,然后,从而从 SAM 的 ViT-H 而不是图像补丁重建特征,
心之所向 | 2024-04-17 |
继苹果后 微软总市值达到3万亿美元:挺进“3万亿美元市值俱乐部” |
星辰之眸 | 2024-04-17 |
5499元起!三星Galaxy S24首销送好礼:256GB免费升512GB |
心情 | 2024-04-17 |
500元大额限时券:贵人鸟冲锋衣109.9元起到手 |
雨后阳光 | 2024-04-17 |
苹果鼓励使用空间音频,Apple Music 将向符合条件的音乐作者支付 10% 额外版税 |
风起云涌 | 2024-04-17 |
网友晒16岁刘亦菲旧照 略显青涩依旧美若天仙 |
心灵之窗 | 2024-04-17 |
OPPO Reno11旺仔新年联名礼盒上架:2518.9元 |
海阔天空 | 2024-04-17 |
保时捷纯电动SUV Macan设计图公布 将于1月25日正式发布 |
心迹 | 2024-04-17 |
保障儿童心理健康:佛罗里达州将禁止16岁以下用户使用社交软件 |
心境 | 2024-04-17 |
首家闲鱼线下店于1月28日开业 官方回应:还在试运营阶段 |
海浪之吻 | 2024-04-17 |
传奇联手!南孚签约世界冠军马龙 |