号称分割一切的图片分割模型开源了——Segment Anything Meta SAM|全球速看

2023-05-14 17:50:42 来源: 哔哩哔哩

头条号:人工智能研究所微信号:启示AI科技微信小程序:AI人工智能工具


【资料图】

以前,要解决任何类型的分割问题,有两类方法。第一种是交互式分割,允许分割任何类别的对象,但需要人通过迭代细化掩码来指导。第二种,自动分割,允许分割提前定义的特定对象类别(例如,猫或椅子),但需要大量的手动注释对象来训练(例如,数千甚至数万个分割猫的例子)。这两种方法都没有提供通用的、全自动的分割方法。

Segment Anything Meta SAM综合了以上2种方法。它是一个单一的模型,可以轻松地执行交互式分割和自动分割。该模型允许以灵活的方式使用它,只需为模型设计正确的提示(点击、分割框、文本等),就可以完成分割任务。此外,Segment Anything Meta SAM在包含超过 10 亿个掩码的多样化、高质量数据集上进行训练,这使其能够泛化到新类型的对象和图像。

在 Segment Anything Meta SAM 中,该模式包含三个重要组成部分:

图像编码器。

提示编码器。

掩码解码器。

Segment Anything Model 是一种以最少的人工干预构建全自动可提示图像分割模型的方法。模型提供了一键分割图片的方法,当然模型也可以运行我们输入一个坐标点,一个输入框,或者输入一个对象的文本来分割输入的对象。

任何突破性的深度学习模型的基础都是它所训练的数据集。Segmentation Anything Model 也不例外。Segment Anything 数据集包含超过 1100 万张图像和 11 亿个mask遮罩。最终的数据集称为SA-1B 数据集。

训练 Segment Anything 能力的模型肯定需要这样的数据集。但我们也知道这样的数据集是不存在的,手动标注这么多图像是不可能的。那么,数据集是如何策划的?简而言之,SAM 帮助注释了数据集。数据标注者使用 SAM 交互式地标注图像,然后使用新标注的数据来训练 SAM。重复此过程,从而产生了 SAM 的环内数据引擎。

这个数据引擎+在数据集上训练 SAM 分为三个阶段:

辅助手动阶段

半自动阶段

全自动阶段

在第一阶段,注释者使用预训练的 SAM 模型在浏览器中以交互方式分割图像中的对象,在第一阶段之后,数据集包含来自12 万张图像的430 万个掩码。Segment Anything Model 在此数据集上重新训练。

在第二个半自动阶段,突出的物体已经使用 SAM 进行了分割。注释者还对未注释的不太显眼的对象进行了注释。这个阶段在18 万张图像中产生了额外的 590 万个掩码,SAM 在这些图像上进行了再训练。

在最后的“全自动阶段”,标注完全由 SAM 完成,到这个阶段,它已经在超过 10M 的掩码上进行了训练,自动蒙版生成应用于 11M 图像,生成 1.1B 蒙版。

“Segment Anything Dataset 的最终版本使其成为最大的公开图像分割数据集。与 OpenImages V5 相比,数据集中的图像多 6 倍,遮罩多 400 倍。

SAM 允许用户通过单击或通过交互式单击点来分割对象以分割或者排除对象。还可以使用边界框分割模型。

SAM在面对被分割对象的歧义时可以输出多个有效掩码,这是解决现实世界中分割问题的重要且必要的能力。

SAM 可以自动发现并屏蔽图像中的所有对象。

SAM 可以在预计算图像嵌入后实时为任何提示生成分割掩码,允许与模型进行实时交互。

同时meta提供了在线试玩demo,我们可以直接在官方提供的网站上面上传自己的图片进行试玩

https://segment-anything.com/demo#

试玩demo提供了好几种分割方法

1、我们可以直接在图片任意一个对象上点击,模型会根据点击的地方,自动分割周边的对象。

2、我们也可以选择box进行对象框的选择来进行对象的分割。

3、我们也可以选择everything,让模型自动进行所有对象的分割。

4、模型提供了多mask对象分割模型

SAM 可以成为 AR/VR、内容等领域的强大创造组件、以及科学领域,医学领域和更通用的人工智能系统提供服务。相信随着计算机硬件的升级,一些大的模型便可以让普通用户来使用。

https://github.com/facebookresearch/segment-anything

Segment Anything Model代码已经开源,我们后期详细进行相关代码实现部分分享。

from segment_anything import SamAutomaticMaskGenerator, sam_model_registrysam = sam_model_registry["<model_type>"](checkpoint="<path/to/checkpoint>")mask_generator = SamAutomaticMaskGenerator(sam)masks = mask_generator.generate(<your_image>)

标签:

号称分割一切的图片分割模型开源了——Segment Anything Meta SAM|全球速看

头条号:人工智能研究所微信号:启示AI科技微信小程序:AI人工智能工具以前,要解决任何类型的分割问题,有

05-14 17:50:42

宇通客车(600066.SH)2022年年度利润分配10派10元 股权登记日5月18日|世界热点

格隆汇5月14日丨宇通客车600066600066SH披露2022年年度利润分配实施公告本次利润分配以方案实施前的公司总

05-14 17:01:56

Passenger flight routes launched between China's Xi'an and Turkmenistan's Ashgabat, Tajikistan's Dushanbe

GroundcrewmembersmakepreparationsbeforethefirstpassengerflightoftheX

05-14 15:52:03

干预 rmvb 下载_干预迅雷下载

1、打开迅雷,点配置(迅雷7快捷键CTRL+O)->点监视设置->取消掉“监视浏览器”前面的对勾,然后确定就...

05-14 14:50:04

2023年高画质仙侠手游盘点,高画质仙侠手游推荐榜

随着时代的不断发展,数码产品的迭代更新也如火如荼。手游作为数码产品的一种,自然也会随着时代和科技的变

05-14 12:59:00

羊瑞堂炖羊肉做法?

1 准备原料。2 把羊肉改刀成块。3 白萝卜改刀成滚刀块,香菜改刀成末。4 锅上火,上水把羊肉焯一下,放几滴

05-14 12:00:28

拉萨:一城山色半城绿

这是在南山公园拍摄的拉萨风光,葱茏的树木点缀在城市中,与山色相映成趣(5月11日摄,手机照片)。  近

05-14 10:52:00

锋评|问城·武汉“一束光”何以改变一座城?

大象新闻中心记者:夏继锋向光笑薇丁阳陈思方远同五你好,欢迎来到《锋评》。武汉是河南党政代表团学习考察

05-14 09:54:20

山西“南北引擎”打造数字转型先行区-每日播报

原标题:“南北引擎”打造数字转型先行区省工信厅近日公布《山西省数字产业培优壮大2023年行动计划》。...

05-14 09:05:52

世界微速讯:财富周刊:银行下调存款利率,保险类产品受青睐

1、美国4月CPI同比增长4 9%,低于市场预期的5%。05银行理财市场回顾截至5月12日,本周净值型银行理财产品新

05-14 07:53:54

苹果要在iPhone上卖广告 绞尽脑汁增收|即时

苹果推出一项名为“应用追踪透明度”的功能,也称ATT,让用户自行决定是否让开发者在其他应用和网站上对...

05-14 06:46:58

杜兰特逼宫,恩比德挑拨内讧,交易传言

北京时间5月12日,随着湖人、快船相继战胜各自的对手,2022-23赛季常规赛正式进入尾声。在漫长的赛季,可谓

05-14 04:54:20

当前资讯!win7如何显示隐藏文件(了解一下)

win7如何显示隐藏文件,了解一下很多人还不知道,现在让我们一起来看看吧!解答:1、双击“计算机”,点...

05-14 02:12:35

三星推 Galaxy S23 Ultra 限量版套装:手机、手表、无线充电板一起买便宜 22% 焦点热闻

三星今日在越南发布了GalaxyS23Ultra限量版套装,其中包括GalaxyS23Ultra手机、GalaxyWatch5手表和15W无线

05-13 23:07:20

香港购物哪里好 香港购物全攻略_香港哪里购物便宜-世界播报

1、首先推荐铜锣湾;2、铜锣湾位于香港岛三大购物中心城市的中环,时代广场。搜狗百货公司和希慎广场!当然

05-13 21:56:53

每日看点!索马里安全部队打死44名“青年党”武装分子

索马里政府当地时间5月13日发表声明称,索马里安全部队12日在下谢贝利地区开展特别军事行动,打死44名索马

05-13 20:53:18

世界热消息:高铁二等座车厢座位图片_高铁二等座车厢座位图

1、窗户1A1B1C过道1D1F窗户窗户2A2B2C过道2D2F窗户窗户3A3B3C

05-13 19:00:41

喜欢到底是什么?_喜欢是什么概念

1、喜欢有两种含义,分别是:对人或事物有好感或感兴趣;愉快,高兴。2、拼音:xǐhuan引证释义:赵树理《

05-13 17:49:02

世界即时看!河南柘城推进农产品精深加工—— 二寸辣椒,拉长产业链条(经济新方位·县域经济观察)

河南省柘城县起台镇辣椒种植基地田间场景。张子彬摄(资料照片)河南柘城三樱椒,果实才有二寸长,小拇指粗

05-13 16:38:03

币安将退出加拿大市场

币安将退出加拿大市场

05-13 15:53:51

天天时讯:香港今年首季本地生产总值同比增长2.7%

香港今年首季本地生产总值同比增长2 7%,王茜,香港,利润总额

05-13 14:46:45

张丹峰跟情人蛊惑继子赌博翻车,洪欣暴怒带儿子改姓

洪欣恋爱脑纯度下降后,反手插刀渣前夫张丹峰也是蛮有一手的。要知道,张丹峰靠着洪欣彻底在社交网络出圈的

05-13 13:46:51

中林集团董事长宋权礼等七名央企管理人员同日被查 全球时快讯

中央纪委国家监委网站星期五(5月12日)通报,包括中林集团原党委书记、董事长宋权礼在内的七名央企管理人

05-13 12:28:54

天天观热点:塞尔达传说王国之泪莱克莱克的胃石轻松获取教学一览

许多塞尔达传说王国之泪网友还不了解塞尔达传说王国之泪莱克莱克的胃石轻松获取教学一览,下面就由第一资讯

05-13 11:14:24

环球播报:海南买房有升值空间吗?兴隆镇和吉阳区哪个值得买?

海南买房有升值空间吗?兴隆镇和吉阳区哪个值得买?兴隆镇买房如何?海南兴隆镇房价要爆跌,兴隆镇买房那个

05-13 10:10:52

青白江区华严小学举行2023年退休教师座谈会

5月12日上午,华严小学特邀学校退休老教师在和乐校区景行厅参加退休教师座谈会。退休老师齐聚一堂,久别重

05-13 09:19:26

深圳免费景点_深圳免费景点有哪些

欢迎观看本篇文章,小柴来为大家解答以上问题。深圳免费景点,深圳免费景点有哪些很多人还不知道,现在让我

05-13 08:57:29

事业单位法人证件号码怎么查询_事业单位法人查询

1、事业单位法人证书在登录事业单位管理局可以查询登记信息。2、  事业单位法人是指从事非营利性的各项社

05-13 07:38:46

世界视讯!高质量发展调研行丨共建共治共享“数字之都”,上海城市数字化转型体验馆打造数字场馆新地标

5月11日,“高质量发展调研行”主题采访活动在上海启动,上海也是第一批次采访活动的始发地。下午,媒体...

05-13 06:21:33

每日播报!再度试水新动力 全新帝豪甲醇版申报图

[本站国内谍照]日前,我们从工信部获得了吉利汽车基于全新一代帝豪打造的甲醇混合动力版本车型申报图。据申

05-13 04:45:26

伯牙与钟子期_伯牙鼓琴钟子期听之方鼓琴而志在太山

1、伯牙弹琴,钟子期在一旁欣赏。2、伯牙开始用琴声抒发自己志在泰山的情怀,钟子期情不自禁地感叹说:...

05-13 01:50:45

天天讯息:电脑睡眠模式有什么用 电脑睡眠模式是什么意思

今天来聊聊关于电脑睡眠模式有什么用,电脑睡眠模式是什么意思的文章,现在就为大家来简单介绍下电脑睡眠模

05-12 23:24:27

电脑玩游戏按键盘总是打字怎么办_玩游戏按键盘老是打字

今天小编肥嘟来为大家解答以上的问题。电脑玩游戏按键盘总是打字怎么办,玩游戏按键盘老是打字相信很多小伙

05-12 21:59:05

网传张嘉倪买超已分居半年 女方要求别墅和千万抚养费

搜狐娱乐讯5月12日,有八卦媒体今晚爆料,称张嘉倪和买超已经分居半年,在买超出轨事件曝光之前,二人就在

05-12 21:21:03

全球最新:孟羽童个人IP保底价400万?业内人士:估值过高

孟羽童个人IP保底价400万?业内人士:估值过高---近日,董明珠秘书孟羽童离职引热议。“孟羽童在格力月薪没

05-12 20:57:13

汉语言文学专业学什么 有哪些课程

汉语言文学专业课程有文学概论、古代文学史、现代汉语、古代汉语、外国文学史、中国现代文学史、中国当代文

05-12 20:02:48

世界视讯!2023年天津市第三届“友谊杯”金融业足球赛开幕

人民网天津5月8日电昨天,2023年天津市第三届“友谊杯”金融业足球赛开幕。此次活动旨在推动全国足球发...

05-12 19:41:07

全球速读:青海2023年一级建造师执业资格考试报名时间

青海2023年一级建造师执业资格考试报名时间由一级建造师考试栏目提供,查找更多考试报名资讯、准考证打印、

05-12 18:54:21

世界通讯!“当枝松宜东”联盟中青干部培训班开展早锻炼   

“当枝松宜东,携手向前冲,1234!”清晨,整齐的口号声在枝江市委党校的上空响起,宜荆荆恩都市圈“当...

05-12 18:33:00

祥符区曲兴镇多举措推进惠农补贴落实

近日,开封市祥符区曲兴镇镇党委政府高度重视、合理分工并明确责任、迅速行动,不折不扣落实补贴政策,有序

05-12 18:12:18

农业贸易百问 | 预制菜国际贸易面临哪些问题? 天天观点

随着2023年中央一号文件首提“培育发展预制菜产业”,全国各地正在积极推动预制菜产业发展。同时,不少...

05-12 17:36:36

延安公安:用延安精神强基铸魂 三项措施深化公安思想政治工作

近年来,延安市公安局大力弘扬延安精神,千方百计抓教育、筑阵地、强支撑,在公安思想政治工作上深耕细作、

05-12 17:14:07

河北华夏幸福启动年卡退款程序

2020赛季中超联赛将于7月25日开始,但受到疫情影响,联赛第一阶段比赛将空场进行。这样的情况下,河北华夏

05-12 16:40:22

淅川西簧乡中心学校举行2023春期全乡作业教案大检查总结表彰会 天天短讯

2023年5月12日上午,淅川西簧乡中心学校在三楼大会议室举行了2023春期全乡中小学作业教案大检查总结表彰会

05-12 16:40:44

基金投资方向与名称“货不对板” 基民投资如何避免“拆盲盒”?

长久以来,不少投资者在购买基金时都有着“看名买基”的习惯,因为一只基金名称往往是依照“基金公司名...

05-12 16:19:09

天准科技(688003)5月12日主力资金净买入438.45万元

截至2023年5月12日收盘,天准科技(688003)报收于33 9元,下跌2 67%,换手率0 98%,成交量1 91万手,成交额6532 56万元。

05-12 15:46:00

志愿者活动有哪些英语_志愿者活动有哪些

1、一、志愿者活动有:探访老人。2、青少年志愿者可以再成人志愿者或社工的带领下探访老人,为老人表演文艺

05-11 19:17:40

精心精准 便捷易配 施耐德电气发布新一代Lexium18系列伺服_聚看点

日前,全球能源管理及自动化领域的数字化转型专家施耐德电气发布新一代Lexium18系列伺服。Lexium18伺服驱动

05-11 18:05:00

游戏找你妹2_4399小游戏找你妹电脑

今天小编肥嘟来为大家解答以上的问题。游戏找你妹2,4399小游戏找你妹电脑相信很多小伙伴还不知道,现在让我

05-11 17:30:49

广州首笔“带押过户”业务已于近期落地

广州首笔“带押过户”业务已于近期落地,一手房,房地产,广州市,带押过户,二手房交易,共同还款人

05-11 17:19:39

宇通客车(600066.SH)2022年年度利润分配10派10元 股权登记日5月18日|世界热点
Passenger flight routes launched between China's Xi'an and Turkmenistan's Ashgabat, Tajikistan's Dushanbe
干预 rmvb 下载_干预迅雷下载
2023年高画质仙侠手游盘点,高画质仙侠手游推荐榜
羊瑞堂炖羊肉做法?
拉萨:一城山色半城绿
锋评|问城·武汉“一束光”何以改变一座城?
山西“南北引擎”打造数字转型先行区-每日播报
世界微速讯:财富周刊:银行下调存款利率,保险类产品受青睐
苹果要在iPhone上卖广告 绞尽脑汁增收|即时
杜兰特逼宫,恩比德挑拨内讧,交易传言
当前资讯!win7如何显示隐藏文件(了解一下)
三星推 Galaxy S23 Ultra 限量版套装:手机、手表、无线充电板一起买便宜 22% 焦点热闻
香港购物哪里好 香港购物全攻略_香港哪里购物便宜-世界播报
每日看点!索马里安全部队打死44名“青年党”武装分子
世界热消息:高铁二等座车厢座位图片_高铁二等座车厢座位图
喜欢到底是什么?_喜欢是什么概念
世界即时看!河南柘城推进农产品精深加工—— 二寸辣椒,拉长产业链条(经济新方位·县域经济观察)
币安将退出加拿大市场
天天时讯:香港今年首季本地生产总值同比增长2.7%
张丹峰跟情人蛊惑继子赌博翻车,洪欣暴怒带儿子改姓
中林集团董事长宋权礼等七名央企管理人员同日被查 全球时快讯
天天观热点:塞尔达传说王国之泪莱克莱克的胃石轻松获取教学一览
环球播报:海南买房有升值空间吗?兴隆镇和吉阳区哪个值得买?
青白江区华严小学举行2023年退休教师座谈会
深圳免费景点_深圳免费景点有哪些
事业单位法人证件号码怎么查询_事业单位法人查询
世界视讯!高质量发展调研行丨共建共治共享“数字之都”,上海城市数字化转型体验馆打造数字场馆新地标
每日播报!再度试水新动力 全新帝豪甲醇版申报图
伯牙与钟子期_伯牙鼓琴钟子期听之方鼓琴而志在太山
天天讯息:电脑睡眠模式有什么用 电脑睡眠模式是什么意思
电脑玩游戏按键盘总是打字怎么办_玩游戏按键盘老是打字
网传张嘉倪买超已分居半年 女方要求别墅和千万抚养费
全球最新:孟羽童个人IP保底价400万?业内人士:估值过高
汉语言文学专业学什么 有哪些课程
世界视讯!2023年天津市第三届“友谊杯”金融业足球赛开幕
全球速读:青海2023年一级建造师执业资格考试报名时间
世界通讯!“当枝松宜东”联盟中青干部培训班开展早锻炼   
祥符区曲兴镇多举措推进惠农补贴落实
农业贸易百问 | 预制菜国际贸易面临哪些问题? 天天观点
延安公安:用延安精神强基铸魂 三项措施深化公安思想政治工作
河北华夏幸福启动年卡退款程序
淅川西簧乡中心学校举行2023春期全乡作业教案大检查总结表彰会 天天短讯
基金投资方向与名称“货不对板” 基民投资如何避免“拆盲盒”?
天准科技(688003)5月12日主力资金净买入438.45万元
志愿者活动有哪些英语_志愿者活动有哪些
精心精准 便捷易配 施耐德电气发布新一代Lexium18系列伺服_聚看点
游戏找你妹2_4399小游戏找你妹电脑
广州首笔“带押过户”业务已于近期落地
广泰国际控股(00844.HK)5月10日收盘涨3.66%
X 广告
行业动态
X 广告

Copyright ©  2015-2022 欧洲植物网版权所有  备案号:沪ICP备2022005074号-23   联系邮箱: 58 55 97 3@qq.com