大模型機器視覺新突破,SAM進化版SAV來了:分割一切視頻!開源!
2023/7/19 9:47:06
今年4月,Meta的AI模型Segment Anything Model(SAM,分割一切模型)發布,一鍵輕松實現圖像分割,難怪網友直呼太強。
SAM模型之所以在計算機視覺領域產生重要影響,是因為圖像分割是許多任務中的基礎步驟,比如自動駕駛、人臉識別、車牌識別等都有用到。
在這些應用過程中,從目標檢測、分割再到識別的整個流程,由算法自動完成,無需人工干預,而SAM模型正是專攻其中的圖像分割。
雖然SAM是圖像分割的代表性模型,但不可避免存在以下短板:
1.它能夠處理圖片分割,但是不能處理視頻,尤其是不能對視頻里邊移動的物體做連續追蹤。
2.它能分割,但是并不認識所分割的區域到底是什么。
3.它存在過度分割的問題,經常把一個完整的物體分割成不同的部分,而人是把目標作為整體看待的。
一、SAV模型
現在,云創數據(835305.BJ)在SAM和YOLOv8的基礎上,“分割一切”模型的進化版——分割一切視頻Segment-Any-Video(SAV)來了,進一步豐富了計算機視覺成果。
圖片SAV模型(圖片來源:SAV)
作為一種新的圖像、視頻分割方法,SAV可以在圖片或視頻中實現全自動標注,一鍵分割物體。
同時,基于Zero-Shot Transfer(零樣本遷移),SAV無需額外訓練,即使是訓練庫中沒有的圖片,也可以實現輕松分割。
與SAM相比,SAV升級主要表現在以下方面:
1.既可以分割圖片,也可以分割視頻;
2.可以明確目標對象并打標簽;
3.可得到語義上完整的目標區域。
圖片SAV與SAM圖像分割對比結果(圖片來源:SAV)
從上圖可以看出,SAV將巴士、小汽車等分割成一個個完整的區域,而SAM是把這些單個的物體又分割為不同的區域。
除了圖片以外,通過SAV,視頻也可以進行清晰的目標分割和追蹤。
二、示例
現在,我們在網頁版 demo (http://sav.cstor.cn)上體驗一下SAV,可以直觀地感受SAM和SAV兩者的差異。
在首頁可任意選擇一張示例圖片,也可從本地上傳圖片,然后點擊Segment按鈕,就可以同時得到SAM和SAV的結果。
demo首頁示例圖片(圖片來源:SAV)
圖片分割結果:左側為SAM,右側為SAV(圖片來源:SAV)
如果需要觀察某個實例的詳細效果,鼠標放置原圖,移動鼠標即可。
圖片移動鼠標查看詳細分割效果(圖片來源:SAV)
在上圖中,由SAV分割的兩只小狗是完整而獨立的色塊,并不像左邊分割結果所展示——小狗耳朵顏色和身體部分顏色不一,不是完整的目標對象。同時,SAV分割的兩只小狗都打上了“dog”的標簽。
需要說明的是,本項目只關注算法自動分割的應用場景,所以SAV無需人工輸入點、曲線、矩形框等提示信息。
更多示例如下:
圖片圖片分割結果對比(圖片來源:SAV)
三、原理
如前所述, SAM的自動分割不返回標簽信息,并且一個實例(例如,一輛車)可能會被拆分成多個小區域。
自動分割模式下,SAM不返回標簽信息,車輛被分割成多個區域(圖片來源:SAM)
基于此,研發團隊在SAM的基礎上加入YOLOv8檢測模型,YOLOv8返回的結果中包含目標框、類別及置信度,目標框可作為提示信息輸入到SAM,類別名稱即為標簽,因此SAM加YOLOv8可有效地解決上述問題。
該方法同樣可用于視頻分割任務,與處理單幅圖像不同的是,除了分割,我們通常更關心目標的運動軌跡、目標重識別,以及如何實現一鍵摳視頻等。因此研發團隊在SAM和YOLOv8的基礎上加入跟蹤算法,持續關注感興趣的目標,這樣比單純地分割每幀圖像更有實際意義。
考慮到使用
下一頁
返回列表
返回首頁
©2025 云計算世界-云計算資料和交流中心 電腦版
Powered by iwms
日韩精品一区二区三区swag_一区二区三区在线高清_亚洲国内欧美_国产精品xnxxcom
●精品国产综合乱码久久久久|
国产视频一区二区三区在线观看|
欧美freesex8一10精品|
欧美激情按摩在线|
欧美视频一区|
国产日韩欧美中文|
亚洲成人在线视频网站|
一本色道久久99精品综合
|
亚洲精品在线免费|
在线视频日韩精品|
久久动漫亚洲|
欧美人成在线|
国产一级揄自揄精品视频|
亚洲激情视频在线|
午夜精品在线视频|
欧美大片18|
国产精品久久影院|
国产日本欧美视频|
久久伊人亚洲|
一本不卡影院|
激情一区二区|
欧美国产日韩一区二区三区|
亚洲国产视频一区|
黑人巨大精品欧美一区二区小视频|
亚洲国产成人精品久久久国产成人一区|
99精品国产在热久久|
久久不见久久见免费视频1|
欧美精品久久一区二区|
国产日韩一区二区|
9l国产精品久久久久麻豆|
久久国产视频网|
欧美日韩亚洲一区二区三区在线观看|
国产一区二区三区av电影|
一区二区日韩免费看|
久久综合九色综合久99|
国产精品日韩欧美|
亚洲美女淫视频|
久久综合色一综合色88|
国产欧美精品一区二区三区介绍|
亚洲精品一区二区三区av|
久久久久久网站|
国产精品久久久久av|
欧美激情综合色|
欧美精品乱码久久久久久按摩|
国产一区91精品张津瑜|
亚洲一区二区欧美日韩|
欧美黄色大片网站|
悠悠资源网亚洲青|
欧美在线观看一区二区|
国产精品久久久久久久免费软件|
亚洲日本中文字幕免费在线不卡|
久久久噜噜噜久久中文字幕色伊伊|
国产精品美女久久久浪潮软件|
亚洲看片网站|
欧美成人免费va影院高清|
影音先锋另类|
久久久精品国产99久久精品芒果|
国产美女精品在线|
亚洲欧美第一页|
国产精品激情电影|
亚洲视频免费看|
欧美日韩美女一区二区|
亚洲精品一区二区三区av|
免费观看在线综合色|
娇妻被交换粗又大又硬视频欧美|
久久gogo国模裸体人体|
国产区精品在线观看|
亚洲欧美bt|
国产精品日韩精品欧美精品|
亚洲一区二区欧美日韩|
欧美午夜一区|
亚洲网址在线|
国产精品美女久久久久久2018
|
国产精品久久久久久久久免费樱桃
|
国产一区美女|
欧美在线999|
国产视频在线观看一区二区三区|
午夜精品一区二区三区电影天堂|
国产精品久久夜|
亚洲女女女同性video|
国产精品卡一卡二卡三|
亚洲女优在线|
国产日产亚洲精品系列|
久久av免费一区|
精品成人在线视频|
美女尤物久久精品|
亚洲日本激情|
欧美日韩一区二区三区免费
|
久久久亚洲国产天美传媒修理工|
狠狠色丁香久久婷婷综合_中|
久久久99精品免费观看不卡|
极品少妇一区二区三区精品视频|
六月婷婷久久|
亚洲精选视频免费看|
欧美日韩三级在线|
亚洲一区在线视频|
国产视频一区在线观看|
久久久久久伊人|
91久久午夜|
欧美午夜宅男影院在线观看|
亚洲欧美日韩国产中文|
国产真实精品久久二三区|
久久久久一区|
亚洲精品一区中文|
国产精品国产三级国产a|
欧美一区二区三区男人的天堂|
国内精品久久久久国产盗摄免费观看完整版|
久久久久久久久一区二区|
91久久夜色精品国产网站|
欧美午夜宅男影院在线观看|
欧美一区亚洲|
亚洲第一偷拍|
欧美视频在线观看|
欧美在线观看一区二区|
亚洲国产一区二区三区青草影视|
欧美揉bbbbb揉bbbbb|
午夜久久一区|
亚洲欧洲日本一区二区三区|
国产精品二区影院|
久久亚洲欧洲|
一区二区三区视频在线|
国内成人精品2018免费看|
欧美精品久久一区|
亚洲一区bb|
在线观看日韩www视频免费|
欧美三级日本三级少妇99|
久久国产精品99久久久久久老狼
|
中国日韩欧美久久久久久久久|
国产日韩精品一区二区三区|
欧美成人自拍|
亚洲欧美日韩国产成人|
亚洲国产成人av|
国产精品日日摸夜夜摸av|
裸体女人亚洲精品一区|
亚洲小说区图片区|
亚洲成人在线视频播放|
国产精品萝li|
欧美第一黄色网|
欧美在线播放一区|
日韩一级黄色大片|
国内久久精品|
欧美亚一区二区|
猛干欧美女孩|
欧美一区二区三区婷婷月色|
日韩午夜av|
在线观看视频一区二区欧美日韩|
国产精品成人va在线观看|
美乳少妇欧美精品|
欧美一区成人|
中国亚洲黄色|
亚洲欧洲另类|
黄色资源网久久资源365|
国产精品av久久久久久麻豆网|
麻豆久久精品|
久久99在线观看|
亚洲午夜视频|
亚洲精品少妇30p|
激情视频亚洲|
国产视频一区在线观看一区免费|
欧美日韩精品在线视频|
欧美成人激情视频|
久久久久久91香蕉国产|
亚洲免费在线精品一区|
日韩视频免费观看高清在线视频
|
国产主播精品在线|
国产精品美女久久久久久免费|
99re成人精品视频|
亚洲一区一卡|
亚洲欧美日韩高清|
久久成人18免费网站|
欧美中文字幕在线播放|
日韩亚洲国产欧美|
中文一区二区|
国内精品久久久久伊人av|
国产精品国色综合久久|
欧美精品在线网站|
久久中文久久字幕|
久久成人av少妇免费|
亚洲一区在线直播|
正在播放欧美视频|
一本色道久久加勒比精品|
亚洲人成绝费网站色www|
伊人成人在线|
国内久久精品|
国内精品久久久久久久影视麻豆|
国产欧美激情|
国产伦精品一区二区三区四区免费|
欧美性猛交视频|
欧美日韩一区二区在线|
欧美精品v日韩精品v国产精品|
欧美成黄导航|
欧美成人免费在线视频|
你懂的亚洲视频|
蜜桃av一区|
欧美不卡激情三级在线观看|
久久中文字幕一区二区三区|
久久一日本道色综合久久|
久久婷婷国产综合精品青草|
久久免费精品日本久久中文字幕|
久久久av水蜜桃|
久久综合九色综合久99|
欧美一级电影久久|
国产伦理一区|
亚洲免费成人av电影|