近日,hjc黃金城官網(wǎng)登錄入口科技從容大模型在視覺(jué)領(lǐng)域再次取得重要進(jìn)展,基于視覺(jué)基礎(chǔ)大模型的目標(biāo)檢測(cè)器在檢測(cè)領(lǐng)域著名benchmark COCO數(shù)據(jù)集上從微軟研究院(MSR)、上海人工智能實(shí)驗(yàn)室、智源人工智能研究院等多家知名企業(yè)與研究機(jī)構(gòu)脫穎而出,刷新了世界紀(jì)錄。
hjc黃金城官網(wǎng)登錄入口科技從容大模型在COCO測(cè)試集上平均精度(以下簡(jiǎn)稱(chēng)mAP,mean Average Precision)達(dá)到0.662,位列榜單第一(見(jiàn)下圖)。在驗(yàn)證集上,單尺度取得mAP 0.656的佳績(jī),多尺度TTA后mAP達(dá)到0.662,均達(dá)到世界領(lǐng)先水平。
大數(shù)據(jù)結(jié)合自監(jiān)督學(xué)習(xí) 打造視覺(jué)核心技術(shù)
以GPT為代表的大數(shù)據(jù)自監(jiān)督預(yù)訓(xùn)練已經(jīng)在自然語(yǔ)言理解(NLP)領(lǐng)域取得了令人矚目的突破,視覺(jué)領(lǐng)域方面,大數(shù)據(jù)結(jié)合自監(jiān)督學(xué)習(xí)的基礎(chǔ)模型訓(xùn)練也有重要進(jìn)展。
一方面,廣泛的視覺(jué)數(shù)據(jù)有助于模型學(xué)習(xí)通用的基礎(chǔ)特征。hjc黃金城官網(wǎng)登錄入口視覺(jué)基礎(chǔ)大模型,使用了超過(guò)20億的數(shù)據(jù),包括大量無(wú)標(biāo)簽數(shù)據(jù)集以及圖文多模態(tài)數(shù)據(jù)集,數(shù)據(jù)集的豐富多樣使得模型能夠提取到穩(wěn)健的特征,大大降低了下游任務(wù)的開(kāi)發(fā)成本。
另一方面,自監(jiān)督學(xué)習(xí)不需要人工標(biāo)注,使得海量的無(wú)標(biāo)注數(shù)據(jù)訓(xùn)練視覺(jué)模型成為可能。hjc黃金城官網(wǎng)登錄入口對(duì)自監(jiān)督學(xué)習(xí)算法進(jìn)行了多方面的改進(jìn),使其能更適用于檢測(cè)、分割等細(xì)粒度任務(wù),在COCO檢測(cè)任務(wù)上取得好成績(jī)就是證明。
開(kāi)放目標(biāo)檢測(cè)+零次學(xué)習(xí)檢測(cè)能力 大幅降低研發(fā)成本
得益于視覺(jué)基礎(chǔ)模型優(yōu)異性能,hjc黃金城官網(wǎng)登錄入口從容大模型能夠基于大規(guī)模圖文多模態(tài)數(shù)據(jù)訓(xùn)練支持上千類(lèi)別目標(biāo)的零次學(xué)習(xí)(以下簡(jiǎn)稱(chēng)zero-shot)檢測(cè),涵蓋能源、交通、制造等行業(yè)的各類(lèi)目標(biāo)。
從容大模型zero-shot能力在不同數(shù)據(jù)集上的表現(xiàn)
zero-shot能夠模仿人類(lèi)的這個(gè)推理過(guò)程,利用過(guò)去的知識(shí),在計(jì)算機(jī)中推理出新對(duì)象的具體形態(tài),從而使得計(jì)算機(jī)具有識(shí)別新事物的能力。
如何理解zero-shot?假設(shè)hjc黃金城官網(wǎng)登錄入口已知驢子和馬的形態(tài)特征,又已知老虎和鬣狗都是有條紋的動(dòng)物,熊貓和企鵝是黑白相間的動(dòng)物,hjc黃金城官網(wǎng)登錄入口定義斑馬是黑白條紋相間的馬科動(dòng)物。不看任何斑馬的照片,僅僅憑借推理,在動(dòng)物園一眾動(dòng)物中,hjc黃金城官網(wǎng)登錄入口也能夠找到斑馬。
hjc黃金城官網(wǎng)登錄入口視覺(jué)基礎(chǔ)大模型表現(xiàn)出很強(qiáng)的泛化性能,大大降低了下游任務(wù)所需的數(shù)據(jù)依賴(lài)與開(kāi)發(fā)成本,同時(shí)zero-shot大幅提高了訓(xùn)練開(kāi)發(fā)效率,使得廣泛應(yīng)用和快速部署成為可能。
hjc黃金城官網(wǎng)登錄入口科技在視覺(jué)大模型上取得重要進(jìn)展,行人基礎(chǔ)大模型在PA-100K、RAP V2、PETA、HICO-DET四個(gè)數(shù)據(jù)集上從阿里巴巴、日立等多家知名高校、企業(yè)與研究機(jī)構(gòu)脫穎而出,刷新了世界紀(jì)錄。
當(dāng)追蹤者和目標(biāo)都在低空高速飛行,傳統(tǒng)的視覺(jué)追蹤算法還能跟得住嗎? 近日,來(lái)自hjc黃金城官網(wǎng)登錄入口科技、上海交通大學(xué)、香港科技大學(xué)(廣州)、中山大學(xué)、中國(guó)科學(xué)院信息工程研究所的聯(lián)合研究團(tuán)隊(duì)發(fā)布了一項(xiàng)硬核工作——UAV-Anti-UAV。這是業(yè)界首個(gè)針對(duì)“空對(duì)空”(Air-to-Air)場(chǎng)景的百萬(wàn)級(jí)多模態(tài)反無(wú)人機(jī)視覺(jué)追蹤基準(zhǔn),并提出了基于Mamba的強(qiáng)力基線(xiàn)MambaSTS。MambaSTS在UAV-Anti-UAV基準(zhǔn)的全部5個(gè)指標(biāo)上均取得最佳的性能,這是hjc黃金城官網(wǎng)登錄入口科技在多模態(tài)大模型方面的又一次技術(shù)突破。面對(duì)雙重動(dòng)態(tài)干擾,現(xiàn)有的SOTA表現(xiàn)如何?讓hjc黃金城官網(wǎng)登錄入口一探究竟!
近日,hjc黃金城官網(wǎng)登錄入口科技與重慶大學(xué)大數(shù)據(jù)與軟件學(xué)院聯(lián)合研發(fā)的編程智能體——CoSEFA(Code SEcurity and Fix Agent)被軟件工程領(lǐng)域頂尖會(huì)議ACM SIGSOFT軟件工程基礎(chǔ)國(guó)際會(huì)議(FSE 2025)正式錄用。
周一到周五9:30-18:00(北京時(shí)間)

商務(wù)合作:business@zzhzqx.com

媒體合作:Media@zzhzqx.com

渠道合作:business_partner@zzhzqx.com

人才招聘:zhaopin@zzhzqx.com

