国产精品成人网站,精品人妻互换一区二区三区,大肉大捧一进一出视频免费的试看,婷婷激情综合网

快速發(fā)布求購 登錄 注冊(cè)
行業(yè)資訊行業(yè)財(cái)報(bào)市場標(biāo)準(zhǔn)研發(fā)新品會(huì)議盤點(diǎn)政策本站速遞
摘要目前遙感領(lǐng)域視覺模型大多都遵循“一任務(wù)一架構(gòu)”的范式,使得這些專才模型無法在同一架構(gòu)下統(tǒng)一處理多模態(tài)圖像和多任務(wù)推理。

  【儀表網(wǎng) 研發(fā)快訊】2024年5月,北京理工大學(xué)前沿交叉學(xué)院數(shù)據(jù)流體課題組近日在遙感多模態(tài)大語言模型研究中取得重要進(jìn)展,相關(guān)成果以“EarthGPT: A Universal Multi-modal Large Language Model for Multi-sensor Image Comprehension in Remote Sensing Domain”為題發(fā)表在國際頂級(jí)期刊《IEEE Transactions on Geoscience and Remote Sensing (TGRS)》上發(fā)表。北京理工大學(xué)為唯一通訊單位,北京理工大學(xué)前沿交叉學(xué)院博士張偉和雷達(dá)技術(shù)研究院博士蔡妙鑫為共同第一作者,毛雪瑞教授為通訊作者。
 
  目前遙感領(lǐng)域視覺模型大多都遵循“一任務(wù)一架構(gòu)”的范式,使得這些專才模型無法在同一架構(gòu)下統(tǒng)一處理多模態(tài)圖像和多任務(wù)推理。最近,通用多模態(tài)大語言模型(Multi-modal Large Language Models,簡稱MLLMs)在自然圖像領(lǐng)域取得了顯著成功。然而MLLMs在遙感領(lǐng)域的發(fā)展仍處于起步階段。為填補(bǔ)這一空白,毛雪瑞教授團(tuán)隊(duì)提出了EarthGPT遙感通才模型,將多傳感器圖像理解和多種遙感視覺任務(wù)都無縫集成在同一個(gè)框架中。EarthGPT可在自然語言指令下,實(shí)現(xiàn)光學(xué)、合成孔徑雷達(dá)(SAR)圖像和紅外圖像的理解,完成遙感場景分類、圖像描述、視覺問答、目標(biāo)描述、視覺定位和目標(biāo)檢測等多種任務(wù)(圖1)。
 
  圖1 EarthGPT可通過自然語言交互的方式,完成多傳感器遙感圖像解譯和多視覺推理任務(wù)
 
  遙感通才模型EarthGPT包括三項(xiàng)關(guān)鍵技術(shù):(1)視覺增強(qiáng)感知機(jī)制,通過混合專家編碼器提煉視覺粗粒度語義信息和細(xì)粒度感知信息。(2)跨模態(tài)交互理解方法,基于大規(guī)模自然圖像數(shù)據(jù)集做預(yù)訓(xùn)練,賦予大語言模型基本的圖像理解能力和多輪對(duì)話能力。(3)統(tǒng)一指令微調(diào)方法,在本文構(gòu)建的遙感多模態(tài)指令數(shù)據(jù)集MMRS-1M(含100萬圖像-文本對(duì))上做微調(diào),實(shí)現(xiàn)遙感場景下的綜合圖像解譯能力(圖2)。
 
圖2 EarthGPT模型架構(gòu)圖
 
  EarthGPT具備“多才多藝”的遙感視覺解譯能力和多傳感器圖像理解能力,且表現(xiàn)出了卓越的開放域推理能力。該研究貢獻(xiàn)了一個(gè)通用的多模態(tài)多任務(wù)推理框架和目前最大的MMRS-1M遙感多模態(tài)指令數(shù)據(jù)集,展示出了極大的工業(yè)界實(shí)際應(yīng)用的潛力。
 
  此項(xiàng)工作以北京理工大學(xué)為唯一通訊單位,得到了國家自然科學(xué)基金的支持。

我要評(píng)論
文明上網(wǎng),理性發(fā)言。(您還可以輸入200個(gè)字符)

所有評(píng)論僅代表網(wǎng)友意見,與本站立場無關(guān)。

版權(quán)與免責(zé)聲明
  • 凡本網(wǎng)注明"來源:儀表網(wǎng)"的所有作品,版權(quán)均屬于儀表網(wǎng),未經(jīng)本網(wǎng)授權(quán)不得轉(zhuǎn)載、摘編或利用其它方式使用上述作品。已經(jīng)本網(wǎng)授權(quán)使用作品的,應(yīng)在授權(quán)范圍內(nèi)使用,并注明"來源:儀表網(wǎng)"。違反上述聲明者,本網(wǎng)將追究其相關(guān)法律責(zé)任。
  • 本網(wǎng)轉(zhuǎn)載并注明自其它來源的作品,目的在于傳遞更多信息,并不代表本網(wǎng)贊同其觀點(diǎn)或證實(shí)其內(nèi)容的真實(shí)性,不承擔(dān)此類作品侵權(quán)行為的直接責(zé)任及連帶責(zé)任。其他媒體、網(wǎng)站或個(gè)人從本網(wǎng)轉(zhuǎn)載時(shí),必須保留本網(wǎng)注明的作品來源,并自負(fù)版權(quán)等法律責(zé)任。
  • 如涉及作品內(nèi)容、版權(quán)等問題,請(qǐng)?jiān)谧髌钒l(fā)表之日起一周內(nèi)與本網(wǎng)聯(lián)系,否則視為放棄相關(guān)權(quán)利。
  • 合作、投稿、轉(zhuǎn)載授權(quán)等相關(guān)事宜,請(qǐng)聯(lián)系本網(wǎng)。聯(lián)系電話:0571-87759945,QQ:1103027433。
廣告招商
今日換一換
新發(fā)產(chǎn)品更多+

客服熱線:0571-87759942

采購熱線:0571-87759942

媒體合作:0571-87759945

  • 儀表站APP
  • 微信公眾號(hào)
  • 儀表網(wǎng)小程序
  • 儀表網(wǎng)抖音號(hào)
Copyright ybzhan.cn    All Rights Reserved   法律顧問:浙江天冊(cè)律師事務(wù)所 賈熙明律師   儀表網(wǎng)-儀器儀表行業(yè)“互聯(lián)網(wǎng)+”服務(wù)平臺(tái)
意見反饋
我知道了
999精品国产| 亚洲国产精品久久久久久无码| 天堂成人一区二区三区| 日韩一区二区三区无码视频| 蜜桃臀久久久蜜桃臀久久久蜜桃臀| 国产精品久久久久久久hd| 亚洲AV无码乱码一级毛片动态图| 动漫AV免费| 性做久久久久久久免费看| 精品人妻一| 夜夜添无码一区二区三区| 日韩无码视屏| 久久888| 欧美一区二区三区爱爱| 饥渴XXHD麻豆XXHD骆驼| 色悠悠视频在线| 国产午夜AAA片无码无片久久| 日本中文字幕第一页| 中文字幕在线资源| 少妇精品久久久一区二区三区| 99热精品国产| 无码少妇一区二区| 国产精品无码自拍| 午夜福利伦伦电影理论片在线观看 | 亚洲性无码| 欧美精品入口| 国产丝袜av| 中文字幕一区二区三区在线观看| 50岁退休熟女露脸高潮 | 69亚洲精品| 我的公把我弄高潮了视频| 中文字幕一区二区无码| 五月天无码视频| 影音先锋无码资源| 超碰免费看| 亚洲AV无码一区二区三区网址| 亚洲AV无码国产精品美园久不卡| 国产精品污网站| 久久婷婷五月天| 国产精品444| 久久精品99国产精品日本|