快科技8月9日消息,近日,武漢大學與螞蟻集團聯合發布了新一代語義增強遙感大模型SkySense,堪稱12邊型戰士。
其相關研究成果在國際知名學術期刊《自然機器智能》上在線發表。
當前,遙感基礎大模型在複雜動態地球觀測場景應用中面臨挑戰,如多模態遙感影像數據融合性能欠佳、下遊任務微調依賴大量數據、對遙感語義信息挖掘不足等。
爲攻克這些難題,研究團隊基于前期多模態遙感大模型SkySense,研發出SkySense。
SkySense基于來自11個衛星載荷的2700萬組多模態遙感影像,采用兩階段漸進式學習完成預訓練。有效緩解了大模型對複雜微調流程和大量標注數據的依賴,極大提升了實用性與泛化性。
研究團隊在農業、林業、災害管理等7個領域的12種典型地球觀測任務中,對SkySense進行全面評估。
实验结果显示,SkySense 在这12项任务中均表现卓越,性能优于其他模型。與同期最先進方法相比,在全量微調分類與檢測任務上,平均精度提升4.79%;在少樣本提示分割任務上,平均交並比提升14.08%。
SkySense的前序版本SkySense,曾在國際計算機視覺領域頂會CVPR發表,並在2024年世界人工智能大會發布。
而此次SkySense在农业生产评估、灾害应急响应、国土资源监测禑嵛务中,性能更为优异、稳定,还新增免微调部署能力。
(舉報)