SkySense是什么？

SkySense是一個由螞蟻集團開發的20億參數的多模態遙感基礎模型，SkySense是螞蟻百靈大模型在多模態領域最新的研發成果。SkySense能夠處理多種模態的遙感影像，支持土地利用監測、目標識別等任務，并已在支付寶等場景中得到應用。

螞蟻集團計劃開放該模型參數，以促進智能遙感技術的發展。

SkySense的主要特點

1. 多模態處理能力：能夠處理和分析多種遙感數據模態，包括文本、紅外光、可見光和SAR雷達等。
2. 高參數規模：擁有20億參數，是目前國際上參數規模最大的多模態遙感模型。
3. 全面的任務覆蓋：覆蓋了土地利用監測、高分辨率目標識別、地物變化檢測等多種遙感感知任務。
4. 高精度識別：在17項測試場景中的指標均超過國際同類產品，識別精度高。
5. 時序遙感影像建模：實現了多分辨率的時序遙感影像建模，提升了在海量數據和多種任務中的泛化能力。
6. 數據集預訓練：基于螞蟻集團內部構建的19億遙感影像數據集進行預訓練。
7. 實際應用：已在支付寶五福節AI互動、螞蟻醫療數字人等場景中得到應用。
8. 開放合作：螞蟻集團計劃開放SkySense模型參數，與行業共建，推動智能遙感技術的應用發展。

這些特點使得SkySense成為一個強大的遙感數據處理工具，適用于城市規劃、森林保護、應急救災、綠色金融和農業監測等多個重要領域。

SkySense的評測結果

SkySense在總計17項國際權威公開數據集進行了測評，其測試任務類型包括了土地利用監測、高分辨率目標識別、地物變化檢測等7種常見遙感感知任務，并與國際上已發布的包括IBM和NASA聯合研發的Prithvi等共18個全球主流同類模型做了測試結果比較。數據顯示，17項測評中SkySense均名列第一。譬如，在國際高清遙感地物檢測榜單FAIR1M 2.0中，SkySense平均精度(mAP)領先第二名超3%。

在剛剛公布的CVPR2024論文入選結果上，SkySense的研究成果亦被收錄。CVPR是由IEEE舉辦的計算機視覺和模式識別領域的頂級會議，是國際計算機視覺三大頂會之一。

SkySense的應用場景

SkySense模型的應用場景包括：

1. 土地利用監測：監測土地覆蓋變化，評估城市擴張、農業用地變化等。
2. 農作物觀測：分析農作物生長情況，輔助農業生產和資源管理。
3. 地物變化檢測：識別和監測自然災害后的變化，如洪水、地震等對地表的影響。
4. 城市規劃：輔助城市規劃和管理，通過遙感數據進行城市基礎設施分析。
5. 森林保護：監測森林覆蓋率、植被健康狀況，支持環境保護工作。
6. 應急救災：在災害發生時快速評估受災區域，為救援行動提供決策支持。
7. 綠色金融：評估環境項目的環境效益，為綠色投資提供數據支持。
8. 農業監測：監測農田健康狀況，預測產量，為農業保險和精準農業提供服務。
9. 數字人和AI互動：在支付寶等平臺的數字人和AI互動場景中提供技術支持。
10. 科學研究：支持地理學、氣候學、生態學等領域的遙感數據研究。

SkySense模型的多模態處理能力和高精度識別使其在這些領域具有廣泛的應用潛力。隨著技術的進一步發展和模型參數的開放，其應用場景可能會進一步擴展。

?版權聲明：如無特殊說明，本站所有內容均為AIHub.cn原創發布和所有。任何個人或組織，在未征得本站同意時，禁止復制、盜用、采集、發布本站內容到任何網站、書籍等各類媒體平臺。否則，我站將依法保留追究相關法律責任的權利。