赖积保,康旭东,鲁续坤,李树涛
1.国家航天局 对地观测与数据中心, 北京 100101;2.湖南大学 电气与信息工程学院, 长沙 410082
卫星遥感能够快速、高效、实时地获取地球表面海量的地理空间数据,是人类了解和认知地球的必要途径,在资源调查、环境监测、灾害应急、军事侦察等国家重大战略需求领域发挥了至关重要的作用(陈锐志等,2019;廖小罕,2021)。
在遥感应用中,传统卫星遥感数据处理高度依赖具备专业知识的人员,需结合卫星遥感数据特点、实际情况和专业知识,进行人工处理和解译(Bo等,2016),这种解译方式耗时耗力且精度难以保障。近年来,随着卫星遥感数据的指数级增长,人工处理数据的方式已难以满足用户高效率高精度信息提取的要求。因此,在中国遥感卫星技术高速发展的基础上,如何高效、快速处理海量遥感数据已成为遥感应用亟需解决的关键科学难题。
国内外学者围绕基于人工智能的卫星遥感应用开展了大量探索性研究,提出了一系列新思想、新方法和新技术。李德仁(2019a)提出了对地观测脑的思想,指出将人工智能应用于卫星遥感,可提升地球空间信息处理的感知认知能力。围绕中国高分、资源系列卫星等不同系列遥感数据的智能处理,研究人员提出了一系列包含图像获取、存储、处理、分析与应用的卫星遥感新方法。Yuan 等(2020)介绍了人工智能技术在环境遥感中的主要成果和存在的问题,详细阐述了传统神经网络和深度学习网络结构以及两种方法在土地覆盖、大气、植被参数、农田估产、温度、蒸散和海洋水色等方面的应用,指出了人工智能在结合物理模型仿真、纳入地理法则和基于小样本与迁移学习中的技术瓶颈;Ma等(2019b)对遥感深度学习模型、图像分辨率、研究区域类型和分类精度进行了元分析,着重介绍了深度学习方法在遥感图像融合、配准、场景分类、土地利用与土地覆盖、语义分割和图像分析方面的应用,指出了人工智能在遥感应用中的发展趋势;Zang 等(2021)总结了基于监督学习、半监督学习和无监督学习的高空间分辨率遥感图像土地利用制图方法,探讨了小样本情形下分类精度、小目标分割性能和获取边缘分割高质量边界等挑战难题;Kattenborn 等(2021)详细介绍了深度卷积神经网络在植被遥感方面的应用,深度学习技术的自学习能力能更有效地利用多源遥感数据,实验结果表明深度学习方法优于浅层机器学习方法,这将会极大促进大数据时代植被遥感应用;Ghaffarian等(2021)介绍了基于深度学习注意力机制的遥感图像处理方法,在使用深度学习方法进行遥感图像分类、图像分割、变化检测和目标检测时,使用注意力机制可以提高总体精度。
综上所述,将人工智能技术、遥感对地观测大数据和遥感实际应用相结合,建立基于人工智能的卫星遥感应用体系已成为卫星遥感技术发展的必然趋势(张兵,2018;Zhang 等,2020)。本文首先从多模态遥感数据源出发,介绍了资源、雷达等典型对地观测系统。然后从卫星遥感应用需求出发,阐述了人工智能技术在卫星遥感中的业务化应用。最后,本文深入探讨了现阶段制约人工智能技术在遥感领域应用成效的关键问题,并对未来发展趋势进行了展望。
当前,中国遥感卫星已发展成为拥有资源、雷达、气象、海洋等系列卫星的对地观测系统。美国、德国、日本、俄罗斯、以色列等国都拥有自主的高分辨率光学或雷达遥感卫星,具备较强的全球地理空间数据的获取能力,卫星遥感已成为世界各国竞争的高科技前沿。其中比较典型的卫星系列有美国国家航空航天局(NASA)的陆地观测系列卫星(Landsat)、美国国家海洋大气局(NOAA)气象观测系列卫星、欧洲航天局哥白尼计划(GMES)中的地球观测哨兵系列卫星、日本对地观测ALOS(Advanced Land Observation Satellite)系列卫星和中国的资源(ZY)、高分(GF)和环境(HJ)系列卫星(赵文波,2019)。
美国陆地观测系列卫星运行时间最长,从1972年美国成功发射第一颗陆地观测卫星(Landsat 1)以来,该系列共计发射了8 颗卫星,其中Landsat 8 于2013年发射,该卫星搭载了陆地成像仪OLI(Operational Land Imager)和热红外传感器TIRS(Thermal Infrared Sensor),其主要任务是探测地表资源与环境、监视和协助管理农、林和水利资源的合理利用,考察和预报各种严重的自然灾害(朱金峰等,2019;郑忠等,2021;关真富等,2021)。此外,美国陆续成功发射了极地轨道环境遥感系列卫星(Terra 和Aqua)、轨道观测卫星(OrbView)、伊克诺斯卫星(IKONOS)、地球眼卫星(GeoEye)、快鸟卫星(QuickBird)、世界观测卫星(WorldView)等一系列民用遥感卫星,图像的空间分辨率达到了亚米级甚至厘米级,光谱分辨率达到纳米级甚至亚纳米级,为遥感对地观测提供了海量的高分辨遥感数据。其中代表性的极地轨道环境遥感卫星获取的中分辨率成像光谱仪(MODIS)数据具有36 个光谱波段,数据采集和更新快,每1 至2 天对地球表面观测一次。为获取陆地和海洋温度、初级生产率、陆地表面覆盖、云、汽溶胶、水汽和火情信息提供了重要支撑(刘健,2021;史凯琦等,2021;文凤平等,2021;Wang等,2021)。
自2014年以来,欧洲哥白尼计划(Copernicus)中的“哨兵”系列(Sentinel)卫星陆续发射,截至2021年初,共计7 颗“哨兵”系列(Sentinel)卫星在轨运行,数据覆盖全球范围,用于海洋监测、土地利用覆盖、全球变化等诸多领域(唐少飞等,2020;赵欣怡等,2021;宁晓刚等,2022)。日本的地球观测卫星计划主要包括陆地观测卫星和大气、海洋观测卫星两个系列,ALOS 卫星于2006年发射,是JERS-1(日本地球资源卫星一号)与ADEOS(先进地球观测卫星)的后继星,陆地观测技术更加先进,包括全色遥感立体测绘仪(PRISM)、先进可见光与近红外辐射计-2(AVNIR-2)、相控阵型L 波段合成孔径雷达(PALSAR)等3个传感器,可以获取全球高分辨率对地观测数据,成功应用于数字高程测绘、资源调查等领域(张凝 等,2021;张腾 等,2021;Darwish 等,2021;Liu 等,2021b)。此外,德国、俄罗斯、印度等世界大国都非常重要遥感卫星的发展,并不断拓宽相关应用领域。
中国遥感卫星技术起源于20 世纪80年代,经过近40年的快速发展,取得了长足的进步,在陆地资源调查、生态环境监测、灾害预测评估、重大工程监视与决策等诸多领域(Dou等,2014;孙伟伟等,2020;徐冠华等,2016;Guo等,2019)得到了广泛应用。陆地观测遥感卫星已经具有全色、多光谱、红外、合成孔径雷达(SAR)、视频和夜光等多种手段的观测能力,行成了包括资源(ZY)、高分(GF)、环境(HJ)和小卫星在内的多个对地遥感观测卫星系列,在国土资源监测、环境监测和污染防治、灾害监测和城市规划等领域(王桥和刘思含,2016;Xu 等,2014)得到了广泛的应用。中国已发射的陆地观测卫星所获取的遥感数据如表1所示。
表1 中国主要陆地观测卫星遥感数据体系Table 1 Major land observation remote sensing satellites data system in China
随着航空航天与传感器技术的发展,遥感卫星呈现从低分辨到高分辨,从单模态到多模态,从单星独立到多星协同,从技术实验型到业务应用型的发展趋势。中国现有在轨卫星具备了全天时、全天候的全球观测能力,生产了种类齐全、功能互补、尺度完整的各类遥感数据,建成了完善的遥感卫星技术体系。卫星遥感技术已覆盖了全球土地、农业、森林、草场、城市、水体、环境、生态、灾害、测绘等诸多领域,为各级部门提供了科学的辅助决策信息(Xiao 等,2018;Zhang等,2019a;童庆禧,2021;周凯,2021)。
人工智能AI(Artificial Intelligence)由20世纪50年代开始发展,是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学(张钹 等,2020)。2006年以来,随着大数据的进一步积聚、理论算法的革新、计算能力的提升,人工智能在很多应用领域取得了突破性进展(Zhao 等,2021;Misra,2022)。例如,以深度学习为代表的机器学习技术在计算机视觉和语音识别等领域取得巨大成功,识别性能甚至超过人类,人工智能技术再次受到学术界和产业界的广泛关注(Schmidhuber,2015;Vogt,2018;Cheng 等,2018)。2017年7月8日,国务院(2017)发布了《新一代人工智能发展规划》,明确指出人工智能发展进入新阶段,新一代人工智能的发展重点是大数据驱动知识学习、跨媒体协同处理、人机协同增强智能、群体集成智能、自主智能系统等。下面,本文将对遥感领域的人工智能技术发展现状进行分类介绍。
(1)机器学习。机器学习是人工智能的关键核心技术,旨在通过学习算法让计算机系统从观测数据(样本)中训练模型,寻找规律,利用这些规律对未来数据或无法观测的数据进行预测,涉及统计学、概率论、逼近理论、神经网络、优化理论、计算机科学、脑科学等诸多领域。根据学习模式,机器学习分为监督学习、无监督学习、主动学习、半监督学习、迁移学习、强化学习等;根据学习方法可分为传统机器学习和深度学习(周培诚等,2021)。
机器学习技术是人工智能的核心,是实现遥感信息智能处理与分析的关键。一方面,支持向量机、随机森林、决策树、概率图模型、卷积神经网络、生成对抗网络等传统和新型机器学习理论方法在遥感领域得到了广泛应用,形成了从图像表示到图像识别与解译的全面的遥感图像智能学习理论方法体系(龚健雅,2018)。例如,在遥感图像目标检测(Cheng 等,2019;Feng 等,2020a)、场景分类(Xia 等,2018;Boualleg 等,2019;Lu 等,2019;Liu 等,2021a)、图像识别(Cheng 等,2021)、语义分割(Yao 等,2016;肖春姣 等,2020)、变化检测(Mou 等,2019;Chen 等,2020a)、图像检索(张洪群 等,2017)等领域,机器学习方法被用于对遥感图像信息进行建模、分析、推理与判断,最终获取图像中地物的类型、空间分布、物理/生物参数等信息(Lary 等,2016;周培诚等,2021)。另一方面,卫星遥感数据呈现出高空间分辨率、高光谱分辨率、高时间分辨率、大数据、高维度的特点,各种复杂的遥感应用对机器学习方法提出了新的需求。遥感机器学习已发展成为机器学习领域的重要分支,促进了新的机器学习理论方法的产生(龚健雅,2018;周志华,2016)。例如,针对高分辨高光谱图像数据维度高且标注样本稀缺的问题,国内外学者提出了一系列新的小样本高维数据机器学习理论方法(Tong等,2020;冉琼 等,2018;Gao等,2020)。
(2)计算机视觉。计算机视觉是使用计算机模仿人类视觉系统的科学,让计算机拥有类似人类提取、处理和解译图像以及图像序列的能力。它是一个包括计算机科学、数学、生物学和心理学的跨领域交叉学科。一方面,计算机视觉的很多任务与机器学习是密不可分的,例如图像识别、目标检测、目标跟踪、语义分割这些计算机视觉主流技术的核心均是机器学习理论方法(Wang等,2019)、Li 等,2020a;Ma 等,2019a);另一方面,在计算成像、立体视觉、底层视觉感知、动态视觉等方面,计算机视觉又形成了自己独特的理论体系(高连如等,2018;Xuan等,2020)。
计算机视觉技术在卫星遥感领域的应用十分广泛。遥感领域的图像识别、目标检测、场景分类、立体测绘、图像匹配方法往往是在计算机视觉领域同类方法的基础上结合遥感数据的自身特性进行改进和优化(Ye 等,2020;Gu 等,2021;Liu 等,2021b)。例如,在高分遥感成像领域,空谱融合成像技术被成功应用于全色与多光谱、多光谱与高光谱融合成像(王芬等,2021;李树涛等,2021)。通过融合高分辨率的全色/多光谱和低分辨率的多光谱/高光谱图像,可有效提升遥感图像的空间与光谱分辨率(Li 等,2018b;Dian等,2021);在立体测绘领域,国内外学者研制了一系列基于双目立体视觉的立体测绘装置与系统,形成了较完善的光学遥感立体测绘技术体系(曹海翊等,2021);在遥感图像表示领域,Kang 等(2014,2015,2017)从人眼对光照和颜色的本征分解视觉感知机理出发,提出了高分辨高光谱遥感图像本征分解理论方法,实现了高分辨高光谱图像高维复杂空谱结构的准确表征;在遥感图像复原领域,计算机视觉领域的自然图像复原方法被拓展应用于遥感图像去噪、去雾、去阴影、去云等任务,发展出一系列新的遥感图像复原方法(Duan等,2020,2021;Hu等,2020)。
(3)其他技术。人工智能领域其他核心技术主要包括知识图谱、自然语言处理、人机交互和生物特征识别技术。这类技术在卫星遥感领域的应用尚处于探索阶段,尚未形成十分完善的理论方法体系。
知识图谱是由Google 在2012年提出的概念,本质上是结构化的由节点和边组成的语义网络,通过这种关系网络对遥感应用中要素之间的关联进行表示与分析,可实现面向海量遥感数据的知识挖掘与智能决策,在公共安全保障、自然灾害应急(杜志强等,2020)、土地环境研究(郑翔天等,2021)等领域均得到了成功应用。
自然语言处理主要包括机器翻译、信息抽取、语义理解等。自然语言处理与遥感的结合主要体现在图像检索、图像描述等方面。一方面,通过自然语言处理技术,从用户提出需求的文本中抽取遥感图像关键信息要素,可服务于图像检索相关的遥感应用任务(郑忠刚等,2019);另一方面,在遥感图像识别和场景分类的基础上,结合自然语言处理技术,可生成对遥感图像的文字化描述,从而服务更复杂的遥感应用任务(Lu 等,2020;Wang等,2020)。
人机交互主要研究计算机系统与人类用户之间的信息交换,包括情感交互,语音交互,体感交互及脑机交互等;生物特征识别涉及指纹、掌纹、人脸、虹膜、声纹、步态等多种生物特征的检测与分析(孙哲南等,2021)。随着遥感技术的智能化水平进一步提高,人机交互与生物特征识别的相关技术有望在遥感领域得到拓展应用。例如,在遥感图像标注过程中,可结合视觉与语音交互技术提升样本标注效率。
综上,当前人工智能技术在卫星智能遥感领域得到了广泛应用,但现有卫星遥感领域的机器学习、机器视觉等技术的优势主要体现在某些具体任务上,与真正人类的自学习认知能力仍相去甚远。这就需要思考如何从类脑智能的最新研究成果出发,进一步推动遥感领域新一代人工智能技术的发展。未来,人工智能的最大优势将不再是静态的机器学习算法,而是能够自主从遥感数据中获取知识,实现类脑的信息编码、处理、记忆、学习与推理,并不断对自身进行强化的具备高可解释性、强泛化能力的人工智能。为实现这一目标,一方面需进一步突破自适应学习、自主学习等理论方法;另一方面,需建立新的大规模类脑智能计算新模型和脑启发的认知计算模型。
随着人工智能与卫星遥感技术的快速发展,国内外学者不仅提出了一系列新的遥感图像智能处理、分析与解译理论、方法和技术。这些智能化的遥感手段在资源调查、环境监测、灾害监测、智慧城市、农林水产业自动化分析、金融风险评估和军事侦察等领域也得到了广泛的应用(Gu 和Tong,2015;Li 等,2018a;陈仲新 等,2019),它们的卫星遥感业务化应用的智能化水平越来越高,如图1所示。
图1 卫星遥感应用技术发展脉络Fig.1 The development of satellite remote sensing application technology
在资源调查领域,基于人工智能的卫星遥感技术已深度融入到资源调查的主体业务和工作流程中。首先,米级、亚米级分辨率的各类卫星遥感数据已经全面应用于土地资源调查与监测、地质矿产勘查、基础地理信息数据库更新等方面,应用成果显著(廖小罕等,2020);其次,通过对高分辨遥感大数据进行智能化的处理和分析,可快速提取和发现国土资源的全要素变化,实现住宅、商业区、工业用地、林业用地、农用地等重点区域的高精度动态监测(Guo 等,2016;Gong 等,2019)。当前,基于国产高分(GF)、资源(ZY)、环境(HJ)、珞珈一号等卫星数据已实现了重点区域的水体、道路、居民区、商业区、建设用地等要素的精确提取,基本满足了资源调查的需要,进一步丰富了人工智能和卫星遥感的应用场景(赵伍迪等,2021;Chen等,2018;李翔等,2019)。
在环境监测方面,卫星遥感技术被成功应用于大气、水、土壤与植被生态环境监测(Wolanin等,2019;王桥,2021)。例如,在大气污染遥感监测方面,智能遥感图像处理与解译技术已被成功应用于检测硫氧化物等污染气体、臭氧等温室气体,反演气溶胶光学厚度(Li 等,2017;Kleynhans 等,2017;Xu 等,2018);在水污染遥感监测方面,人工智能技术已被应用于叶绿素、浮游生物、悬浮物、富营养化指标等水质参数的定量反演(Peterson 等,2020;Zhang 等,2020;Chen 等,2020b);在生态环境遥感反演方面,利用人工智能技术可进行叶面积指数、生物量、植被覆盖度、植被高度、植被含水量、地表温度等一系列生态参数的定量反演(Gao 等,2018;Li 等,2020b;Jin 等,2020);在海洋环境监测方面,无监督、半监督等深度神经网络方法已被应用于海上溢油面积、污染速度和扩散方向监测,具有重要意义和实用价值(Liu 等,2017b;杨红和杭君,2014)。
参考近年来的研究趋势,环境遥感监测正呈现从模型驱动向数据驱动发展的新趋势(王桥,2021)。与传统基于先验知识与反演模型的环境遥感监测方法相比,深度学习等人工智能前沿理论方法能够更好的挖掘海量遥感数据中隐含的深层知识,为解决现有环境遥感反演模型普适性不强、反演精度和效率不高等难题提供了重要的技术支撑。
在灾害监测方面,人工智能技术可以对以往积累的海量灾害遥感数据信息进行学习,挖掘和分析数据中的高价值信息,实现洪水、火灾、地震、泥石流、海啸等典型自然灾害的动态监测,为研究人员发现灾情的产生和发展规律,灾害评估与应急响应,甚至于认知和预测灾害提供重要技术支撑(Kaku,2019)。例如,在灾害日常监测与预警等备灾阶段,利用卫星智能遥感技术发现潜在的孕灾环境、致灾因子、承灾体等信息,通过对灾害发生的风险等级、区域划分实现灾害风险评估与承灾体脆弱性评估,为应灾减灾准备措施提供依据(李维炼 等,2019;Liu 等,2017a);在灾害应急响应阶段,卫星智能遥感技术应用于对灾害本身的动态监测与承灾体损失评估,为综合评估、次生灾害的风险预警以及灾害救援提供重要的决策依据(Lin 等,2013;Yin 等,2017;Feng 等,2020b);在灾后恢复重建期间,卫星智能遥感技术有效支持了灾区恢复重建规划制定,并对恢复重建的进度、效益、质量进行动态评测,为恢复重建和减灾设施建设的成效提供科学的数据参考(范一大等,2016;卢乃锰等,2017;陈润等,2020)。另外,李翔等(2019)利用珞珈一号夜光遥感数据实现了火灾事件的自动变化监测;杜培军等(2012)、宫鹏等(2011)将国产环境与灾害监测预报小卫星星座A、B 星(HJ-1A/B)遥感数据应用于日本海啸灾害监测,有效地提取了受灾区域面积,为灾害监测评估提供了支撑。
在智慧城市方面,智能卫星遥感技术是全面宏观感知城市状态的重要手段,为城市建设、环境保护、应急救援提供决策支持,是构建智慧城市的关键核心技术。例如,在城市规划与管理方面,将卫星遥感与5G 通信、数字孪生、人工智能等技术相结合,可搭建精准、高效、实时的城市空间规划与管理“一张图”,实现融合水利、交通、工业、农业、医疗、教育等信息于一体的智能化城市监测与管理系统(Dembski 等,2020;Batty,2018;张新长等,2021);在城市智慧交通方面,空间信息与人工智能技术的结合可以便捷高效准确地识别道路的交通运行情况,为交通管控,减少交通拥堵提供技术支撑(陈龙等,2021);在城市智慧水利方面,智能卫星遥感技术可用于监测城市不透水面情况与水体的污染情况,预测洪水与内涝高风险区域(李方刚等,2020)。
农林水产业自动化分析是遥感技术应用最广泛的领域,具有十分重要的意义。利用智能卫星遥感技术可实现农田种植、森林、草原、渔业、畜牧业及热带作物的面积、产量、质量、类型、农业灾害、养殖环境、设施、涉渔工程等要素的日常动态观测(龚健雅和钟燕飞,2016)。
在农业方面,通过遥感图像识别与定量反演技术实现农作物种植面积、类型和空间分布监测、农作物生长情况监测、农作物分类和估产、作物病虫害识别和预测、土壤墒情和地表蒸散发等(周亮等,2019;金楷仑和郝璐,2020);在林业方面,卫星遥感已被成功应用于林业病虫害监测(张凝等,2021)、林业资源监视与保护(Cheng等,2015;童旭东,2016)、森林生物量估算等应用(申鑫等,2016);在渔业方面,通过卫星遥感完成渔业监测、境外渔业监测、渔业水体水质富营养化监测工作等。实现从原始影像数据获取、处理、信息提取、变化监测专题制图,到报告、分析一站式全流程处理,进而掌握农林水产业变化情况(刘涵和宫鹏,2021)。
随着卫星遥感与人工智能技术的飞速发展,智能卫星遥感技术也被广泛应用于金融风险评估、军事侦察等领域。例如,在农业保险领域,遥感图像地块分割技术在辅助查勘定损方面取得了积极的成果(陈爱莲等,2020);在金融决策方面,通过遥感数据分析不同作物的种植规模、生长趋势等情况,预测农作物产量,可以辅助金融机构在期货交易、信贷投放等决策上掌握信息主导权(冯文丽等,2021);在军事侦察领域,卫星遥感是不可替代的信息获取手段,在战场环境全面感知、军事目标发现与定位、重大军事事件动态监测方面发挥了极其重要的作用(罗荣等,2020)。
实现基于新一代人工智能技术的卫星遥感是未来遥感领域的前沿挑战难题。基于前述两章关于人工智能技术及其在遥感上的应用的介绍,本章总结了基于新一代人工智能的卫星遥感未来亟待发展的几项前沿核心技术。
卫星遥感数据的种类和数据量飞速增长,卫星遥感和对地观测的广度和深度快速发展,然而卫星发射和遥感数据的采集只是遥感对地观测的第一步,如何高效地解译、分析和利用现有的和正在采集和获取的海量多源异构遥感大数据,将遥感大数据转化成知识是智能卫星遥感领域的前沿挑战和技术瓶颈(李德仁等,2014a,2019b;朱建章等,2016)。因此,亟待在机器学习前沿理论方法的基础上,突破新一代遥感大数据知识快速挖掘技术,深入挖掘遥感大数据深层特征,探索和发现数据间的内在联系、隐含信息、模式及知识,发展结构化、半结构化、非结构化要素间依赖知识的智能挖掘技术,发现不同要素间的时空格局变化、相互作用规律和耦合关系。在人工智能技术支持下实现卫星遥感的综合感知和智能分析,推动卫星遥感应用进入精准化、智能化时代(王桥,2021;Sagan等,2020)。
遥感数据挖掘的主要技术手段既包括概率论、聚类分析、模糊集、遗传算法、决策树等传统机器学习方法,也包括新一代统计学习基础理论、不确定性推理与决策、分布式学习与交互、隐私保护学习、小样本学习、深度强化学习、无监督学习、半监督学习、主动学习、自适应学习、自主学习、类脑学习等理论方法。为了实现知识的快速挖掘,需根据特定的需求综合选择相应的数据挖掘理论方法和工具,并通过不同人工智能技术的融合,提高数据挖掘的自动化程度和效率(李德仁等,2014b)。
遥感卫星的发展呈现出从单星观测到多星组网观测的新趋势,如何通过多源遥感卫星协同感知,高效融合不同卫星获取的遥感数据,实现更全面、更准确、更高效的遥感对地观测是智能卫星遥感领域的前沿发展方向(张拯宁和安玉拴,2019;李军予等,2020)。
多源遥感卫星协同感知的核心内容包括多源卫星观测网的整体方案设计与多源卫星数据高效融合的理论方法。一方面,需要设计针对多源卫星组网协同感知的精准资源调度协作方案,满足不同类型、复杂度的协同观测任务;另一方面,需研究多源卫星数据相关性度量与信息融合理论方法,实现不同卫星数据的相互关联,并通过探索知识与数据双驱动的多源数据智能融合方法,综合利用不同遥感卫星获取的互补信息。为实现上述目标,亟待在群体智能结构理论与组织方法、群体智能激励机制与涌现机理、群体智能学习理论与方法、群体智能通用计算范式与模型等群体智能技术上取得突破。
可见光、多光谱、红外、高光谱、微波等多源异构遥感数据能够提供地物多层次、多角度、多维度和更为详尽的属性信息,为卫星遥感数据的精确识别与解译带来前所未有的机遇。但多源异构遥感数据结构复杂、特性各异、不确定性高,因此亟待突破跨模态多源遥感数据融合识别技术,进一步提升遥感图像识别与解译的精度(黄波和赵涌泉,2017;Liao 等,2018;Gu 等,2019;肖亮 等,2020)。
跨模态多源遥感数据融合技术的突破需要以地物目标的物理特性为基础,研究多源异构数据的统一表达模型;发现多源异构数据的内在关联规律,建立像素级、特征级、决策级的多源数据关联识别、理解与知识挖掘框架,实现可见光、多光谱、红外、高光谱、微波等不同类型遥感数据的联合表示与融合,从而提升遥感图像识别和解译性能;其最终目标是将跨模态多源数据融合技术与知识图谱构建与学习、知识演化与推理、智能描述与生成等技术相结合,开发跨模态多源遥感数据识别、理解、推理与预测系统。
受中国境外地面站建设数量和星地链路数传速率的限制,传统的“卫星数据下传+地面处理”的工作方式时效性低,难以满足军事目标侦察、重点区域态势变化、自然灾害快速监测等任务对高时效信息获取的需求。为实现中国对全球重点区域“关键信息即时可知”,迫切需要发展卫星遥感数据在轨智能处理技术(李德仁等,2021)。
遥感数据在轨智能处理的前沿研究方向包括在轨处理硬件系统与软件两方面。在硬件方面,亟待研制集成CPU、FPGA、GPU 等异构计算单元于一体的高性能星载处理平台,并重点突破高能效、可重构的类脑计算芯片技术;在软件方面,发展网络蒸馏、稀疏共享的高能效、轻量化在轨处理算法,研发具有自主学习能力的高效能类脑神经网络架构是未来的发展方向。
近年来,卫星遥感的商业化和产业化应用飞速发展,人类与人工智能协同共进,即将进入一个大集成,大变革的时代(Li 等,2019)。通过人机协同不仅可以更加高效的解决实际遥感应用问题,同时卫星遥感也为虚拟现实、数字孪生、遥感穿戴设备等新技术、新产品、新应用的研发提供了新思路(邹同元等,2019)。张继贤等(2021)提出“智能计算后台+智能引擎+人机交互前台”的人机协同智能提取方法技术框架,采用云架构、分布式存储计算等技术,构建人机协同智能提取云平台,集成人类知识与机器智能,利用人类视觉感知及认知决策技术进行判断验证,提升遥感信息提取自动化和智能化水平;高文等(2018)提出“数字视网膜”理念,借鉴人类视网膜具有影像编码和特征编码功能,构筑基于云计算的“城市大脑”和城市“慧眼”视觉感知网络,实现城市大数据智能分析与探索。未来,在人机协同共融的遥感信息理解与决策学习、直觉推理与因果模型、记忆与知识演化等理论发展的基础上,如何将人与智能遥感系统紧密耦合,相互协同工作,并最终实现学习与思考接近或超过人类遥感专家智能水平的混合增强智能,是人机混合增强遥感智能的前沿挑战。
新一代人工智能技术在遥感大数据处理与分析方面具有传统方法不可比拟的优势,也是未来卫星遥感应用的关键支撑技术。本文概述了国内外卫星遥感技术的发展现状,归纳总结了基于人工智能技术的卫星遥感在资源调查、环境监测、灾害监测、智慧城市、农林水产业自动化分析、金融风险评估和军事侦察等领域的应用情况,并展望了未来智能卫星遥感领域的发展方向和前沿技术,例如遥感大数据知识快速挖掘技术、多源遥感卫星协同感知技术、跨模态多源遥感数据融合技术、遥感数据在轨智能处理技术和人机混合增强智能遥感技术等技术。研究发现,一方面,随着人工智能技术的发展,卫星遥感领域一些传统的难题有了新的解决方案。另一方面,智能卫星遥感领域仍然面临诸多亟需解决的前沿挑战难题,这类问题的解决不仅仅需要在人工智能技术上有所突破,更重要的是依赖计算机、遥感、测绘等多个学科研究的深入交叉和融合。