创新与应用案例

地球大数据挖掘分析系统实现SDGs指标在线计算

日期:2021-10-19

|  来源:【字号:

202196日,全球首个以大数据服务联合国2030年可持续发展议程的国际科研机构——可持续发展大数据国际研究中心正式成立,由其开发的“可持续发展大数据平台系统”也正式发布。作为该平台系统的重要组成部分,中国科学院软件研究所科研团队依托该平台系统的栅格数据引擎Databox、广目云平台CASEarthCloud,自主研发了一套地球大数据挖掘分析云服务系统(EarthDataMiner),支持科学家在线开展遥感影像及其他科学数据的智能分析处理,支持可持续发展目标(SDGs)指标全流程在线计算,从而降低科学家利用云平台、大数据、前沿人工智能算法开展大规模数据分析的难度。EarthDataMiner支持科学家访问海量数据,提供算法API,支持在线编写代码开发SDG算法,并将算法成果发布为Web App工具,支持全球用户访问使用。

虽然针对大数据挖掘分析已经有一系列通用软件,包括MatlabPython等单机版软件,还有分布式环境软件和云服务模式的分析软件,但对领域科学家而言,这些软件存在巨大的应用开发鸿沟。EarthDataMiner最重要的任务就是给科学家们提供一个分布式遥感影像计算函数库,平台预计研制百余项SDGs在线计算的函数及配套文档和案例,涵盖遥感影像计算与机器学习算法。科学家只需调用简单的函数,平台负责把它“翻译”成高效的分布式任务去执行。基于EarthDataMiner实现的SDGs指标在线计算通用流程具体包括:将指标计算相关数据上传到系统;编写Python代码进行数据处理;遥感影像数据检索;遥感数据信息提取;部署指标计算算法与模型;采用EarthDataMiner提供的Web App工具的开放框架,将SDGs评估算法发布为Web页面工具。

目前,在中国科学院战略性先导科技专项“地球大数据科学工程”的统一部署下,EarthDataMiner研发团队已和相关科学家团队合作,基于EarthDataMiner开发了4SDGs指标在线评估工具,即SDG6.6.1 地表水随时间变化评估工具、SDG11.3.1 城镇化进程评估工具、SDG15.1.1 森林覆盖率评估工具、SDG15.3.1 土地退化零增长评估工具。

信息来源:

http://paper.sciencenet.cn/sbhtmlnews/2021/9/365464.shtm?id=365464

附件: