基于流式计算的遥感卫星数据快视处理方法

基于流式计算的遥感卫星数据快视处理方法

论文摘要

随着高分辨率遥感卫星数据获取能力和地面数传接收能力的提高,现有遥感卫星快视处理系统的处理负载增大,实时性要求越来越难以满足。针对这些问题,采用流式计算思想提出了一种新的遥感卫星数据快视处理系统设计方法。在分析遥感卫星数据快视处理数据流特点的基础上,应用Storm框架对现有系统进行并行优化,设计遥感数据流处理任务拓扑结构,同时利用消息队列中间件Kafka改进处理单元间数据交换和数据缓存方式。实验表明,该系统在数据吞吐率和可靠性方面测试效果良好。

论文目录

  • 1 引言
  • 2 流式计算技术
  • 3 遥感卫星数据快视处理的数据流分析
  •   3.1 遥感卫星数据快视处理数据流
  •   3.2 数据流定义
  • 4 基于流式计算的处理方法
  •   4.1 数据流处理拓扑结构
  •   4.2 数据交换优化
  •   4.3 数据流备份机制
  • 5 性能分析
  •   5.1 实验方法
  •   5.2 数据吞吐率
  •   5.3 数据可靠性
  • 6 结束语
  • 文章来源

    类型: 期刊论文

    作者: 宋峣,孙小涓,胡玉新,雷斌,卢晓军

    关键词: 流式计算,数据流,快视处理,遥感数据处理

    来源: 计算机工程与应用 2019年10期

    年度: 2019

    分类: 信息科技,工程科技Ⅱ辑

    专业: 工业通用技术及设备,自动化技术

    单位: 中国科学院大学,中国科学院电子学研究所,中国科学院空间信息与应用系统重点实验室,中国国际工程咨询公司

    分类号: TP751

    页码: 77-82

    总页数: 6

    文件大小: 1587K

    下载量: 155

    相关论文文献

    • [1].HXMT卫星快视成像[J]. 空间科学学报 2008(03)
    • [2].迁移学习下高分快视数据道路快速提取[J]. 中国图象图形学报 2020(07)
    • [3].FPIR实时快视成像方法[J]. 遥感技术与应用 2016(03)
    • [4].星载合成孔径雷达实时快视成像系统[J]. 北京理工大学学报 2008(06)
    • [5].多路高速遥感数据记录快视与格式化系统设计与实现[J]. 无线电工程 2018(07)
    • [6].基于通用文件格式的遥感影像快视传输系统[J]. 测绘与空间地理信息 2018(04)
    • [7].GEO SAR快视成像系统设计与实现[J]. 空间电子技术 2019(01)
    • [8].基于CUDA的航天遥感图像实时快视系统的研究[J]. 计算机技术与发展 2014(06)
    • [9].卫星数据首轨接收自动化运行与首轨遥感图像实时远程快视[J]. 卫星应用 2015(01)
    • [10].DirectDraw技术在快视显示系统中的应用[J]. 无线电工程 2010(08)
    • [11].基于B/S结构的远程台站设备状态及快视数据监视系统技术研究[J]. 遥感信息 2008(02)
    • [12].基于直方图共享的快视图色差调整算法[J]. 现代计算机(专业版) 2018(20)
    • [13].异步多通道CCD图像实时快视技术研究[J]. 微计算机信息 2009(10)
    • [14].基于CUDA和OpenGL互操作的遥感影像快视研究[J]. 中国电子科学研究院学报 2020(01)
    • [15].卫星混编数据地面接收快视系统的设计与实现[J]. 航天器工程 2008(06)
    • [16].遥感相机快视高速可靠传输系统的设计与实现[J]. 光学精密工程 2018(04)
    • [17].基于迭代寻址的试飞FC数据快视分析技术[J]. 计算机测量与控制 2015(10)
    • [18].基于PC的吉比特级数据采集快视系统[J]. 计算机工程 2009(23)
    • [19].紫外臭氧廓线探测仪快视系统的设计与实现[J]. 计算机测量与控制 2015(06)
    • [20].基于高性能机群的环境一号C卫星SAR图像全分辨率快视实时处理系统设计与实现[J]. 雷达学报 2014(03)
    • [21].气象卫星载荷原始数据包快视软件系统开发[J]. 北京理工大学学报 2017(12)
    • [22].通用遥感卫星快视处理系统技术研究[J]. 遥感信息 2009(05)
    • [23].海量数据图像快视系统的软件开发设计[J]. 电脑知识与技术 2010(19)

    标签:;  ;  ;  ;  

    基于流式计算的遥感卫星数据快视处理方法
    下载Doc文档

    猜你喜欢