导读:本文包含了气象数据仓库论文开题报告文献综述及选题提纲参考文献,主要关键词:政务云,气象服务数据仓库,数据仓库,ETL
气象数据仓库论文文献综述
许皓皓,姚日升[1](2018)在《基于ETL的政务云气象服务数据仓库构建》一文中研究指出随着电子政务这种信息化环境下的新型政务模式的不断深入发展,采用云计算模式建设的各级地方政府政务云应运而生,气象部门应用系统在向政务云迁移部署过程中,存在基础气象数据缺乏,政务云网络安全策略限制导致应用系统开发模式单一等诸多问题,制约了气象服务类应用系统的开发方式,以及进一步在政务云部署应用的效果,也无法满足公众对气象服务的需求,因此在政务云上构建一套稳定可靠的气象服务数据仓库非常有必要性。针对气象网站等应用系统向地方政务云迁移过程中缺乏基础数据的现状,通过对政务云气象服务数据仓库建设需求进行分析,在政务云搭建企业级SQL Server数据库集群,作为气象服务数据仓库载体,支持数据库双活和横向扩展,也可以通过虚拟服务器配置提升实现纵向扩展,满足数据仓库高可用和高性能需求,也为未来数据仓库的扩容和性能提升提供了保障。数据仓库构建前期,对元数据环境进行详细分析,着力分析元数据源类型、数据表类型和数量、数据更新特性、数据表结构设计和数据更新比对项等内容,根据分析结论为下一步对数据ETL流程建模和作业调度策略设置提供依据。基于Kettle软件对气象数据ETL流程进行建模,实现气象数据的整合和同步,解决了异构气象数据集成、增量数据抽取、数据清洗和转换、数据载入这些数据仓库构建各环节涉及的关键问题。使用Quartz开发作业调度系统实现ETL流程的自动化运行,基于Quartz开源作业调度框架开发了数据仓库作业调度系统,实现了各类气象数据ETL流程模型的自动化,打通了数据仓库建设的最后一个环节,数据仓库作业调度系统基于轻量级的开源Java开发框架Spring MVC开发,系统提供灵活的作业调度规则,可实现类Unix系统下Cron作业调度器的功能,支持图形界面配置,同时提供作业调度状态监控和故障分析等功能。通过以上步骤构建了政务云气象服务数据仓库。该数据仓库实现了预报、预警、探测等60余种气象资料在政务云的落地,既服务于部署在政务云的气象服务应用系统,也为气象部门参与政务数据交换提供条件,具有很高的实用价值。气象服务数据仓库的建设是一个持续性的工作,根据中国气象局气象信息化行动方案,未来可以在气象服务数据仓库部署标准化气象数据服务接口,改变以数据库为中心的传统开发模式,为各类气象服务应用系统提供标准化的对接方式。也可以充分利用政务云已建成的Hadoop大数据分析与处理平台,开展气象大数据分析工作,研究气象大数据和其他行业大数据的关联性,应用于防灾减灾和社会治理等领域,让气象数据发挥更大的现实价值。(本文来源于《第35届中国气象学会年会 S14 大数据、互联网、融媒体时代气象服务的创新与变革——第八届气象服务发展论坛》期刊2018-10-24)
许皓皓,廉亮,姚浩立[2](2018)在《基于ETL的政务云气象数据仓库构建》一文中研究指出针对气象网站等应用系统向地方政务云迁移过程中缺乏基础数据的现状,从功能性,开发成本,灵活性方面考虑选用ETL工具,基于Kettle软件对气象数据ETL流程进行建模,使用Quartz开发作业调度系统实现ETL流程的自动化运行,在政务云搭建SQL Server数据库集群,构建了政务云气象数据仓库.该数据仓库实现了异构环境气象数据在政务云的实时同步和存储,为气象应用系统在政务云的全面部署提供了数据支持,也为气象部门参与电子政务数据交换和共享打下基础.(本文来源于《计算机系统应用》期刊2018年09期)
周乐安,吴锋[3](2016)在《面向气象数值预报质量检验的数据仓库模型研究》一文中研究指出数值预报质量检验结果是气象台预报员进行天气预报的重要数据依赖。通过质量检验结果的各个指标,既可以帮助预报员从各个模式指导预报中甄别有效数据,又可以对该模式指导预报进行再度人工修正从而完成天气预报。因此有必要帮助气象部门灵活高效的完成数值预报的质量检验工作。本文根据现有数据的结构特点结合质量检验方法,提出了一种更有利于质量检验指标计算的数据仓库结构以及基于该结构的数据计算效率优化方法。(本文来源于《信息与电脑(理论版)》期刊2016年02期)
刘竹涛,黄南[4](2015)在《数据仓库在航空气象上应用探讨》一文中研究指出该文对数据仓库的含义和特点做出了阐述,针对机场气象台的实际情况和航空预报的特点对民航气象数据仓库的设计提出了方案。(本文来源于《电脑与电信》期刊2015年04期)
张建华,张爱英,房荣年,贾怀禄,尤焕苓[5](2012)在《气象数据资料存储现状及数据仓库建设的必要性》一文中研究指出随着人类社会的发展,气象服务的影响已从农业、建筑这两个传统领域几乎扩展到所有行业,在各个领域中都有涉及,为更好的提高气象服务的水平,对于县级气象局来说建设气象数据仓库势在必行。本文主要介绍了现实工作中气象资料数据的存储情况,从现代气象服务工作的需要和部门联动合作的需要分析说明了建设县级气象信息数据仓库的必要性。(本文来源于《科技资讯》期刊2012年26期)
薛胜军,刘寅[6](2012)在《基于Hadoop的气象信息数据仓库建立与测试》一文中研究指出气象相关的数据随着气象事业现代化水平的不断提高而与日俱增,使得气象部门对于气象数据存储、管理和读取的要求越来越高;通过分析开源云平台Hadoop的分布式文件系统HDFS、数据仓库工具Hive等架构,研究了Hadoop气象云平台的构建过程,最终实现了气象信息数据仓库的建立与测试;该气象信息数据仓库实现了海量气象数据文件的分布式存储、元数据管理以及气象数据的查询;应用表明,使用气象数据仓库进行大型气象数据文件存储和操作时,可以大大提升数据吞吐率和数据读写操作效率。(本文来源于《计算机测量与控制》期刊2012年04期)
周展程,孙志强[7](2011)在《建设地市级气象信息数据仓库的必要性和可行性》一文中研究指出本文通过简单概述数据仓库的概念、与数据库的区别,从现代气象服务工作的需要和部门联动合作的需要分析说明了建设地市级气象信息数据仓库的必要性,从数据源、建设数据仓库的软硬件以及人才方面说明现在着手建设地市级气象信息数据仓库的可行性。(本文来源于《价值工程》期刊2011年08期)
赵在宽[8](2009)在《基于数据仓库的气象干旱指标挖掘研究与实现》一文中研究指出河南作为一个农业大省,干旱对经济,特别是农业生产的影响很大。干旱程度是对农作物生长形势研判的一个重要指标。在河南农业气象研究中,主要利用土壤相对湿度干旱指标来判定干旱程度。它是在测量土壤湿度后,计算相对湿度所得。目前,河南省气象部门测量土壤湿度是采用人工取土烘干称重的方法,工作量大,频次少,不利于对农作物生长形势的判定及农气研究。多年来,河南省气象部门积累了大量的气象观测数据。如何综合利用这些信息,进行土壤相对湿度判定,为河南农业发展服务,是气象服务工作中的一个急需解决的问题。本文对此进行了比较详细的研究与实践,主要研究内容和创新点如下:1.分析了国内外数据仓库、数据挖掘技术现状和河南气象档案业务发展情况,根据河南实际情况和本文干旱指标挖掘研究需要,设计并初步建设了河南气象数据仓库。2.研究土壤相对湿度干旱指标的估测方法,首次利用BP神经网络和RBF神经网络分别对该指标进行了挖掘,形成了土壤相对湿度干旱指标挖掘模型,并利用模型对河南干旱情况进行了评估。(本文来源于《解放军信息工程大学》期刊2009-10-15)
李建东[9](2009)在《数据仓库技术在气象领域的应用前景分析》一文中研究指出我国拥有相当数量的气象科学数据,但尚未得到有效利用。本文通过分析数据仓库技术和气象业务的特点、流程发现,如果将数据仓库技术应用到气象领域,就可以从一个全新的角度将气象资料进行分析处理,按气象预报的需要进行数据重组和数据存储,再进行联机分析、数据挖掘等技术处理,寻找各物理量和气象要素与某种天气现象之间的关系,以减少重复研究,提高效率,为气象服务保障事业提供更强有力的决策支持。(本文来源于《气象与环境科学》期刊2009年S1期)
赵长春[10](2007)在《浅析数据仓库在天气预报和决策气象服务中的应用》一文中研究指出随着通信技术和计算机技术的发展,每天在气象通信网上传输越来越庞大的气象数据资料。如何建立新一代的天气预报平台和气象信息服务平台,最充分的利用的这些资源,实现对预报过程、信息服务最强大的数据支持,提供最接近用户需求的分析工具和数据视角,纳入最新的预报技术和决策方法模型,以及科验评估系统是一项很复杂的工程。从数据仓库角度出发,并根据天气预报和决策气象服务的实际工作特点,探讨了数据仓库在新一代天气预报和决策气象服务平台的应用。(本文来源于《民营科技》期刊2007年07期)
气象数据仓库论文开题报告
(1)论文研究背景及目的
此处内容要求:
首先简单简介论文所研究问题的基本概念和背景,再而简单明了地指出论文所要研究解决的具体问题,并提出你的论文准备的观点或解决方法。
写法范例:
针对气象网站等应用系统向地方政务云迁移过程中缺乏基础数据的现状,从功能性,开发成本,灵活性方面考虑选用ETL工具,基于Kettle软件对气象数据ETL流程进行建模,使用Quartz开发作业调度系统实现ETL流程的自动化运行,在政务云搭建SQL Server数据库集群,构建了政务云气象数据仓库.该数据仓库实现了异构环境气象数据在政务云的实时同步和存储,为气象应用系统在政务云的全面部署提供了数据支持,也为气象部门参与电子政务数据交换和共享打下基础.
(2)本文研究方法
调查法:该方法是有目的、有系统的搜集有关研究对象的具体信息。
观察法:用自己的感官和辅助工具直接观察研究对象从而得到有关信息。
实验法:通过主支变革、控制研究对象来发现与确认事物间的因果关系。
文献研究法:通过调查文献来获得资料,从而全面的、正确的了解掌握研究方法。
实证研究法:依据现有的科学理论和实践的需要提出设计。
定性分析法:对研究对象进行“质”的方面的研究,这个方法需要计算的数据较少。
定量分析法:通过具体的数字,使人们对研究对象的认识进一步精确化。
跨学科研究法:运用多学科的理论、方法和成果从整体上对某一课题进行研究。
功能分析法:这是社会科学用来分析社会现象的一种方法,从某一功能出发研究多个方面的影响。
模拟法:通过创设一个与原型相似的模型来间接研究原型某种特性的一种形容方法。
气象数据仓库论文参考文献
[1].许皓皓,姚日升.基于ETL的政务云气象服务数据仓库构建[C].第35届中国气象学会年会S14大数据、互联网、融媒体时代气象服务的创新与变革——第八届气象服务发展论坛.2018
[2].许皓皓,廉亮,姚浩立.基于ETL的政务云气象数据仓库构建[J].计算机系统应用.2018
[3].周乐安,吴锋.面向气象数值预报质量检验的数据仓库模型研究[J].信息与电脑(理论版).2016
[4].刘竹涛,黄南.数据仓库在航空气象上应用探讨[J].电脑与电信.2015
[5].张建华,张爱英,房荣年,贾怀禄,尤焕苓.气象数据资料存储现状及数据仓库建设的必要性[J].科技资讯.2012
[6].薛胜军,刘寅.基于Hadoop的气象信息数据仓库建立与测试[J].计算机测量与控制.2012
[7].周展程,孙志强.建设地市级气象信息数据仓库的必要性和可行性[J].价值工程.2011
[8].赵在宽.基于数据仓库的气象干旱指标挖掘研究与实现[D].解放军信息工程大学.2009
[9].李建东.数据仓库技术在气象领域的应用前景分析[J].气象与环境科学.2009
[10].赵长春.浅析数据仓库在天气预报和决策气象服务中的应用[J].民营科技.2007