动态数据集成论文-王雯,晏利扬

动态数据集成论文-王雯,晏利扬

导读:本文包含了动态数据集成论文开题报告文献综述及选题提纲参考文献,主要关键词:污染源,环境管理,生态环境,环境问题,平台,自动监测站,治污设施,环境监察,空气自动监测,区域环境

动态数据集成论文文献综述

王雯,晏利扬[1](2019)在《智慧大平台 监管全覆盖》一文中研究指出“以前排查违法案件,全靠我们奔波取样,跑断了腿也查不了几家。现在不同了,通过智慧环保在线监控,每天都能收到源源不断的数据,有效提高了环境执法的精准性。”浙江省丽水市遂昌县相关执法人员这样形容遂昌智慧环保平台带来的变化。丽水市生态环境局遂昌分局创新(本文来源于《中国环境报》期刊2019-12-12)

张燕,杜红乐[2](2019)在《面向不均衡数据的动态抽样集成学习算法》一文中研究指出针对网络行为数据不均衡的问题,从数据均衡化和集成学习两个角度出发,提出一种基于动态抽样概率的集成学习算法。依据抽样概分布对多数类样本进行重采样,相比随机抽样,能更准确地加大对错分样本的学习。在更新样本抽样概率时,依据本轮迭代之前所得分类器的集成测试分类效果,而不是只依据本轮迭代所得分类器的分类效果。用7组UCI数据集和KDDCUP数据集来评估算法在不均衡数据集下的分类性能,实验结果显示,算法在不均衡数据集上的分类性能都有相应的提高。(本文来源于《计算机应用与软件》期刊2019年06期)

江海燕,郑嘉奇,马源[3](2018)在《基于数据共享平台的动态视觉景观分析信息技术集成及其初步应用——以广珠轻轨为例》一文中研究指出在建设美丽中国、实现新型城镇化和生态文明转型的背景下,针对城镇密集地区动态视觉景观规划需要,从数据获取、分析评价、规划设计3个主要环节,借助互联网开放多源数据渠道及ESRI软件平台,形成一套初步可行的、适用于城镇密集地区交通沿线视觉景观分析评价及规划设计的技术方法。具体包括:1)面对动态视觉景观涉及数据复杂、类型多样、跨区域、跨部门等特点,打破传统依靠现场调研与政府供给获取现状数据的思路,借助互联网数据源以及火车采集器等软件,获取地形地貌、植被水文、土地利用、建筑、道路、人的活动和感受等开放数据;2)利用GIS、RHINO、CITYENGINE等软件解决数据获取、解译、整合技术;3)以ESRI共享平台为基础,探索集成数据的量化分析、Python参数化设计、叁维可视化模拟技术,用于动态视觉景观分析评价、规划设计与管理,推进规划技术在数据开放共享时代的转型和创新。(本文来源于《中国园林》期刊2018年11期)

吴岳臻[4](2018)在《基于金税叁期数据集成的税务动态监控系统的设计与实现》一文中研究指出随着金税叁期项目全国推广完成,税收业务实现了全国国地统一,应国家税务总局第二阶段的建设要求,为总局各司局、各省局创新应用提供数据支撑以及给各司局领导提供分析决策,避免“信息孤岛”,大数据项目也就顺势而生。建设统一业务标准、数据标准、技术标准的国地税IT应用系统体系,对全国各省的核心征管、个税管理的业务数据进行集中、汇集,形成一个全国范围的数据资源平台是大数据项目的核心,同时为了能够体现金税叁期系统上线后同数据标准的数据全国大集中的巨大价值,以及满足总局领导、各司局领导日常对核心业务动态、KPI指标的监控需要,因此设计与开发总局税务动态监控系统。本文研究的内容有两部分,数据集成及在此基础上的税务动态监控系统。研究的过程包括系统需求分析、系统设计与详细设计、系统实现与实施。数据集成方面分析了待集成数据的来源、类型、数据量及流向从而提出数据集成待解决的几个问题及功能,在数据集成的基础上提出了税收动态监控系统的业务需求。本文使用了阿里云的数据集成产品,包括:离线的开源数据同步工具DataX、以及相对应的其他采集组件:罗网、ODPS-CDP、OGG-ODPS,分别用来采集互联网数据、批量数据以及增量数据。重点设计解决了数据集成过程中如何进行格式转换、如何识别删除数据、如何控制数据版本等问题,给出了数据集成的实施过程;提出了在数据集成后的数据资源基础上,采用面向对象的分析与设计方法、Java语言设计实现税务动态监控系统的开发过程。税务数据的集成大大提升了国税总局的大数据分析能力和水平,基于集成数据的税务动态监控系统以图表、列表结合的方式,以数据说话,为局方各领导的日常监控和管理需要,通过电脑桌面将各个主题(收入、征管、管户、稽查等)重要的业务对象进行全面的展示,为税务行业的改革提供全方面的数据支撑。(本文来源于《山东大学》期刊2018-10-20)

姜春娇[5](2016)在《GIS动态数据集成技术及其在移动网络运维管理中的应用研究》一文中研究指出本文对GIS动态数据集成技术进行研究,分析该种技术在移动网络运维管理中的实际应用。(本文来源于《电子测试》期刊2016年20期)

伍晗[6](2016)在《基于数据集成管理的天津市桥梁动态管理系统研究》一文中研究指出随着城市建设的快速发展,桥梁设施在交通运输方面的作用日益凸显,桥梁设施数量也在飞速增长,桥梁全周期养护的理念也越来越被广泛关注,对于设施量大、数据信息复杂、结构安全性能要求高的桥梁设施,利用现代化手段加强养护管理工作,势在必行。本文首先对国内近些年发生的桥梁安全事故进行了调查,发现我国在桥梁管理方面存在的一定缺陷,需要对桥梁进行全周期管理,尤其是在电子信息技术高度发达的今天,利用桥梁管理系统对桥梁进行全面管理是解决这一问题的有效手段。随后,本文对目前国内外先进的桥梁管理系统及发展情况进行了研究,发现国外的桥梁管理系统难以引入我国应用,我国开发的多为静态管理系统,需要建立动态管理系统进行功能上的补充。在建立桥梁动态管理系统时,本文引入了当前常用的数据集成管理的概念及使用方法,研究了数据集成管理与桥梁管理系统相结合的应用步骤。针对天津市桥梁管理现状进行了动态管理系统的总体设计,将现行的部分系统加以利用,并新建了部分功能子系统,在此基础上对整个系统的工作原理与模式进行了研究。系统建立完成后,选取了天津市部分桥梁进行了实地安装试验,验证了该系统的可操作性、工作流程的合理性,工作效率较以往有所提高,管理成本有所下降。最后,本文通过对综合评价方法的比选,选择了层次分析法及模糊评价法对系统绩效进行综合评价,建立了综合评价指标体系,采用问卷调查的方式对用户满意水平进行了调查,经过计算得到的绩效综合评价结果为较好,说明了整体的动态管理系统运行正常,从技术、管理和服务叁个方面证实了其潜在的发展能力,用户评价较高,但是仍然存在不足之处,还有待完善。(本文来源于《天津大学》期刊2016-05-01)

李虹锋[7](2016)在《高可靠性动态群集数据集成系统的研究与实现》一文中研究指出随着企业中信息技术的应用日益广泛,信息系统在企业发展过程中不断被建立和完善。就大型企业和政府部门的信息化进程来说,其信息系统的建设通常具有两个特点:分布性和阶段性,因而导致了“信息孤岛(Information Silo)”现象的发生。数据集成技术(也被称为ETL技术)作为一种解决“信息孤岛”问题的方案,负责将不同特点、来源及格式的数据在物理上或逻辑上有机地进行集中,从而为企业提供全面的数据共享。经过多年的发展,数据集成技术在数据仓库领域已经有了比较广泛的应用。近年来,随着大数据、云计算技术的兴起,企业对数据的依赖进一步加深,获取信息的来源较之以往更加多样化,如移动设备,因特网等,与此同时,对海量异构数据进行集成的问题也受到了人们越来越多的关注。现有数据集成架构基本能够满足功能和易用性上的需求,但是在大数据环境下,其效率、可靠性、可扩展性都没有得到很好的解决,因此本文着眼于ETL工作流的并发执行和基于事务的ETL数据处理,对现有数据集成架构进行改造,提出了高可靠性群集数据集成系统架构。本课题首先研究了开源流处理平台Storm的整体框架,然后分析了使用Storm进行ETL数据流处理所具备的优势以及还需要解决的问题,并在此基础上提出了一套基于群集计算的高可靠数据集成系统架构。为了并发执行ETL工作流,我们结合它的特点提出了ETL数据分组方法和ETL工作流并行化方法,并解决了ETL工作流并发执行时所需的数据缓存关键技术。针对ETL数据处理的可靠性问题,我们结合Storm平台所提供的消息可靠性保障机制,提出了基于事务的ETL数据处理方法,设计了ETL事务的并发控制协议:process-commit,并解决了ETL数据的事务处理的关键技术,包括事务的协调、事务触发以及事务状态管理。我们研究了工作流映射的关键技术,将抽象的ETL工作流映射成为能够在数据处理引擎上执行的任务。最后,本文通过一系列实验证明了高可靠群集数据集成方案的正确性。(本文来源于《电子科技大学》期刊2016-03-28)

胡小生,温菊屏,钟勇[8](2016)在《动态平衡采样的不平衡数据集成分类方法》一文中研究指出传统分类算法假定平衡的类分布或相同的误分类代价,处理不平衡数据集时,少数类识别精度过低。提出一种动态平衡数据采样与Boosting技术相结合的不平衡数据集成分类算法。在每次迭代初始,综合使用随机欠采样和SMOTE过采样获得平衡规模的训练数据,各类别样本数据比例保持随机性以体现训练数据的差异性,为子分类器提供更好的训练平台;子分类器形成后,利用加权投票得到最终强分类器。实验结果表明,该方法具有处理类别不平衡数据分类问题的优势。(本文来源于《智能系统学报》期刊2016年02期)

丁同勤[9](2016)在《可动态扩展的医疗数据集成可视化系统设计与开发》一文中研究指出医疗数据集成可视化系统是对医疗数据进行集成浏览的信息系统,目的是在一个屏幕下通过一定的导航或索引方式对临床医疗数据进行集成浏览。随着医学技术的快速发展,临床上医疗数据的种类快速增多;另外,由于临床业务日益复杂,不同的临床场景对数据的集成浏览需求不同。这些都要求医疗数据集成可视化系统能动态扩展,以满足医疗数据种类不断增多以及数据集成浏览方式随临床场景变化的需求。国内外在医疗数据可视化系统动态扩展方法研究方面已经有了一定的研究成果,但是在实际应用中仍存在如下两个问题:系统与底层数据的耦合程度太高,系统扩展的同时往往伴随着大量数据库接口的开发;系统各扩展模块之间缺少灵活的通信支持,交互能力不足。针对以上问题,本论文对可动态扩展的医疗数据集成可视化系统展开研究,主要内容如下:(1)针对系统与底层数据库高耦合的问题,本论文基于openEHR两层模型方法实现了一种数据绑定机制,通过openEHR原型查询语言AQL实现数据获取,避免了频繁的底层数据库接口的开发。(2)针对扩展模块之间交互能力不足的问题,本论文设计了一种插件式动态扩展框架,并通过提供各模块间灵活通信接口的方法实现各扩展模块之间的交互。(3)基于上述研究,本论文设计并开发了一套医疗数据可视化系统,同时开展了临床应用开发实践。实践结果表明,系统能很好的实现动态扩展要求,各扩展模块之间也可以实现灵活的交互。该系统已在国内某叁甲医院所有门诊上线应用,很好地满足了门诊医生不同临床场景下的需求。(本文来源于《浙江大学》期刊2016-01-05)

束长波,施化吉[10](2015)在《基于动态数据源的Deep Web信息集成框架研究》一文中研究指出在深网的演化过程中,Deep Web数据源的内容、模式在不断变化,影响到Deep Web集成系统的查询能力。为此,本文分析了在深网演进环境下已有集成系统中存在的问题,并设计出了一个基于动态数据源的Deep Web信息集成系统。首先通过本地接口版本演化的方式,来同步本地接口与网络接口的信息,保证本地成员接口的有效性。然后根据本地动态接口数据源的特点,采用属性相似度聚类方法实现全局接口模式集成,并形成全局接口和本地接口之间的临时映射关系,并用相似度值来标记映射关系权重。最后,采用基于动态权重映射,实现全局查询到本地查询的转换。实验结果表明,该系统使得Deep Web查询能力在查准率和查全率方面都有较好的表现,是可行的和有效的。(本文来源于《无线通信技术》期刊2015年01期)

动态数据集成论文开题报告

(1)论文研究背景及目的

此处内容要求:

首先简单简介论文所研究问题的基本概念和背景,再而简单明了地指出论文所要研究解决的具体问题,并提出你的论文准备的观点或解决方法。

写法范例:

针对网络行为数据不均衡的问题,从数据均衡化和集成学习两个角度出发,提出一种基于动态抽样概率的集成学习算法。依据抽样概分布对多数类样本进行重采样,相比随机抽样,能更准确地加大对错分样本的学习。在更新样本抽样概率时,依据本轮迭代之前所得分类器的集成测试分类效果,而不是只依据本轮迭代所得分类器的分类效果。用7组UCI数据集和KDDCUP数据集来评估算法在不均衡数据集下的分类性能,实验结果显示,算法在不均衡数据集上的分类性能都有相应的提高。

(2)本文研究方法

调查法:该方法是有目的、有系统的搜集有关研究对象的具体信息。

观察法:用自己的感官和辅助工具直接观察研究对象从而得到有关信息。

实验法:通过主支变革、控制研究对象来发现与确认事物间的因果关系。

文献研究法:通过调查文献来获得资料,从而全面的、正确的了解掌握研究方法。

实证研究法:依据现有的科学理论和实践的需要提出设计。

定性分析法:对研究对象进行“质”的方面的研究,这个方法需要计算的数据较少。

定量分析法:通过具体的数字,使人们对研究对象的认识进一步精确化。

跨学科研究法:运用多学科的理论、方法和成果从整体上对某一课题进行研究。

功能分析法:这是社会科学用来分析社会现象的一种方法,从某一功能出发研究多个方面的影响。

模拟法:通过创设一个与原型相似的模型来间接研究原型某种特性的一种形容方法。

动态数据集成论文参考文献

[1].王雯,晏利扬.智慧大平台监管全覆盖[N].中国环境报.2019

[2].张燕,杜红乐.面向不均衡数据的动态抽样集成学习算法[J].计算机应用与软件.2019

[3].江海燕,郑嘉奇,马源.基于数据共享平台的动态视觉景观分析信息技术集成及其初步应用——以广珠轻轨为例[J].中国园林.2018

[4].吴岳臻.基于金税叁期数据集成的税务动态监控系统的设计与实现[D].山东大学.2018

[5].姜春娇.GIS动态数据集成技术及其在移动网络运维管理中的应用研究[J].电子测试.2016

[6].伍晗.基于数据集成管理的天津市桥梁动态管理系统研究[D].天津大学.2016

[7].李虹锋.高可靠性动态群集数据集成系统的研究与实现[D].电子科技大学.2016

[8].胡小生,温菊屏,钟勇.动态平衡采样的不平衡数据集成分类方法[J].智能系统学报.2016

[9].丁同勤.可动态扩展的医疗数据集成可视化系统设计与开发[D].浙江大学.2016

[10].束长波,施化吉.基于动态数据源的DeepWeb信息集成框架研究[J].无线通信技术.2015

标签:;  ;  ;  ;  ;  ;  ;  ;  ;  ;  

动态数据集成论文-王雯,晏利扬
下载Doc文档

猜你喜欢