数据集成工具论文-张聪

数据集成工具论文-张聪

导读:本文包含了数据集成工具论文开题报告文献综述及选题提纲参考文献,主要关键词:可见性,生产流程,tna

数据集成工具论文文献综述

张聪[1](2018)在《tna推出全面集成的数据管理工具,为用户提供对所有生产流程的终极可见性》一文中研究指出本刊讯(张聪)日前,tna推出tna intelli-sysiPS 3——一款全面集成且性能高超的数据收集和报告工具,能为用户提供对其所有生产流程前所未有的洞察。借助这款全新的tnaintelli-sysiPS3软件,食品制造商能够使用单一的标准化平台对实时和历史信息进行整理与评估,这些信息来自生产链的每个部分且横跨多个地点。通过在单(本文来源于《食品安全导刊》期刊2018年34期)

肖子健[2](2018)在《基于Django架构平台的地震数据处理工具集成机制设计与研究》一文中研究指出在石油能源开发,以及其他地质结构的勘探中,地震勘探是获取资源信息的重要手段。地震数据具有处理步骤复杂,数据量庞大,处理时间长的特点,地震数据处理系统具有专用性,单机性,不可移动性,如何减少人工处理的步骤,在Web端实现地震数据一体化的处理与监控,成为重要的研究方向并具有很高的实用价值。复杂计算的流程化正在成为现代科学研究的主要内容。这些作业流通常是资源密集型的,需要很多天的时间来计算。在这种情况下,将其配置在高性能计算集群上运行,利用许多功能强大的计算机的聚合资源,是具有重要的实用意义的。此外,研究人员通常希望将他们的工作流集成到他们自己的Web服务器中,以便实现在远程计算机通过网页对作业进行编辑和提交,或者使用移动设备对执行情况进行查询。因此,需要从Web界面提交作业到集群,然后在作业完成后返回结果。针对上述需求,本文在基于Django架构的地震数据一体化平台(以下简称平台)上实现了地震数据处理工具的集成机制,通过编辑工具逻辑关系形成完整工作流,创建工作流引擎推进作业执行,使用该机制集成工具处理地震数据,通过叁维可视化软件显示结果。在Web平台上针对于地震数据处理工具的需求,设计了前台上传与后台数据库映射文件系统的结构。为了实现平台地震数据的顺畅处理,将如SEG-Y等多种类型的地震数据转化为可在工作流作业之间流通的统一格式。在Web端实现了数据处理工具的基础上,将多种地震数据处理方法,在平台上形成工作流工具。在对地震数据读取转换的基础上设计实现了多个地震数据处理工具,包含地震数据的傅里叶变换,Hilbert变换,Gabor变换等数字滤波工具,并且支持自定义工具开发,实现Wiggle曲线绘制二维地震数据,对滤波变换工具处理效果进行测试,通过在Web平台上对地震数据处理工具进行编辑组织,形成地震数据处理工作流流程。最后使用实际地震数据在平台上对工具进行测试,分析平台工具对地震数据的读取效率,以及使用可视化工具分析经过平台工具处理后的地震数据的处理效果。本文提供了一种基于Django架构Web平台的地震数据处理工具集成方式,创建工作流引擎,通过研究地震数据处理方法,设计了Web端地震数据读取及多个地震数据处理工具,实现地震数据处理工作流功能,提供开放的自定义工具创建方式。(本文来源于《吉林大学》期刊2018-04-01)

冯笃[3](2017)在《旋转导向钻井工具稳定平台的集成数据采集与处理》一文中研究指出旋转导向钻井技术是现代钻井的先进技术,在观测井眼轨迹有着强大的优势,同时随着数字信号处理技术的迅速发展,为人们准确观测井下的姿态参数(井斜角I、工具面角T以及方位角A)带来了便利。根据钻井技术的要求,定制了一种加速度计传感器作为测量元件。由于传感器输出的是电流信号,因此设计一种信号调理电路将其转换为电压信号进行放大并进行电压转换,经过电压跟随器送入DSP内部的ADC进行采集。DSP芯片选用TI公司的TMS320F28335,硬件电路除了信号调理电路外,主要由电源供电电路、时钟电路、复位电路以及JTAG口下载电路、LCD显示电路组成。在软件方面注重采用模块化设计,主要包括中断子程序、AD采样设置、软件滤波子程序、角度解算子程序以及显示子程序等。制作PCB电路后,搭建了测试系统与调校仪进行了对比测试,结果显示测量系统达到了设计的要求。(本文来源于《西安石油大学》期刊2017-05-25)

刘续伟[4](2017)在《面向癌症的数据集成分析方法和工具研究》一文中研究指出癌症作为威胁人类生命的头号疾病,研究人员对其致病机理的研究已经持续数十年。在后基因组时代,随着各种生物技术和计算机技术的快速发展,各种生物数据也来到了爆发时期,癌症的生物数据也急剧增长,癌症生物数据的种类也在快速增多。与此同时,计算机技术的快速发展,逐渐成为生命科学研究不可缺失的一部分。此外,对于癌症这种在生命系统中由复杂内部相互作用产生的疾病的研究角度已经从局部转向整体。海量的癌症生物数据、计算机技术的快速发展以及癌症研究角度的转变给研究人员提供了一个机会:如何利用计算机技术从各类的海量的癌症大数据中集成多种不同癌症数据源从系统的角度探索其内部功能机制。针对癌症的数据源的海量性及多样性,本文利用计算机技术集成多数据源从系统的角度探索癌症致病机理,展开了若干项研究,主要工作包括:(1)基于癌症多源数据构建以及分析癌症网络。针对目前癌症网络构造数据源片面性导致网络构建不准确的问题,从系统的角度,整合多种网络构建的数据来源方式,多种癌症数据源,提供数据来源较为全面、准确的癌症网络构建方式,以及癌症网络聚类分析功能,给出了一种自动化合成分析癌症网络的辅助工具系统(SACNet)。(2)不同于从局部的相关数据层面研究癌症致病机理,在基于癌症网络构建的基础上,利用网络聚类分析,结合DAVID的基因功能聚类分析工具,以胰腺癌为例,给出了一种探索癌症网络内部生物分子功能作用的方法;基于10种癌症网络,结合差异癌症通路和致病基因,构建癌症共性网络,结合基因功能查询工具(GeneCards),给出一种探索癌症共性网络内部生物分子功能对癌症致病机理的影响的方法,其结果和目前主流的癌症致病机理相呼应。(3)不同于其他单维度数据分析癌症共性和异质性,基于TCGA癌症的多维组学数据,结合DNA甲基化差异分析方法,对不同种类以及不同发病组织的癌症的共性和异质性进行分析。给出一种分析癌症间共性和异质性的方法,相关分析揭示了不同发病组织的癌症之间和相同发病组织的癌症之间共性和异质性的存在以及区别,同时识别了多个癌症的重要致病基因。(本文来源于《中国科学技术大学》期刊2017-04-01)

华镕[5](2016)在《数据集成:一、更多的数据,更好的工具,更多的机会》一文中研究指出本章先着眼于数据的兴起,然后讨论数据和数据基础设施这些年发生的变化。最后提供一些例子,看看数据集成是如何解决多个不同行业的具体问题。本章有以下内容:(1)纵观数据的演变;(2)看看数据和IT基础设施随着时间推移的变化;(3)了解数据的影响。(本文来源于《中国仪器仪表》期刊2016年09期)

黄垲[6](2016)在《不确定数据集成工具的设计与实现》一文中研究指出随着信息技术的不断发展,不确定数据引起了学术界与工业界的高度重视,并得到了广泛的应用,使得各个领域保存了大量的不确定性数据。然而各个企业和部门的应用往往各自独立,数据得不到有效的交换与共享,致使数据形成“孤岛”,这需要数据集成。不确定数据是带有概率的数据,集成需要发现模式之间的映射关系与消除相似记录,而数据的不确定性加大了集成的困难。不确定数据集成与传统数据集成的不同在于不确定数据集成需要处理数据的概率,在研究不确定数据集成需求的基础之上,设计了不确定数据集成工具的总体结构,主要包括模式匹配与相似记录处理两大模块。在模式匹配模块中,设计实现了一种基于实例划分的模式匹配方法,这种方法将待匹配模式中的实例数据分为数值型数据与字符串数据,字符型数据采用最小平均编辑距离方法将属性值划分到不同的分区中,数值类型数据采用相邻平均差的方法将属性数据划分到不同的分区中,再利用信息熵的思想计算属性的相似度概率,最后根据属性的相似度,计算模式的相似度概率。在相似记录处理模块中,设计了一种多线程的方法,使得相似记录检测与聚集并发执行。同时设计了不确定数据相似记录检测方法,该方法在最大概率相似记录检测方法基础之上,将多元组概率表示的元组按概率从大到小排序,检测按概率从大到小进行,直到检测完所有的记录。针对相似记录,将按多元组概率表示方式存放在一起,形成不出现在同一可能世界的元组关系;如果存在相同数据的元组,利用证据合并理论将概率合并,并删除相同的元组,最后将合并后的元组的概率标准化。通过实验验证了不确定集成工具的模式匹配与相似记录检测的准确性,准确性的量度标准采用通用的查准率与查全率量度方法。在模式匹配中,通过对比当前基于元数据、重复记录、聚类模式的匹配方法,验证并分析了基于划分的方法具有更高的模式匹配准确性。在相似记录检测中,通过与最大概率方法对比,验证并分析了改进的最大概率方法提高了相似记录检测的准确性。(本文来源于《华中科技大学》期刊2016-05-01)

朱安俊[7](2016)在《面向生物数据集成分析的方法和工具研究》一文中研究指出随着生物技术和计算机技术的发展,各类生物数据正在急剧增长,如何利用大量数据从综合整体角度研究问题将成为研究重点,计算技术为生物数据的分析和形成新的生物假说提供了重要技术支持。生命科学的研究越来越离不开计算机科学,需要计算方法和辅助工具来支撑生物学的研究。一方面是对生物实验的支持,设计生物实验是复杂和容易犯错的,尤其是随着高通量技术的发展,仅凭人工设计实验几乎很难实现,需要工具来辅助设计:另一方面是从数据处理和分析的角度,面对大量生物数据,如何将数据集成以及发现数据内部及它们之间的内在联系和区别已经成为生物信息学中的热门课题,需要计算方法和辅助工具来帮助研究者更好地科研。计算机科学对于生命科学的发展影响越来越大,针对上述生物实验设计、数据处理和分析两方面的计算方法和工具需求,本文开展了相关研究,主要工作包括:(1)面向DNA芯片合成技术的计算技术研究。针对芯片技术应用于基因合成的问题,基于传统基因合成设计方法提出了一种改进方法,适应新的芯片合成技术,并在此基础上应用于代谢路径合成设计和蛋白质定向进化,设计实现了面向芯片合成技术的代谢路径合成设计CAD系统和基于改进重组方法的同源蛋白库构建工具。(2)基于文献挖掘和数据库集成构建疾病网络。基于文献挖掘和数据库集成,综合利用数据库和文献来获取关于疾病的全面知识,取代人工收集信息,设计实现了一个自动化构建疾病网络的系统。(3)结合生物通路和网络知识整合分析Cancer Genome Atlas(TCGA)癌症多维数据。结合生物通路信息,给出了一种分析多种癌症突变基因的方式,相关分析结果揭示了显着突变基因参与的多种细胞过程、不同癌症共同显着突变和特异性突变以及同组织内的癌症具有相似性,应用集成网络发现了不同癌症的显着突变基因具有强连通关系:提出利用蛋白相互作用(PPI)网络来集成分析结肠癌叁种类型数据之间的关联,相关分析结果说明了不同基因的异常改变通过相互作用网络产生相似的表型,识别了重要致癌基因。(本文来源于《中国科学技术大学》期刊2016-04-01)

王晓燕[8](2016)在《一种基于数据集成工具的异构数据集成的分析与设计》一文中研究指出随着计算机、通信和网络技术的发展,高校在不同时期建立的封闭系统,形成了"信息孤岛"。数据集成是突破"信息孤岛"最为有效的方法。因此,本文在对异构数据集成进行研究分析后,再结合高校实际情况,提出了一个基于数据集成工具Oracle Data Integrator(ODI)的数据集成设计方案。(本文来源于《办公自动化》期刊2016年01期)

李莉[9](2014)在《保障信息系统数据集成管理工具的研究与实现》一文中研究指出由于历史的原因,各单位装备部门现有的信息管理系统,软硬件运行环境和体系结构存在巨大差异,如何将这些应用系统的数据集成起来,实现数据的共享共用,成为当前一项亟待解决的问题。本文以部队装备首长机关数据使用需求为出发点,对部队现有的业务信息管理系统和日常工作数据进行了深入调查研究,对国内外数据集成技术进行了分析比较,在此基础上,研究设计出了装备数据集成管理工具,为装备数据的集成与共享提供一个先进、高效的方法手段。本文设计的数据集成管理工具,采取叁层模型和B/S环境作为系统总体架构,用XML作为中间格式进行数据传递交换,用XML Schema作为公共模型进行数据集成,用Xquery作为通用语言进行数据查询。系统开发过程中,以eclipse3.2.0为平台,以java作为开发语言,同时还使用了多种辅助开发工具和第叁方软件包,保证了系统开发效率和先进性。本文按照功能将数据集成管理工具划分成四大模块,分别为数据源管理、数据模式集成、数据集成查询、系统维护管理等,能够同时满足数据集成管理人员和装备业务人员使用需要,其中,数据集成管理人员利用该工具管理异构数据源,生成数据集成模式,建立全局查询视图,分配用户角色权限;装备业务人员利用该工具申请注册数据源、查询抽取共享数据。本文使用装备保障模拟数据,对数据集成集成管理工具各个模块的功能进行了测试验证,从实际应用效果和测试结果来看,系统设计思想先进,实现方法科学合理,系统的应用使装备异构数据源的管理工作变得科学、高效、直接,使数据的查询工作变得更加透明、快捷、准确,提升了装备数据的综合利用效益和装备工作科学化决策水平。本文在设计和实现系统功能的同时,也对该系统中存在的技术问题做了探究,以后还需从以下两个方面对系统进行改进和完善:(1)优化数据集成管理工具应用层数据接口,与辅助决策等高层次应用软件进行无缝对接,实现装备业务数据自动抽取与导入。(2)加强数据模式集成功能优化研究,尽可能通过模式自动匹配的方式,解决模式映射过程中出现的冲突问题。(本文来源于《西安电子科技大学》期刊2014-03-01)

李方鑫,南凯,于建军[10](2010)在《基于Duckling应用集成框架的数据集成与共享工具DLM》一文中研究指出虚拟科研应用环境中多源异构数据的集成和共享问题是个热点问题。本文基于虚拟科研环境协同工作套件duckling应用集成框架,实现了一个通用的数据集成与共享工具DLM。该工具使用Portlet技术,是BS架构的Web应用,提供通用的数据采集、数据处理、数据可视化展示和数据下载功能,解决了虚拟科研环境中数据的统一采集、处理和共享问题。该工具已经在大气、气象和生物等相关领域中的课题研究中得到了应用,取得了初步的成效。(本文来源于《计算机系统应用》期刊2010年11期)

数据集成工具论文开题报告

(1)论文研究背景及目的

此处内容要求:

首先简单简介论文所研究问题的基本概念和背景,再而简单明了地指出论文所要研究解决的具体问题,并提出你的论文准备的观点或解决方法。

写法范例:

在石油能源开发,以及其他地质结构的勘探中,地震勘探是获取资源信息的重要手段。地震数据具有处理步骤复杂,数据量庞大,处理时间长的特点,地震数据处理系统具有专用性,单机性,不可移动性,如何减少人工处理的步骤,在Web端实现地震数据一体化的处理与监控,成为重要的研究方向并具有很高的实用价值。复杂计算的流程化正在成为现代科学研究的主要内容。这些作业流通常是资源密集型的,需要很多天的时间来计算。在这种情况下,将其配置在高性能计算集群上运行,利用许多功能强大的计算机的聚合资源,是具有重要的实用意义的。此外,研究人员通常希望将他们的工作流集成到他们自己的Web服务器中,以便实现在远程计算机通过网页对作业进行编辑和提交,或者使用移动设备对执行情况进行查询。因此,需要从Web界面提交作业到集群,然后在作业完成后返回结果。针对上述需求,本文在基于Django架构的地震数据一体化平台(以下简称平台)上实现了地震数据处理工具的集成机制,通过编辑工具逻辑关系形成完整工作流,创建工作流引擎推进作业执行,使用该机制集成工具处理地震数据,通过叁维可视化软件显示结果。在Web平台上针对于地震数据处理工具的需求,设计了前台上传与后台数据库映射文件系统的结构。为了实现平台地震数据的顺畅处理,将如SEG-Y等多种类型的地震数据转化为可在工作流作业之间流通的统一格式。在Web端实现了数据处理工具的基础上,将多种地震数据处理方法,在平台上形成工作流工具。在对地震数据读取转换的基础上设计实现了多个地震数据处理工具,包含地震数据的傅里叶变换,Hilbert变换,Gabor变换等数字滤波工具,并且支持自定义工具开发,实现Wiggle曲线绘制二维地震数据,对滤波变换工具处理效果进行测试,通过在Web平台上对地震数据处理工具进行编辑组织,形成地震数据处理工作流流程。最后使用实际地震数据在平台上对工具进行测试,分析平台工具对地震数据的读取效率,以及使用可视化工具分析经过平台工具处理后的地震数据的处理效果。本文提供了一种基于Django架构Web平台的地震数据处理工具集成方式,创建工作流引擎,通过研究地震数据处理方法,设计了Web端地震数据读取及多个地震数据处理工具,实现地震数据处理工作流功能,提供开放的自定义工具创建方式。

(2)本文研究方法

调查法:该方法是有目的、有系统的搜集有关研究对象的具体信息。

观察法:用自己的感官和辅助工具直接观察研究对象从而得到有关信息。

实验法:通过主支变革、控制研究对象来发现与确认事物间的因果关系。

文献研究法:通过调查文献来获得资料,从而全面的、正确的了解掌握研究方法。

实证研究法:依据现有的科学理论和实践的需要提出设计。

定性分析法:对研究对象进行“质”的方面的研究,这个方法需要计算的数据较少。

定量分析法:通过具体的数字,使人们对研究对象的认识进一步精确化。

跨学科研究法:运用多学科的理论、方法和成果从整体上对某一课题进行研究。

功能分析法:这是社会科学用来分析社会现象的一种方法,从某一功能出发研究多个方面的影响。

模拟法:通过创设一个与原型相似的模型来间接研究原型某种特性的一种形容方法。

数据集成工具论文参考文献

[1].张聪.tna推出全面集成的数据管理工具,为用户提供对所有生产流程的终极可见性[J].食品安全导刊.2018

[2].肖子健.基于Django架构平台的地震数据处理工具集成机制设计与研究[D].吉林大学.2018

[3].冯笃.旋转导向钻井工具稳定平台的集成数据采集与处理[D].西安石油大学.2017

[4].刘续伟.面向癌症的数据集成分析方法和工具研究[D].中国科学技术大学.2017

[5].华镕.数据集成:一、更多的数据,更好的工具,更多的机会[J].中国仪器仪表.2016

[6].黄垲.不确定数据集成工具的设计与实现[D].华中科技大学.2016

[7].朱安俊.面向生物数据集成分析的方法和工具研究[D].中国科学技术大学.2016

[8].王晓燕.一种基于数据集成工具的异构数据集成的分析与设计[J].办公自动化.2016

[9].李莉.保障信息系统数据集成管理工具的研究与实现[D].西安电子科技大学.2014

[10].李方鑫,南凯,于建军.基于Duckling应用集成框架的数据集成与共享工具DLM[J].计算机系统应用.2010

标签:;  ;  ;  

数据集成工具论文-张聪
下载Doc文档

猜你喜欢