导读:本文包含了数据预处理技术论文开题报告文献综述及选题提纲参考文献,主要关键词:迭合梁桥,健康监测系统,改进数据跳跃点法,噪声处理
数据预处理技术论文文献综述
韩晓健,吴家栋[1](2019)在《迭合梁桥监测数据预处理技术应用研究》一文中研究指出桥梁健康监测采集的海量数据通常含粗差和噪声等,对桥梁安全评估产生一定的影响,因此如何保证监数据的可靠性成为评估的关键问题之一。文章以某迭合梁桥健康监测系统为背景,利用改进的数据跳跃点法处理监测数据中的粗差,结果表明改进的数据跳跃点法可以很好的解决监测数据多级异常跳跃的粗差,分析比对五点二次平滑法和移动平均法的数据"毛刺"处理效果,结果表明滑动平均法处理效果优于五点二次平滑法。(本文来源于《江苏建筑》期刊2019年05期)
崔红超,刘仁钊,马啸[2](2019)在《基于叁维激光扫描技术数字校园点云数据预处理》一文中研究指出为了获取数字校园地形图的有效点云数据,通过利用叁维激光扫描技术采集空间点位信息,并结合海达叁维激光点云处理软件对点云数据进行拼接、转换、编辑处理,生成不带噪声的数据,并对数据进行转换。结果表明:该方法测量速度快,能够完成坐标转换。可见叁维激光扫描技术能够为数字校园地形图提供测量基础数据。(本文来源于《经纬天地》期刊2019年04期)
罗红华[3](2019)在《计算机中数据预处理技术的研究与应用》一文中研究指出数据预处理技术可依据指令信息中包含的数据节点进行分析,并对数据库内的信息进行过滤检索,以此来提升系统的检测精度。对数据预处理技术进行了论述,并通过Web数据挖掘应用、教育研究应用、网络主题搜寻应用叁方面,对数据预处理技术的实际应用进行研究。(本文来源于《电脑编程技巧与维护》期刊2019年08期)
林国彪,谢映海[4](2019)在《一种针对BPSK调制方式的二进制数据预处理技术》一文中研究指出为进一步降低信息传输错误率,文章提出了一种针对未进入信道交织器的二进制数据的预处理方法,使得数据的整体传输准确性获得一定的提升,同时频谱利用率也得到提高。(本文来源于《信息通信》期刊2019年04期)
乔依林[5](2019)在《风电运行数据预处理技术及其应用研究》一文中研究指出近年来,能源危机和环境问题严重制约传统化火力发电的发展,风电产业得到快速发展。由于风电随机波动性强、间歇性显着,大规模风电并网对整个电网系统安全、稳定运行构成严重威胁,亟需解决并网风电冲击电网稳定问题。改善风电质量等相关研究成为重点关注方法,而改善风力发电质量的基础性前提和关键性技术即为提高单机风速/风功率预测性能。因此,本文基于风电场数据采集与监视控制系统(Supervisory Control And Data Acquisition,SCADA)中风机数据,对风机数据预处理技术、风速/风功率不确定性预测技术以及风机发电特性不确定性分析技术等进行深入研究。主要研究内容可归纳为四个方面:异常越限数据识别剔除技术研究。深入分析风机风速、转速、风功率等数据,结合风机运行机理、数理统计及概率论知识,进行风机越限数据识别剔除相关技术的研究,主要包括:将风机转速作为辅助识别因子,设计叁维空间下明显越限数据初筛剔除机制;采用Copula方法求得风机置信等效功率边界曲线,并且定义置信度带宽比数据质量评价指标,评价边界曲线异常数据识别剔除性能;设计数据驱动的边界曲线自适应更新机制;选择风电场中具有代表性两台风机进行实例仿真测试,验证方法机制科学合理性和有效性。风机功率曲线不确定性建模。主要内容如下:考虑风机发电特性建模数据敏感性,补充缺失数据插值重构方法研究,采用双向Markov链数据重构法填补缺失数据,且进行双向重构值权重系数优化训练,精准高效地重构缺失数据点;对不同缺失数据类型分析、设计数据插值重构混合策略;基于预处理后数据,综述多种风机功率曲线定值和概率建模方法,对比分析不确定性功率曲线模型性能。风速不确定性预测技术研究。基于风速时序数据的相空间重构和相似风速序列聚类,实施多结构模型的超短期风速预测相关技术研究,简述如下:实施风速片段序列特征提取和数据降维,提高相似样本聚类的准确性和运行效率;采用高斯过程过回归(Gaussian Process Regression,GPR)算法建立多结构单步风速预测模型,且实施影响GPR模型性能的超参数优化,创新性地结合k折交叉验证法定义综合评判准则函数,用作优化过程中个体适应度的计算;以滚动迭代思想为基础,设计最优模型结构选择机制,实现精准高效超短期风速多步预测;算例仿真验证所提方法策略有效性和优越性。综合不确定性风功率预测建模。在风功率预测间接分步实现方式下,设计考虑综合不确定性的风功率预测建模机制,在分步方式下,实施风功率预测不确定性的分析、评估及综合,构建不确定性风功率预测系统。具体内容如下:结合风速不确定性预测结果和不确定性风机功率曲线模型,实现超短期风功率预测;进行仿真测试,验证间接分步方式下风功率综合不确定性预测的实现方法科学合理性和先进性。(本文来源于《华北电力大学(北京)》期刊2019-03-01)
胡江[6](2019)在《面向电网故障诊断系统的数据预处理技术的研究》一文中研究指出在智能电网发展背景下,一方面,间歇性能源的大量接入及信息传感等技术的应用使得电网的规模及结构的复杂程度进一步增加,故障录波信息网的建立、智能电子测量装置的普及使得故障数据呈现多元化的趋势;另一方面,调控平台上传过程中出现通道中断或异常、量测点不足、误操作、关联性故障等情况会造成系统所接收的数据源断面不完整、不精确。因此为了提高复杂数据环境下电网诊断系统的适应性、容错性,本文对故障信息的分析处理进行了深入研究。本文基于课题组所开发设计的电网故障诊断与恢复系统实际需求,根据面临的复杂数据环境设计了故障信息预处理模块,通过故障诊断基本原理与实际故障案例结合,利用调控一体化仿真系统提取海量故障样本及相关信息,从而为分析故障信息的诊断机理提供了完整数据源。针对调度平台接收到的低价值密度故障信息,提出了一种去噪解析的方法处理告警信息,利用文本相似度算法对信息序列中的非诊断关键词进行关联匹配,通过该方法减少了故障信息建模工作量、提高了诊断计算的鲁棒性,同时根据网络拓扑结构建立了保护-断路器关联事件序列,为下一步进行异常事件辨识提供可编译信息链。为实现对异常信息的辨识处理,构建了最大熵隐马尔科夫模型(maximum entropy hidden Markov model,ME-HMM)。基于保护-断路器关联关系定义了待诊断信息类型以及异常信息模式,然后结合电气量信息和上下文信息构建特征函数向量,并利用Baum-Welch算法训练子模型参数,从而对故障数据所隐藏的异常模式进行概率估计。通过实例分析证明该方法能够实现对原始故障数据的精简,有效识别包括信息畸变、保护断路器不正确动作在内的异常信息,为实现数据驱动下自适应故障诊断系统的开发设计提供了一种新的思路。(本文来源于《华北电力大学(北京)》期刊2019-03-01)
周泉锡[7](2019)在《常见数据预处理技术分析》一文中研究指出大数据时代对于数据的精度和有效性要求更为苛刻,因此数据的预处理过程必不可少,只有科学规范的预处理过程,才能使数据分析深层挖掘的结论更为合理可靠。本文对几种常见数据的预处理方法进行着重分析,阐明对其预处理的基本方法与必要性,从而为数据的深层次挖掘提供更科学可行的数据信息。(本文来源于《通讯世界》期刊2019年01期)
张麒增,戴翰波[8](2019)在《基于数据预处理技术的学生成绩预测模型研究》一文中研究指出随着信息技术的不断发展和教育数据的大量累积,教育机构对于教育数据的挖掘和改善挖掘效果的需求越来越大.在本文中我们探索用离散化方法和少数类样本合成(SMOTE)过采样化技术配合神经网络(neural network)算法和支持向量机(SVM)算法如何提高预测学生最终课程表现模型的准确率并对比几种离散化方法的表现.从实验结果中我们得出使用离散化和SMOTE技术进行预处理后能够显着地提升模型的预测能力,其中使用等频率分箱法进行离散化处理数据集的模型表现最佳.(本文来源于《湖北大学学报(自然科学版)》期刊2019年01期)
李利荣,孙立伟,杨浩,王晓栋,房红征[9](2018)在《基于Spark的飞机试验数据预处理技术研究》一文中研究指出飞机飞行试验是飞机交付运营前的必要环节,在飞机飞行试验过程中会产生大量的试验数据,这些数据对飞机的研制、定型、改进具有重要意义;传统的试验数据预处理技术多采用单机工作模式,无法快速处理海量试验数据,鉴于此,对基于spark分布式内存计算技术进行了研究;通过预先剔除参数组中不存在于当前数据文件中的参数群,减少分布式集群间的数据通讯与航空领域429协议、232协议、664协议的数据预处理时间,提高飞行试验的效率;最后,选择30GB飞行试验数据作为实验对象进行验证,结果表明,该方法有效地提高了数据解析效率,克服了传统数据处理方式效率低下,单个机器内存和CPU等硬件条件不足的问题。(本文来源于《计算机测量与控制》期刊2018年12期)
王玉伟,高永[10](2018)在《基于稳健回归算法的无人机数据预处理技术研究》一文中研究指出针对无人机采集飞行数据过程中存在数据野值,噪声以及丢失现象,论文分析了数据误差的表现种类及原因,提出了一种基于M估计稳健回归的算法,利用反复加权的最小二乘迭代法求解回归系数,实现对飞参数据的拟合,设置拟合数据与实测数据之间的阈值大小来识别野值。该方法大大改善了异常野值对回归系数的影响,克服了经典最小二乘对异常数据敏感的缺点。并在Matlab环境下对飞参记录的四边航行各通道数据进行了仿真,仿真结果验证了方法的有效性。(本文来源于《舰船电子工程》期刊2018年11期)
数据预处理技术论文开题报告
(1)论文研究背景及目的
此处内容要求:
首先简单简介论文所研究问题的基本概念和背景,再而简单明了地指出论文所要研究解决的具体问题,并提出你的论文准备的观点或解决方法。
写法范例:
为了获取数字校园地形图的有效点云数据,通过利用叁维激光扫描技术采集空间点位信息,并结合海达叁维激光点云处理软件对点云数据进行拼接、转换、编辑处理,生成不带噪声的数据,并对数据进行转换。结果表明:该方法测量速度快,能够完成坐标转换。可见叁维激光扫描技术能够为数字校园地形图提供测量基础数据。
(2)本文研究方法
调查法:该方法是有目的、有系统的搜集有关研究对象的具体信息。
观察法:用自己的感官和辅助工具直接观察研究对象从而得到有关信息。
实验法:通过主支变革、控制研究对象来发现与确认事物间的因果关系。
文献研究法:通过调查文献来获得资料,从而全面的、正确的了解掌握研究方法。
实证研究法:依据现有的科学理论和实践的需要提出设计。
定性分析法:对研究对象进行“质”的方面的研究,这个方法需要计算的数据较少。
定量分析法:通过具体的数字,使人们对研究对象的认识进一步精确化。
跨学科研究法:运用多学科的理论、方法和成果从整体上对某一课题进行研究。
功能分析法:这是社会科学用来分析社会现象的一种方法,从某一功能出发研究多个方面的影响。
模拟法:通过创设一个与原型相似的模型来间接研究原型某种特性的一种形容方法。
数据预处理技术论文参考文献
[1].韩晓健,吴家栋.迭合梁桥监测数据预处理技术应用研究[J].江苏建筑.2019
[2].崔红超,刘仁钊,马啸.基于叁维激光扫描技术数字校园点云数据预处理[J].经纬天地.2019
[3].罗红华.计算机中数据预处理技术的研究与应用[J].电脑编程技巧与维护.2019
[4].林国彪,谢映海.一种针对BPSK调制方式的二进制数据预处理技术[J].信息通信.2019
[5].乔依林.风电运行数据预处理技术及其应用研究[D].华北电力大学(北京).2019
[6].胡江.面向电网故障诊断系统的数据预处理技术的研究[D].华北电力大学(北京).2019
[7].周泉锡.常见数据预处理技术分析[J].通讯世界.2019
[8].张麒增,戴翰波.基于数据预处理技术的学生成绩预测模型研究[J].湖北大学学报(自然科学版).2019
[9].李利荣,孙立伟,杨浩,王晓栋,房红征.基于Spark的飞机试验数据预处理技术研究[J].计算机测量与控制.2018
[10].王玉伟,高永.基于稳健回归算法的无人机数据预处理技术研究[J].舰船电子工程.2018