导读:本文包含了日志代理论文开题报告文献综述及选题提纲参考文献，主要关键词:ELK,数据挖掘,日志分析,Nginx
日志代理论文文献综述
阮晓龙,董凯伦[1]（2019）在《基于ELK的Nginx反向代理日志分析与业务服务质量评价体系研究与探索》一文中研究指出为实现Nginx服务器生成的海量日志数据的分析,本文构建了一个基于ELK框架的日志实时分析平台。基于该平台实现对历史与实时的日志进行数据挖掘,从运维的多角度建立分析模型对海量日志进行可视化分析,实现对业务的可视化分析及服务质量的评价体系的建立。(本文来源于《网络安全技术与应用》期刊2019年12期）
田万丰[2]（2014）在《某中间件产品监控系统的代理管理和代理日志模块的设计与实现》一文中研究指出企业服务总线(Enterprise Service Bus,简称ESB)是传统中间件技术与XML、Web服务等技术结合的产物。它可以消除不同应用之间的技术差异,让不同的应用服务器协调运作,实现了不同服务之间的通信与整合。WebSphere Message Broker是IBM公司的跨平台ESB产品,本次毕业论文题目中所提到的中间件产品便是指IBM的Websphere Message Broker产品。Websphere Message Broker的正常工作需要该产品下各种组件的协作,这些组件包括代理、执行组、应用、消息流等。与此同时,Websphere Message Broker在处理数据交互过程需要进行有效并持久的日志记录,为企业以后的管理和检查提供具体数据。基于这些背景,IBM售前工程师与IBM中国研发实验室合作,开发了一个基于该产品的监控系统。该系统支持管理Websphere Message Broker所包含各种组件,并且提供系统资源的监控和配置管理等其他功能,其中本人负责的是组件管理和日志记录两个模块。项目整体采用SSH (Struts2+Spring+Hibernate)框架。就整体过程而言,项目按照软件工程的流程,其实施工作不仅包括了前期的可行性调研和技术准备工作,还有需求分析、概要设计和详细设计,以及后续的项目实现和测试,整个过程都使用标准的文档规范记录。最终经过不断努力和多方支持,项目得以圆满完成,此次系统开发顺利完成既定目标,并且目前已交付售前工程师,本人将继续跟踪相关后续工作。(本文来源于《北京邮电大学》期刊2014-05-04）
刘璐[3]（2011）在《基于日志代理的安全审计系统》一文中研究指出随着信息化进程和计算机技术的不断发展,信息技术在企业的业务中起着越来越重要的作用,越来越多的业务依赖信息技术。与此同时,计算机的安全问题逐渐突出和复杂,信息系统所面临的威胁和风险也越来越大。目前最大的问题是缺乏有效的审计手段,即“服务在网内,监管在网外”。数据在信息系统内每秒会被进行上千次的自动化处理,而审计却只能依靠人工进行检查,检查的范围和深度等都非常有限,这就使得审计监管的力度和深度难以保证,同时很多违规或犯罪事件都是在发生很长时间后才被发现的。所以,必须要通过部署安全审计产品,对数据在信息系统内的操作进行实时监测,发现违规操作立即报警,并通过保存记录操作过程以便将来查询取证,从而进一步完善信息科技内控体系。本课题通过搭建一个基于日志代理的安全审计平台,把来自不同设备不同格式的各种日志和审核数据集中起来进行统一管理和安全审计,通过对指定设备和系统日志的审计来提高计算机网络的安全性。论文详细地介绍了基于日志代理的安全审计系统的分析和实现过程。在传统日志管理和安全审计系统所存在问题的基础上,提出了一种客户端/服务器(C/S)的日志审计系统结构。主要的研究内容包括：针对传统的安全审计系统的弊端,科学地对日志审计系统的整体架构进行分析和设计；重点对日志数据采集技术进行了深入的研究与实现；针对复杂的日志数据分布和类型,采用syslog技术进行采集；对不同结构的日志进行“日志格式归一化”,较好地解决了多种日志的融合问题；提出了一种基于Windows平台的日志提取和分析的系统；最后通过一系列的测试对系统功能和性能进行了验证,表明该系统能够有效地对日志数据进行实时审计。(本文来源于《大连海事大学》期刊2011-05-01）
戴丽,张宇[4]（2010）在《基于企业代理日志的内网用户行为特征新算法》一文中研究指出对比了企业代理日志挖掘与常规Web使用挖掘,提出了树形会话表示并依此进行了事务生成,使用了URL层级相似度的用户级动态聚类算法。实验表明,该算法能适应现实中页面数快速增长的日志挖掘,并能成功地应用到个性化推荐中。(本文来源于《计算机应用》期刊2010年S2期）
周志杰[5]（2010）在《基于企业代理日志的Web使用挖掘研究》一文中研究指出随着Internet的飞速发展,互联网毫无疑问已经成为了人们获取与发布信息的主要途径之一。Web使用挖掘(Web Usage Mining)作为Web挖掘的分支之一,能够从服务器、浏览器端的日志记录和用户的个人信息中自动发现隐藏的模式信息,了解系统的访问模式及用户的行为模式,为信息的合理布局、用户的个性化推荐提供有力的依据。近年来,Web使用挖掘受到了越来越多的关注,其成果在电子商务、站点辅助设计、个性化服务等方面有着许多成功的应用。然而,目前的Web使用挖掘研究主要以Web服务器的访问日志为数据源,其以企业代理日志为数据源的研究则很少。企业代理日志是指企业用户在通过内网代理访问外网时产生的日志记录。对企业代理日志的挖掘可以帮助我们优化代理缓存策略,分析、评估代理性能,分析用户浏览行为,提供个性化服务等,为企业的资源规划、上网规范、提高访问效率等提供帮助。本文以企业代理日志为数据源开展研究,对比分析了企业代理日志与服务器日志的特点。在此基础上,首先提出了增进式的数据清洗算法,使得在站点拓扑不可知的情况下实现较好的数据过滤。然后提出了基于浏览树的预处理算法。在用户浏览模式挖掘方面,本文在对比分析多种算法的基础上,提出了基于URL层级相似度的动态聚类挖掘算法——UHMA,它能很好地适应企业代理日志的特点。在用户浏览预测方面,本文使用基于协作过滤的预测推荐算法,且结合RSS订阅,为用户提供实时的个性化推荐。本文设计与实现的基于企业代理日志的Web使用挖掘模型——EPWUM,分为两个部分:离线构件和在线构件。离线构件负责从代理日志中分析用户的浏览模式,在线构件结合用户浏览模式进行预测推荐。实验表明,该模型能克服企业代理日志挖掘中的特有难点,成功地将Web使用挖掘应用于企业代理日志。(本文来源于《华南理工大学》期刊2010-06-29）
陈涛[6]（2009）在《分布式日志数据采集代理框架的研究与设计》一文中研究指出计算机网络在各行业中获得广泛应用的时候,网络安全也成为机构和企业越来越关注的问题。虽然防火墙、防病毒系统、IDS、漏洞扫描等安全产品被部署于网络中,但多种安全设备缺乏有效整合,面对其产生的海量日志信息,网络管理人员往往难以应付,网络安全威胁依然突出。为了将原本孤立的安全设备有机地结合起来,形成统一的整体,协调一致地响应各种安全信息事件,我们提出“统一网络安全管理平台”的研究与开发,它是一种全面的网络安全解决方案。统一网络安全管理平台通过它的各个数据采集Agent收集和分析各安全设备的日志和告警信息,在控制中心对被保护的网络系统进行整体的报警分析、风险评估,确保安全事件得到及时的响应和处理。其中,从各种安全设备高效、灵活地采集日志数据是进行统一网络安全管理的一项重要的工作。但由于日志数据来源广泛、格式不同、数据量大,这些都给日志的采集工作造成了相当的难度。于是,本文提出一种分布式数据采集代理框架,它可以有效的解决该平台中的日志采集问题,而且能适用于各种不同结构、不同规模的网络环境。为此,本文在对统一网络安全管理平台进行整体分析的基础上,研究了数据采集的插件技术、事件类型,结合Agent技术设计并实现了数据采集Agent模型。以数据采集Agent模型为基础,本文进一步研究、设计了分布式日志数据采集代理的框架结构以及分级结构中的事件多级融合、组件之间通信机制。该分布式数据采集代理框架可应用于不同规模的网络环境,具有多方面的灵活扩展性,强大的实时监控能力,事件多级融合机制,安全、高效的数据通信。(本文来源于《华中师范大学》期刊2009-05-01）
李为[7]（2008）在《基于日志代理的安全审计综合分析系统的设计与实现》一文中研究指出计算机网络是由各种不同设备和应用系统构成的一个复杂的组合体,每个设备和应用系统都会产生日志来纪录自身的行为或相关的事件,网络管理员可以通过对日志信息的审计来了解系统的运行状况、审核安全事件及诊断差错异常等。通过日志审计系统可以实现一个分布式的日志监控与安全审计平台,把网络系统中位置各异,格式不一的日志和审核数据集中起来进行统一管理和安全审计,通过对指定设备和系统日志的审计来提高计算机网络的安全性。因此,加强日志管理与审计对日常系统的维护和网络安全保障都具有非常重要的意义。本文在讨论传统日志管理与安全审计所存在问题的基础上,对日志代理采用了正则表达式对日志进行“日志归一化”处理,很好的解决了日志格式缺乏统一规范的问题;提出了单一日志代理完成多种日志源日志采集的设计理念,解决了日志存在方式的多样性问题,极大简化了日志采集的工作过程。新的日志审计系统将为网络系统的安全审计工作提供更全面和更便捷的支持。(本文来源于《西安电子科技大学》期刊2008-01-01）
龚贞标[8]（2006）在《基于多代理技术的分布式Web日志挖掘系统及其实现》一文中研究指出传统的数据挖掘基本上是一个本地的数据分析工具,仅能对本地数据集产生一定的理解性或概括性的知识。随着数据存储容量的不断扩大并向分布式方向发展,迫切需要更好的方式和工具来处理和发掘这些日益庞大的分布式数据。自20世纪90年代以来,多代理技术逐渐成为分布式人工智能研究的热点,对许多学科与技术的发展产生了深远的影响。 本文的研究旨在将多代理技术引入分布式Web日志挖掘。论文分为叁个部分:第一部分论述了多代理技术和Web日志挖掘技术的基础理论,在第一部分的最后论述了分布式Web日志挖掘技术;论文在第二部分提出了一个基于多代理技术框架的分布式Web日志挖掘系统的体系结构,该体系结构分为用户访问层、代理层和服务器层,其中代理层由用户代理、挖掘代理和资源代理等叁个代理组成,而在服务器层设计了一个远程适配器用来主要完成数据预处理的工作,这个体系结构在分布式Web日志挖掘领域是一个新的尝试,可以在今后的研究中进行大量扩展和完善,有很大的研究和应用潜力;论文的第叁部分设计并实现了这个体系结构的各个组成部分,在这部分的研究中,作者研究了代理的通讯机制及其实现方法,设计和开发了结构化通信体SCB,并定义了它的接口,然后结合SCB的特点设计实现了适合本系统的通信原语集,此外,本文还在对Web日志挖掘技术进行研究的基础上,提出了适合本系统的远程适配器和挖掘代理设计方案。 本文所研究的基于多代理技术的分布式Web日志挖掘系统体系结构是切实可行的,但是由于本文的研究是分布式Web日志挖掘领域的一个新的尝试,相关资料匮乏,所以尽管付出了很大的精力来研究各项关键技术,但暂时仍然只能处于理论研究的阶段,在进一步研究和完善后本文所研究的课题一定可以在多代理技术和分布式Web日志挖掘领域发挥出更大的理论和实际应用价值。(本文来源于《同济大学》期刊2006-02-01）
邱建新[9]（2005）在《监测Squid日志的五种方法》一文中研究指出Squid是Unix、Linux环境下一款优秀的代理服务器软件，本文叙述了Squid代理日志的五种监测方法，五种方法各有重点，可根据需要进行选择使用。 1 使用命令行 访问时间 持续时间 客户IP 采用协议 传输字节 访问方式 服务IP 如果(本文来源于《计算机世界》期刊2005-01-17）
邱建新[10]（2004）在《Linux下Squid代理日志的一种应用》一文中研究指出Squid是Linux下一个性能优异的代理服务器软件,尤其是它的详细的日志记录功能。文章论述了Squid的日志分解及应用技术,并配合Linux下其他的服务对Squid日志实现一种良好的配置管理。(本文来源于《计算机与网络》期刊2004年22期）
日志代理论文开题报告
（1）论文研究背景及目的
此处内容要求：
首先简单简介论文所研究问题的基本概念和背景，再而简单明了地指出论文所要研究解决的具体问题，并提出你的论文准备的观点或解决方法。
写法范例：
企业服务总线(Enterprise Service Bus,简称ESB)是传统中间件技术与XML、Web服务等技术结合的产物。它可以消除不同应用之间的技术差异,让不同的应用服务器协调运作,实现了不同服务之间的通信与整合。WebSphere Message Broker是IBM公司的跨平台ESB产品,本次毕业论文题目中所提到的中间件产品便是指IBM的Websphere Message Broker产品。Websphere Message Broker的正常工作需要该产品下各种组件的协作,这些组件包括代理、执行组、应用、消息流等。与此同时,Websphere Message Broker在处理数据交互过程需要进行有效并持久的日志记录,为企业以后的管理和检查提供具体数据。基于这些背景,IBM售前工程师与IBM中国研发实验室合作,开发了一个基于该产品的监控系统。该系统支持管理Websphere Message Broker所包含各种组件,并且提供系统资源的监控和配置管理等其他功能,其中本人负责的是组件管理和日志记录两个模块。项目整体采用SSH (Struts2+Spring+Hibernate)框架。就整体过程而言,项目按照软件工程的流程,其实施工作不仅包括了前期的可行性调研和技术准备工作,还有需求分析、概要设计和详细设计,以及后续的项目实现和测试,整个过程都使用标准的文档规范记录。最终经过不断努力和多方支持,项目得以圆满完成,此次系统开发顺利完成既定目标,并且目前已交付售前工程师,本人将继续跟踪相关后续工作。
（2）本文研究方法
调查法：该方法是有目的、有系统的搜集有关研究对象的具体信息。
观察法：用自己的感官和辅助工具直接观察研究对象从而得到有关信息。
实验法：通过主支变革、控制研究对象来发现与确认事物间的因果关系。
文献研究法：通过调查文献来获得资料，从而全面的、正确的了解掌握研究方法。
实证研究法：依据现有的科学理论和实践的需要提出设计。
定性分析法：对研究对象进行“质”的方面的研究，这个方法需要计算的数据较少。
定量分析法：通过具体的数字，使人们对研究对象的认识进一步精确化。
跨学科研究法：运用多学科的理论、方法和成果从整体上对某一课题进行研究。
功能分析法：这是社会科学用来分析社会现象的一种方法，从某一功能出发研究多个方面的影响。
模拟法：通过创设一个与原型相似的模型来间接研究原型某种特性的一种形容方法。
日志代理论文参考文献
[1].阮晓龙,董凯伦.基于ELK的Nginx反向代理日志分析与业务服务质量评价体系研究与探索[J].网络安全技术与应用.2019
[2].田万丰.某中间件产品监控系统的代理管理和代理日志模块的设计与实现[D].北京邮电大学.2014
[3].刘璐.基于日志代理的安全审计系统[D].大连海事大学.2011
[4].戴丽,张宇.基于企业代理日志的内网用户行为特征新算法[J].计算机应用.2010
[5].周志杰.基于企业代理日志的Web使用挖掘研究[D].华南理工大学.2010
[6].陈涛.分布式日志数据采集代理框架的研究与设计[D].华中师范大学.2009
[7].李为.基于日志代理的安全审计综合分析系统的设计与实现[D].西安电子科技大学.2008
[8].龚贞标.基于多代理技术的分布式Web日志挖掘系统及其实现[D].同济大学.2006
[9].邱建新.监测Squid日志的五种方法[N].计算机世界.2005
[10].邱建新.Linux下Squid代理日志的一种应用[J].计算机与网络.2004