基于Hadoop的农业信息资源管理关键技术研究
这是一篇关于Hadoop,农业信息资源,海量小文件,动态副本策略,资源管理系统的论文, 主要内容为目前,我国传统农业生产模式逐步转变为以数字化、信息化和精细化为代表的现代农业发展模式,陆续出现的各类信息系统产生大量农业信息资源。信息资源整合和综合应用趋势日益明显,如何实现海量农业信息资源的有效管理已成为农业信息综合应用亟需解决的关键问题。为解决这一问题,本研究以海量、大小差异性显著的农业信息资源有效管理为目标,在对Hadoop云存储架构分析与移植的基础上,针对Hadoop分布式文件系统(HDFS)在小文件存储不理想和副本分布不均衡两个问题进行算法研究和适应性优化,并使用改进后的HDFS开发实现基于Hadoop的农业信息资源管理系统。本研究主要成果有:(1)通过对NFS、Coda和GFS等分布式文件系统分析得出HDFS适用于农业信息资源管理。首先以HDFS和Map Reduce为重点从内部机理深入分析Hadoop云存储架构,并实现Linux平台中JDK安装、SSH免密码配置以及Hadoop部署等操作;最后基于Web Service技术对云平台进行访问接口扩展,完成Hadoop云平台有效移植。(2)通过分析HDFS中小文件存储的不足,对比现有Hadoop Archive和Sequence File方案的优缺点,提出基于文件合并的优化算法并设计小文件处理模块。针对农业信息资源访问频度不确定性,本研究在对小文件优化的基础上,提出一种基于访问频度的副本动态管理的调控算法FDMDR,该算法在DMDR算法的基础上加入文件访问频度约束,实现资源副本动态管理。(3)基于优化后Hadoop集群,构建农业信息资源管理系统开发平台。采用SSH2框架开发农业信息资源管理软件,主要包括权限管理、文件管理、接口管理和统计分析四大模块。权限管理实现用户的增加、修改、删除等功能;文件管理实现文件的上传、下载、删除和浏览等功能;接口管理提供Web Service接口和HDFS访问接口;统计分析采用分类统计、分区域统计和联合统计三种方式实现对资源的统计分析。本文针对农业信息资源管理时面临大量小文件的实际需求,在Hadoop平台部署、参数优化和算法改进的基础上完成农业信息资源管理系统开发。研究结果表明,该系统能够实现文件、图片和视频等农业信息资源松散组织与统一管理的有效结合,具有功能稳定和可扩展性强等特点。
基于WEB平台的通信资源管理系统与光缆监测系统融合的设计与实现
这是一篇关于资源管理系统,光缆监测系统,融合,数据模型,事件通道的论文, 主要内容为电力系统通信资源管理软件及光缆监测系统软件已在部分电力公司得到应用,但随着电力通信网的扩大,通信承载业务量的增多,需要实现各系统的信息共享,节省网络资源,构建一个综合性技术平台。在同一平台上实现资源管理及光缆线路资源管理及监测,有利于运行维护人员的管理,实现资源的共享。因此,将资源管理系统与光缆监测系统融合是电力通信网研究的一个热点。 本文首先分析了资源管理系统与光缆监测系统的研究现状,深入研究两个系统相关理论知识,了解两个系统的工作原理、功能、结构以及所用到的相关技术。在理论分析的基础上,并结合客户可能的操作,将资源对象进行分类,确定各对象之间的关系,借助PowerDesigner工具,以光缆模型为例,介绍了其物理模型及数据库结构设计。 针对融合系统要实现的目标以及实现系统融合要解决的几个问题,对融合系统进行了总体设计。融合系统架构采用4层结构,即数据服务层、功能服务层、Web服务层和客户浏览层；系统的开发模式选用B/S结合Ajax的模式,实现一次开发,到处运行,在不刷新页而的情况下更新用户界而内容的效果；通过对资源管理系统与光缆监测系统的功能进行分析、归纳、整理,对融合系统的功能进行了设计,大体上划分为资源管理子系统、光缆监测子系统和系统自身管理子系统,各子系统在功能上完全独立。为实现功能服务层与Web服务层以及功能服务层之间的数据同步,系统采用CORBA技术中的事件通道发送配置、告警信息,在各层间建立了事件通道模型,并对各层收发事件流程进行了详细设计 最后对融合后的系统进行调测,结果显示该系统基本实现了预期的功能。
基于SSH资源管理系统的设计及实现
这是一篇关于资源管理系统,SSH框架,JSP的论文, 主要内容为随着互联网的飞速发展，移动办公和分布式办公越来越普及。在这种环境下，基于B/S模式的Web应用系统的出现，得到了各企业、机关的高度重视。基于B/S模式的系统不受地点限制、方便使用、扩展容易，并且客户端零维护，在提供优越性能的同时也降低了开发及维护的成本。 本文所述的系统即为基于B/S模式的Web应用系统。作者通过对系统所做的详细的需求分析，以系统的普遍适用性为目标，设计出了一个具备普遍适用性的Web应用系统——资源管理系统。系统在开发时使用了现时流行的SSH框架，表现层通过使用JSP技术来实现；而中间层则是使用了的Spring+Hibernate技术，通过Struts2控制业务逻辑层与表现层的交互，调用业务逻辑层，并将业务数据返回给表现层作组织表现；数据访问层是通过Hibernate作为ORM框架将关系型数据库的数据映射成对象，很方便地实现以面向对象方式操作数据库。另外，系统中还大量的使用了XML技术，即通过读取XML配置文件来实现对系统的组件化配置。 综合上面所述，该系统在可读性、可维护性及扩展性上都得到了保证，且实验结果表明，此系统的各方面都达到了设计要求。
基于J2EE的电力通信资源管理系统的设计与开发
这是一篇关于电力通信,资源管理系统,J2EE,MVC的论文, 主要内容为随着电力通信网络的不断扩大以及通信手段和设备的多样化,对整个通信网络资源进行快速的调度和有效的管理,已显得非常重要。电力通信网络资源管理系统的建设,对于加强网络资源的集中管理以及充分发挥网络资源效益具有十分重要的意义。 本文介绍了一个电力通信资源管理系统的设计与开发。本系统采取基于J2EE的三层体系结构,即:数据层、业务层和客户层。数据层集中存储了各种资源数据;业务层的J2EE应用服务器实现各种业务逻辑处理功能;客户层提供功能展现和用户操作的界面。 本文首先简要地介绍了课题的背景和意义,然后针对电力通信资源管理的实际需求,在现有的工作步骤及管理流程的基础上,设计电力通信资源管理系统。本系统采用模块化设计思想,将系统分为若干个功能模块,从而实现电力系统通信资源的自动化管理。随后,本文对本人开发实现的两个模块进行了重点介绍。 本软件应用于电力通信系统后能够优化通信资源的配置,从而减轻管理人员的工作负担,提高电力通信网的运行和维护水平,使通信资源得到有效的利用。
基于SSH资源管理系统的设计及实现
这是一篇关于资源管理系统,SSH框架,JSP的论文, 主要内容为随着互联网的飞速发展，移动办公和分布式办公越来越普及。在这种环境下，基于B/S模式的Web应用系统的出现，得到了各企业、机关的高度重视。基于B/S模式的系统不受地点限制、方便使用、扩展容易，并且客户端零维护，在提供优越性能的同时也降低了开发及维护的成本。 本文所述的系统即为基于B/S模式的Web应用系统。作者通过对系统所做的详细的需求分析，以系统的普遍适用性为目标，设计出了一个具备普遍适用性的Web应用系统——资源管理系统。系统在开发时使用了现时流行的SSH框架，表现层通过使用JSP技术来实现；而中间层则是使用了的Spring+Hibernate技术，通过Struts2控制业务逻辑层与表现层的交互，调用业务逻辑层，并将业务数据返回给表现层作组织表现；数据访问层是通过Hibernate作为ORM框架将关系型数据库的数据映射成对象，很方便地实现以面向对象方式操作数据库。另外，系统中还大量的使用了XML技术，即通过读取XML配置文件来实现对系统的组件化配置。 综合上面所述，该系统在可读性、可维护性及扩展性上都得到了保证，且实验结果表明，此系统的各方面都达到了设计要求。
基于Hadoop的农业信息资源管理关键技术研究
这是一篇关于Hadoop,农业信息资源,海量小文件,动态副本策略,资源管理系统的论文, 主要内容为目前,我国传统农业生产模式逐步转变为以数字化、信息化和精细化为代表的现代农业发展模式,陆续出现的各类信息系统产生大量农业信息资源。信息资源整合和综合应用趋势日益明显,如何实现海量农业信息资源的有效管理已成为农业信息综合应用亟需解决的关键问题。为解决这一问题,本研究以海量、大小差异性显著的农业信息资源有效管理为目标,在对Hadoop云存储架构分析与移植的基础上,针对Hadoop分布式文件系统(HDFS)在小文件存储不理想和副本分布不均衡两个问题进行算法研究和适应性优化,并使用改进后的HDFS开发实现基于Hadoop的农业信息资源管理系统。本研究主要成果有:(1)通过对NFS、Coda和GFS等分布式文件系统分析得出HDFS适用于农业信息资源管理。首先以HDFS和Map Reduce为重点从内部机理深入分析Hadoop云存储架构,并实现Linux平台中JDK安装、SSH免密码配置以及Hadoop部署等操作;最后基于Web Service技术对云平台进行访问接口扩展,完成Hadoop云平台有效移植。(2)通过分析HDFS中小文件存储的不足,对比现有Hadoop Archive和Sequence File方案的优缺点,提出基于文件合并的优化算法并设计小文件处理模块。针对农业信息资源访问频度不确定性,本研究在对小文件优化的基础上,提出一种基于访问频度的副本动态管理的调控算法FDMDR,该算法在DMDR算法的基础上加入文件访问频度约束,实现资源副本动态管理。(3)基于优化后Hadoop集群,构建农业信息资源管理系统开发平台。采用SSH2框架开发农业信息资源管理软件,主要包括权限管理、文件管理、接口管理和统计分析四大模块。权限管理实现用户的增加、修改、删除等功能;文件管理实现文件的上传、下载、删除和浏览等功能;接口管理提供Web Service接口和HDFS访问接口;统计分析采用分类统计、分区域统计和联合统计三种方式实现对资源的统计分析。本文针对农业信息资源管理时面临大量小文件的实际需求,在Hadoop平台部署、参数优化和算法改进的基础上完成农业信息资源管理系统开发。研究结果表明,该系统能够实现文件、图片和视频等农业信息资源松散组织与统一管理的有效结合,具有功能稳定和可扩展性强等特点。
本文内容包括但不限于文字、数据、图表及超链接等）均来源于该信息及资料的相关主题。发布者：毕设工坊 ，原文地址：https://m.bishedaima.com/lunwen/45907.html
