基于HDFS云存储的集体备课系统研究与实现
这是一篇关于智慧教育,云存储系统,集体备课系统,HDFS的论文, 主要内容为随着云存储、云计算、大数据等新一代信息技术在教育领域中不断深入,智慧教育被赋予了新的内涵和特征,它是一种全新的云服务模式。伴随着校园信息化建设的不断深入,而渐渐暴露的较为严重的教育信息“孤岛”、教育系统各部门缺乏数据交换标准、数据共享不一致、数据利用率不高等问题,导致教学成本高,教学质量低等后果。同时已有的集体备课系统大多是单一的计算机辅助教学(CAI)课件制作,缺少教师间的协作,老师们不能按时按质地完成集体备课任务。教育系统中,大量用户会对批量化、多样化、分散化、碎片化的教育数据资源进行频繁的读取操作。由于大量的小文件会影响Hadoop (Apache基金会开发的分布式系统基础架构)的扩展性和性能,至今还没有适合任何场景、通用的方案来解决HDFS小文件存储问题。基于以上问题,本论文研究并开发的基于Hadoop分布式文件系统(HDFS)云存储的集体备课系统,可对大量教学活动所产生的海量数据资源进行有效整合和科学利用,无论是从系统的用户信息需求,还是从国家政策指明的未来智慧教育发展方向来看,它都有着重要的理论价值和现实意义。本论文具体包括以下研究内容:1)通过对计算机支持的协同工作(CSCW)以及现有的集体备课系统的学习,利用设计模式和面向对象的技术,使用Java、Jsp、 ActionScript等语言,以Eclipse、FlashBuilder等为开发工具,以主流的Spring+IBatis开发框架为核心,研发了集体备课系统,利用科学的备课流程来规范备课,建立了一套教研评价体系,打破了老师们的时空障碍,使老师们可以很便捷地进行协同备课,同时注重保护老师们集体备课的智慧结晶。2)通过对HDFS的学习和对几种常见的HDFS小文件存储方案的比较,提出了应用于集体备课系统的小文件存储优化方案。该方案从集体备课系统的实际环境和需求出发,主要考虑到集体备课系统这一特殊场景下的文件相关性和局部访问性特点,以存储和访问效率为评价标准,主要从文件合并、文件映射、文件预取进行了详细研究。3)基于Hadoop云平台架构,针对大量的备课文档数据资源、协同手写图片数据资源、协同音视频资源构建了一种以计算资源公共设施化为基础的云存储系统,并对海量教育数据进行高效存储管理和智能信息挖掘。该云存储系统运行在Hadoop集群实现的HDFS分布式文件系统上。论文的系统成果全部通过严格的测试。测试结果证明,系统能可靠、稳定的运行。
基于SSH框架的安全云存储文件系统的研究与实现
这是一篇关于SSH框架,云存储系统,Hadoop,代理重加密的论文, 主要内容为随着计算机网络的飞速发展,大量的个人及企业的数据信息存储在云端,以便用户访问。由于文件拥有者无法控制存储在云服务器上的文件,使得文件的安全性成为云存储发展的一个挑战。如何实现只有合法的使用者才能获取文件、如何给使用者进行授权、如何撤销一个使用者的文件访问权限以及如何保证查询的隐私性等都是实际应用中的研究热点问题。本文针对安全云存储文件系统的实现问题展开研究工作,通过分析用户对云存储系统的安全需求,选择当前主流的开发技术,探索了云存储环境下加密机制和代理重加密的实现问题。采用UML分析与设计方法,完成安全云存储文件系统各功能模块的需求分析和设计。在分析和比较各较实现平台的关键技术的基础上,考虑到可扩展性、可维护性和安全等问题,选用J2EE作为技术架构,采用MySQL作为数据库开发工具,基于Eclipse开发平台和HDFS文件系统,以Hadoop作为云存储集群系统,采用当前流行的SSH框架工具设计和实现了安全的云存储文件系统。在系统的安全架构上,利用代理重加密实现灵活的用户授权和权限撤销,实现了安全的文件访问控制,保证了文件的机密性。
基于MPQUIC架构下的个性化文件传输系统研究
这是一篇关于MPQUIC,云存储系统,文件传输,微服务,强化学习的论文, 主要内容为基于TCP协议的HTTP1.0、HTTP1.1、HTTP2.0作为可靠的应用层协议,得到大规模应用。但是随着网络结构复杂化,TCP存在的队头阻塞、握手延迟等局限性逐渐暴露,面向连接的TCP协议降低了数据传输效率。为了解决TCP存在的局限性,谷歌于2012年提出以UDP作为传输层协议的QUIC(Quick UDP Internet Connection)协议,该协议作为HTTP3.0的研究核心,具有握手0-RTT、多路复用、无歧义重传等优势。基于MPTCP的经验,De Coninck Q等人在QUIC开源代码(quic-go)的基础上实现了多路径QUIC(Multipath QUIC,MPQUIC),利用QUIC头部支持多路径的标志,支持通过路径特征等参数智能的选择传输路径。另外,Rabitsch等人将MPTCP中的最早优先完成(Earliest Completion First,ECF)包调度算法实现到MPQUIC中。在使用学校学习管理系统(LMS)对教师上课录制的视频文件进行直播的过程中,Weblib企业级云存储服务端需要将大容量文件实时传输到LMS客户端,由于云存储系统基于HTTP1.1协议进行文件传输,因此存在弱网传输效率不高的问题。同时,在企业级文件管理中,存在不同等级的用户,高级用户的传输效率需要得到保障。为保证文件传输的服务质量,本文提出了基于MPQUIC架构下的个性化文件传输解决方案。MPQUIC不仅具有QUIC协议的所有优势,还可以聚合Wi Fi和5G或有线网络等多个路径的带宽,有效提高了文件传输效率。本文在Weblib企业级云存储系统文件传输性能和效率提升的探索实践中,主要做了以下工作:(1)本文提出了基于MPQUIC架构下的个性化文件传输解决方案。该方案将系统用户分为普通用户和高级用户两个级别,用户请求文件传输时,根据用户级别以及网络状态选择使用TCP或者MPQUIC协议进行传输,以保证高级用户的文件传输服务质量。(2)本文针对MPQUIC协议提出并实现了基于强化学习(Lin UCB Scheduler on Weblib with MPQUIC,Lin S-MPWeblib)的路径调度算法。该算法在文件传输前检测网络路径状态,使用在线学习与随机调整策略相结合的方式进行合理调度,得出具有最优收益的决策。针对于此,本文设计并基于MPQUIC开源代码包实现了基于MPQUIC协议的文件传输服务。为了满足个性化文件传输的要求,该服务与Weblib微服务架构结合,成为系统的一个微服务。在Weblib Plus(Weblib企业级云存储系统客户端)App端实现对用户分级;同时,实现了文件断点下载、模式切换等功能。最后本文针对个性化文件传输方案和Lin S-MPWeblib算法分别在在真实环境和mininet仿真环境进行了测试。其中,在对Lin S-MPWeblib算法进行测试时,对在线学习策略以及随机调整策略分别测试。同时,将该算法在不同网络状态下进行测试,与当前主流调度算法的传输耗时进行对比。测试结果表明,与ECF算法相比,在弱网环境下,Lin S-MPWeblib文件传输最高缩短了26%的传输耗时。另外,本文对校园网一天的网络状态测试后,模拟校园网的网络状态在mininet仿真环境测试Lin S-MPWeblib算法的性能表现。
基于SSH框架的安全云存储文件系统的研究与实现
这是一篇关于SSH框架,云存储系统,Hadoop,代理重加密的论文, 主要内容为随着计算机网络的飞速发展,大量的个人及企业的数据信息存储在云端,以便用户访问。由于文件拥有者无法控制存储在云服务器上的文件,使得文件的安全性成为云存储发展的一个挑战。如何实现只有合法的使用者才能获取文件、如何给使用者进行授权、如何撤销一个使用者的文件访问权限以及如何保证查询的隐私性等都是实际应用中的研究热点问题。本文针对安全云存储文件系统的实现问题展开研究工作,通过分析用户对云存储系统的安全需求,选择当前主流的开发技术,探索了云存储环境下加密机制和代理重加密的实现问题。采用UML分析与设计方法,完成安全云存储文件系统各功能模块的需求分析和设计。在分析和比较各较实现平台的关键技术的基础上,考虑到可扩展性、可维护性和安全等问题,选用J2EE作为技术架构,采用MySQL作为数据库开发工具,基于Eclipse开发平台和HDFS文件系统,以Hadoop作为云存储集群系统,采用当前流行的SSH框架工具设计和实现了安全的云存储文件系统。在系统的安全架构上,利用代理重加密实现灵活的用户授权和权限撤销,实现了安全的文件访问控制,保证了文件的机密性。
基于HDFS云存储的集体备课系统研究与实现
这是一篇关于智慧教育,云存储系统,集体备课系统,HDFS的论文, 主要内容为随着云存储、云计算、大数据等新一代信息技术在教育领域中不断深入,智慧教育被赋予了新的内涵和特征,它是一种全新的云服务模式。伴随着校园信息化建设的不断深入,而渐渐暴露的较为严重的教育信息“孤岛”、教育系统各部门缺乏数据交换标准、数据共享不一致、数据利用率不高等问题,导致教学成本高,教学质量低等后果。同时已有的集体备课系统大多是单一的计算机辅助教学(CAI)课件制作,缺少教师间的协作,老师们不能按时按质地完成集体备课任务。教育系统中,大量用户会对批量化、多样化、分散化、碎片化的教育数据资源进行频繁的读取操作。由于大量的小文件会影响Hadoop (Apache基金会开发的分布式系统基础架构)的扩展性和性能,至今还没有适合任何场景、通用的方案来解决HDFS小文件存储问题。基于以上问题,本论文研究并开发的基于Hadoop分布式文件系统(HDFS)云存储的集体备课系统,可对大量教学活动所产生的海量数据资源进行有效整合和科学利用,无论是从系统的用户信息需求,还是从国家政策指明的未来智慧教育发展方向来看,它都有着重要的理论价值和现实意义。本论文具体包括以下研究内容:1)通过对计算机支持的协同工作(CSCW)以及现有的集体备课系统的学习,利用设计模式和面向对象的技术,使用Java、Jsp、 ActionScript等语言,以Eclipse、FlashBuilder等为开发工具,以主流的Spring+IBatis开发框架为核心,研发了集体备课系统,利用科学的备课流程来规范备课,建立了一套教研评价体系,打破了老师们的时空障碍,使老师们可以很便捷地进行协同备课,同时注重保护老师们集体备课的智慧结晶。2)通过对HDFS的学习和对几种常见的HDFS小文件存储方案的比较,提出了应用于集体备课系统的小文件存储优化方案。该方案从集体备课系统的实际环境和需求出发,主要考虑到集体备课系统这一特殊场景下的文件相关性和局部访问性特点,以存储和访问效率为评价标准,主要从文件合并、文件映射、文件预取进行了详细研究。3)基于Hadoop云平台架构,针对大量的备课文档数据资源、协同手写图片数据资源、协同音视频资源构建了一种以计算资源公共设施化为基础的云存储系统,并对海量教育数据进行高效存储管理和智能信息挖掘。该云存储系统运行在Hadoop集群实现的HDFS分布式文件系统上。论文的系统成果全部通过严格的测试。测试结果证明,系统能可靠、稳定的运行。
基于SSH框架的安全云存储文件系统的研究与实现
这是一篇关于SSH框架,云存储系统,Hadoop,代理重加密的论文, 主要内容为随着计算机网络的飞速发展,大量的个人及企业的数据信息存储在云端,以便用户访问。由于文件拥有者无法控制存储在云服务器上的文件,使得文件的安全性成为云存储发展的一个挑战。如何实现只有合法的使用者才能获取文件、如何给使用者进行授权、如何撤销一个使用者的文件访问权限以及如何保证查询的隐私性等都是实际应用中的研究热点问题。本文针对安全云存储文件系统的实现问题展开研究工作,通过分析用户对云存储系统的安全需求,选择当前主流的开发技术,探索了云存储环境下加密机制和代理重加密的实现问题。采用UML分析与设计方法,完成安全云存储文件系统各功能模块的需求分析和设计。在分析和比较各较实现平台的关键技术的基础上,考虑到可扩展性、可维护性和安全等问题,选用J2EE作为技术架构,采用MySQL作为数据库开发工具,基于Eclipse开发平台和HDFS文件系统,以Hadoop作为云存储集群系统,采用当前流行的SSH框架工具设计和实现了安全的云存储文件系统。在系统的安全架构上,利用代理重加密实现灵活的用户授权和权限撤销,实现了安全的文件访问控制,保证了文件的机密性。
基于SSH框架的安全云存储文件系统的研究与实现
这是一篇关于SSH框架,云存储系统,Hadoop,代理重加密的论文, 主要内容为随着计算机网络的飞速发展,大量的个人及企业的数据信息存储在云端,以便用户访问。由于文件拥有者无法控制存储在云服务器上的文件,使得文件的安全性成为云存储发展的一个挑战。如何实现只有合法的使用者才能获取文件、如何给使用者进行授权、如何撤销一个使用者的文件访问权限以及如何保证查询的隐私性等都是实际应用中的研究热点问题。本文针对安全云存储文件系统的实现问题展开研究工作,通过分析用户对云存储系统的安全需求,选择当前主流的开发技术,探索了云存储环境下加密机制和代理重加密的实现问题。采用UML分析与设计方法,完成安全云存储文件系统各功能模块的需求分析和设计。在分析和比较各较实现平台的关键技术的基础上,考虑到可扩展性、可维护性和安全等问题,选用J2EE作为技术架构,采用MySQL作为数据库开发工具,基于Eclipse开发平台和HDFS文件系统,以Hadoop作为云存储集群系统,采用当前流行的SSH框架工具设计和实现了安全的云存储文件系统。在系统的安全架构上,利用代理重加密实现灵活的用户授权和权限撤销,实现了安全的文件访问控制,保证了文件的机密性。
本文内容包括但不限于文字、数据、图表及超链接等)均来源于该信息及资料的相关主题。发布者:代码货栈 ,原文地址:https://m.bishedaima.com/lunwen/52913.html