当前位置: 查字典论文网 >> 一种基于数据动态迁移的分级备份系统的研究

一种基于数据动态迁移的分级备份系统的研究

格式:DOC 上传日期:2015-09-09 17:04:09
一种基于数据动态迁移的分级备份系统的研究
时间:2015-09-09 17:04:09     小编:

摘 要:随着运营商信息化进程的不断深化,业务数据量处于高速的增长,管理信息系统的高效访问以及安全性正在变得越来越重要。本文以信息系统的数据价值评估为基础,提出一种数据动态迁移模型,并引入虚拟带库作为近线存储,形成完整的解决方案。实现传统备份到分级备份的升级改造,优化信息系统备份架构,提高数据的访问以及保护的效率。

关键词:备份;信息生命周期;虚拟磁带库

中图分类号:TP274 文献标识码:A

Abstract:With rapid development of informatization advancement and steep rise of total quantity of data, security and reliability of information system become more and more important. This paper introduced a dynamic migratory pattern based on dynamic value evaluation, and put forward a solution using virtual library as nearline storage. The solution optimizes the framework of backup, and the measurement indicates that the security and reliability of information system has been boosted.

Key words:backup; information lifecycle; virtual tape library

1 引 言

传统的数据备份方式存在备份时间过长、成功率难以保证、可靠性和可扩展性不足等问题,成为影响业务连续性的隐患。虚拟磁带库(VTL)技术的出现使得设计分级存储架构成为可能,本文提出一种基于信息生命周期的动态迁移模型,对于备份效率,系统响应速度的提升取得了比较好的效果。

2 虚拟带库技术概述

传统作为备份介质的磁带库, 其优势是可以成本低、数据的移动比较方便,但是磁带介质不稳定,容易受粉尘、湿度等因素的影响,出现读写错误,对保存环境的要求比较高。磁带库的机械手和驱动器属于精密机械设备,故障率较高,数据恢复时间比较长。

虚拟磁带库(VTL)技术将磁盘作为存储介质,通过软件在逻辑上将磁盘存储系统虚拟为传统的磁带库设备,在逻辑上模拟机械手、驱动器的功能。虚拟磁带库能够和主流厂家的备份软件无缝地兼容,实现许多数据备份功能。

VTL 技术以磁盘作为存储介质,将磁盘仿真成物理磁带库,利用传统备份软件实现和物理磁带库同样的数据备份功能,提供与物理磁带库一样的操作。实现在不改变原来磁带库备份架构的情况下,用磁盘代替磁带,以缩短备份窗口、提高备份成功率。

3 分级存储

3.1 传统存储备份架构

陕西移动管理信息系统原有的存储备份构架由在线存储和离线海量存储构成两级平台。在线存储采用磁盘阵列等高速的数据存储设备, 满足计算平台对数据访问的速度要求,价格相对昂贵。离线存储主要用于对在线存储的数据进行备份,以防范可能发生的数据灾难,主要采用的产品是磁带库。两级模式存储构架下, 用户系统的业务数据即时写入磁盘阵列里,然后根据备份策略在业务空闲时段将这些数据从在线存储设备上备份到磁带库中。

随着企业数据的不断膨胀和对于系统响应速度以及业务连续性要求的不断提高,传统带库备份方式已无法适应不断增大的备份窗口以及数据恢复时效性的要求。而且由于离线海量存储的磁带备份技术存在速度较慢、数据定位存取慢、故障率较高等缺点, 所以都会对在线服务器的工作性能或服务时间产生影响。

3.2 三层结构的存储备份方式

根据在线存储和离线存储在数据量、响应速度方面巨大的性能差距,引入了VTL作为近线层以缓解性能以及存储空间的矛盾。近线层存储性能近似在线的存储,其特点是数据访问速度接近在线存储,但成本接近离线存储。三层结构模式下,系统数据首先实时存储到磁盘阵列等在线存储设备,然后备份系统按策略定期将数据备份到近线存储设备, 近线存储设备上的数据不区分生产系统是否繁忙,随时备份到带库等离线海量存储设备上[1]。在线存储设备里不常使用的数据还可以迁移到近线存储,甚至离线存储,在需要访问时再进行回迁,这样的设计节省了在线存储设备的磁盘空间,提高了访问效率。

这种磁盘与磁带相结合的数据备份方式,将磁盘快速访问与磁带高速顺序读写的优势结合起来,并屏蔽了磁盘上在线数据不够安全与磁带恢复速度慢的缺陷,大大提升了备份与恢复的性能[2]。分级存储管理和数据迁移将离线存储与在线存储融合,从而大大降低对海量数据存储备份的投入和管理成本,较好地解决了传统两层存储备份模式在存储效率和成本方面的不足。

4 生命周期管理以及信息价值评估

4.1 信息的生命周期管理理论

信息生命周期管理(ILM)是首先是由EMC公司提出来,其核心是信息在不同阶段的价值不同,通过合适的方式存储数据,帮助信息中心从战略高度来管理信息。信息在不同的生命阶段具有不同的价值,ILM就是要实现在信息生命周期的不同阶段,依据信息价值的不同,采用不同的方式来管理信息,使企业在降低总体拥有成本TCO的同时,获取信息的最大值[4][5]。根据用户应用的现实需求,对信息进行全生命过程的建模管理,包括数据创建、使用到归档和销毁。

4.2 信息生命周期管理的实施

根据信息管理的目标和策略展开信息管理,信息生命周期管理实施可以分为如下几步: 1)对信息价值进行评价。对数据按照属性和使用情况来确定其价值。信息的价值在信息的整个生命周期中是不断变化的[6]。二信息价值随时间变化的关系。

2)选择存储策略,进行分级存储。存储策略的选择是信息生命周期管理的核心部分,需要综合考虑各要素。下图为各级存储设备中数据价值的变化。

3)信息存储的工具。是指将信息存储到网络或存储介质,以及用于数据备份、快照技术等的工具选择。

4)对ILM的定期检查。对整个生命周期过程进行全面检查,发现存在的问题,并及时对其进行处理。

信息生命周期管理重要的一点是要按照预定义的价值阀值高低来安排合适的存储设备。使重要的信息获得较高优先级,同时控制了一般信息的存储成本。本文给出了一种典型的方法确定数据的价值。

5 信息价值评估以及元数据设计

本文提出了一种信息价值评估的模型,该模型根据信息的文件大小、访问频率等静态因素以及相关性等动态因素,通过这些因素赋值的加权计算,得出信息的评价值,作为数据进行迁移的依据。通过设计元数据,对信息的索引进行结构化改造,对信息的内容、结构、表示等进行抽象,以便进行数据的排序和迁移。

5.1 信息价值评估模型

1)文件的大小

高性能磁盘阵列由于成本较高,容量有限,如果大量的大文件存储在高性能磁盘阵列,其会占据很大的存储空间,小而且重要的文件就无法及时被访问到,导致存储系统性能的降低,因此小文件的价值更高,应优先迁移小文件到高性能磁盘阵列中。S为文件大小,将其对于信息价值评估的贡献定义为V1。

为保证元数据对于文件信息表征的准确性,监控程序对文件操作进行监控,并触发相关的记录更新。根据应用场景,本文采用事件触发方式同步实现元数据的更新。读写文件、文件的删除以及重命名等都是能够触发元数据更新的操作。

6 模型结构以及具体实现

6.1 基于信息价值变化的数据迁移模型结构

当信息价值变化达到了进行迁移的触发条件,模型创建迁移主线程和迁移文件的任务队列,在迁移过程调度的控制下开始进行迁移。迁移的过程有两部分,即非热点数据从高端存储迁移到低端存储,热点数据从低端存储迁移到高端存储。同时,为避免这个迁移过程对存储系统的性能影响,模型采用了双候选队列,根据负载和价值进行迁移任务队列的集中调度。整个迁移的模型结构,包括文件监控模块、迁移过程监控模块以及元数据维护模块三部分组成。下图为迁移过程控制整体结构图。

6.2 算法实现

基于信息价值的数据迁移策略执行过程表述如下:

2)迁移进程创建,同时读取控制参数,从价值最低的文件开始进行迁移。

3)根据系统负荷,动态的调整迁移的优先级,并基于迁移中文件价值的变化重新计算关联文件价值,完成更新。

4)迁移中线程被中断或者被迁移的数据被应用访问,则已迁移的副本失效,并反馈给文件监控模块,跳转到步骤1。否则继续执行步骤5.

5)基于文件价值的重新排序,对迁移队列中的文件进行调整,继续进行迁移,直到高端存储占用容量达到70%以下。

6)在迁移完成后修改元数据,重定向迁移文件,并且释放文件锁,结束此次迁移。

7 改造方案以及性能分析

7.1 改造方案

陕西移动公司管理信息系统原有备份体系的结构是通过SAN+LANfree方式的集中备份管理,2台IBM3310带库通过SAN模式对统一信息平台以及ERP系统进行光纤通道直连备份,其余财务集中化、物流等系统通过LANfree方式备份,备份软件采用Veritas。目前的备份策略是采用每周一次全备,每天增量备份的方式,通过物理带库方式进行备份。传统的低效率的备份方式加之随着业务的发展需备份的数据量不断增加,导致备份窗口经常冲突导致备份失败,故障率增加。

为解决上述问题,在原有磁盘阵列物理带库之间引入性能较低的SATA盘组成虚拟带库(VTL)作为近线存储设备,并通过基于信息价值的动态迁移机制,提高备份效率以及访问的命中率。改造后的三级存储系统备份的性能得到提高,备份速度加快,备份窗口大大缩短。并根据测试结果,数据恢复速度大幅提高,系统的RTO指标得到优化,解决了传统物理带库可恢复性低的问题。

7.2 性能分析

为了验证性能,我们通过对约800GB的数据进行备份以及恢复测试。通过对比,可以看出分级的备份系统较传统的备份系统在数据的备份以及恢复性能上有了较大的提升。

实际的应用表明,基于数据动态迁移的分级备份平台建设,改善和优化了备份框架,提升了数据备份与恢复的能力,增强了业务系统稳定可靠的运行能力。同时其具有开放的扩展性,充分利用现有硬件资源保护投资,可以满足数据量持续增长后系统性能提高的需求。

参考文献

[2] 吕帅.基于对象的分级存储系统数据迁移技术研究[D].长沙:国防科技大学,2009.

[3] ZHAO Xiaonan,LI Zhanhuai,ZENG Leijie,A Hierarchical Storage Strategy Based on BlockLevel Data Valuation[C]//In the proceeding of the 4th International conference on Betworked Computing and Advanced Information Management,2008:36-41.

[5] 唐竟.基于生命周期管理数据迁移技术研究[D].长沙:湖南大学,2009.

[6] Chritine Taylor Chudnow.Information Lifecycle Management and the Government[J].Computer Technology Review 2004,24(8):25-26.

[7] 王艳云.分级存储系统中数据迁移技术的研究[D].西安:西安建筑科技大学,2012.

全文阅读已结束,如果需要下载本文请点击

下载此文档

相关推荐 更多

基于FlightGear的飞行数据管理与分析系统
发布时间:2023-04-15
摘要:飞行器是一个庞大的复杂系统,其设计与开发需要几轮迭代,而仿真技术在此过程中起着无法替代的作用。开源仿真软件FlightGear主要用于飞行模拟,并不能用于飞行器的系统研发仿真与验证。本文以FlightGear为基础,对其进行了扩展,从而实现了一套集飞行数据管理和分析于一体的软件系统。利用FlightGear接口,开发了以数据采集为主的通信、存储等模块,使扩展系统能够实时、灵活地采集飞行器的参.........
基于NFC的移动导医系统设计
发布时间:2023-07-07
摘要:“挂号难、排队久、单据繁多、找不到诊室”等就医问题日益凸显。随着NFC技术即近距离无线通讯技术的快速发展,加上Android手机的普及,移动医疗将成为改善目前就医状况的一种良好方式。将NFC技术与Android平台相结合,利用M/M/......
在应用程序客户端备份和恢复MSSQL SERVER数据库的一种方法
发布时间:2023-06-23
在应用程序客户端备份和恢复MSSQL SERVER数据库的一种方法 在应用程序客户端备份和恢复MSSQL SERVER数据库的一种方法 信息技术论文 更新:2006-4-8 阅读: 在应用程序客户端备份和恢复MSSQL SERVER数据库的一种方......
基于HTML5的实时Web数据监测系统的设计与研究
发布时间:2016-10-14
随着人们对信息实时性需求的不断提高,实时Web技术越来越受到人们的重视。例如,实时在线版网络游戏、在线购票系统等都是实时Web的典型代表。有国外媒体称实时Web的时代即将到来,实时Web不仅仅是一种时尚也是一种技术趋势。客户端数据......
基于WSN的仓储设备监控系统研究
发布时间:2023-03-16
[摘 要]仓储作业设备尤其是传送和拣选设备的工作状况正常与否直接影响着整个仓储作业的安全性。因此,仓储自动化程度越高,就越需要对作业设备运行状态进行实时监测、记录、报警和处理。现代仓储系统一般都需要配备作业设备监控系统,......
一种基于ARM的心电监护系统的设计及相关研究
发布时间:2023-03-13
摘 要: 心电图(ECG)作为心脏监护的手段和方法,在心电监护中受到重视。在此提出了一种基于ARM的心电监护系统的设计,其中心电数据处理单元采用ARM7TDMI?S内核的LPC2400系列32位处理器进行设计,采用无线连接和无线收发的通信手段,......
移动通信系统中Wi―Fi分流系统方法研究
发布时间:2023-05-25
【摘 要】Wi-Fi分流实现从2G/3G/LTE网络转移移动流量到Wi-Fi的网络功能,对解决移动数据网络拥塞有重要的意义。分析研究了2G/3G移动通信网络中利用Wi-Fi进行分流的系统方法,重点介绍了3GPP规范定义的Wi-Fi分流架构和鉴权方法、实际工......
分析基于三维扫描的特种设备管理系统设计
发布时间:2023-06-27
0引言 现代化的制造技术使得特种设备的种类多、功能结构复杂,进一步增加了设备管理,尤其是精益化管理的难度。 设备管理任务必须依赖设备管理信息传递的及时性、准确性、完备性以及系统的反馈。全面、可靠的信息对于设备管理决策制......
基于二维条码的身份识别系统解码研究
发布时间:2019-12-09
摘要:二维条码已经运用到身份识别中。将个人信息和照片编在二维条码中,不但可以实现身份的自动识读,而且可以有效防止伪造和使用假冒证件。探讨了PDF417二维条码的识别与解码算法及在身份识别上的应用。分析了多种图像处理方法,针对条码图片的特点,采取特定的图像处理方法以得到最佳效果。在.Net平台开发环境下,用C#语言首先对各种图像预处理方法进行分析和对比,然后在图像识别时对图片进行预处理。对处理后的图.........
基于RFID技术的车辆动态路径诱导系统研究
发布时间:2019-12-09
摘要:针对当前各大城市道路运行状态信息获取不及时、不准确等问题,以郑州市主城区道路网为例,采用基于RFID技术的交通信息采集方法,研发了一套车辆动态路径诱导系统。该系统通过采用RFID技术对道路网上的行驶车辆进行实时位置信息采集和交互,后台信息处理中心依据改进后的Dijkstra算法进行实时路径诱导,从而使出行者可以选择最优路径,快速准确地到达目的地。实验结果表明,基于RFID技术的车辆动态路径诱.........
国内基于移动GIS的野外地质数据采集信息化研究现状
发布时间:2022-12-10
摘要:野外数据采集是野外地质调查的重要组成部分。在新的科学技术推动下,野外数据采集从手工采集方式逐步向信息化模式过度。论述了国内野外地质数据采集信息化的流程及基本技术,阐述了野外数据采集系统的主要功能模块,分析了基于......
基于基准样本数据库的源代码相似性检测系统研究
发布时间:2023-03-07
【摘 要】随着商业软件设计的不断发展 ,开源软件对世界的贡献有目共睹。但是不规范的开源软件组件的使用正在打击着软件设计人员的积极性,其不仅漏洞百出,而且对后续软件的开发也产生了重要影响。并且随着软件设计业的迅速发展,抄......
基于信息素的制造系统动态协调分析
发布时间:2016-09-02
当今制造业面临着非常严峻的挑战,其原因在于市场竞争越来越多地表现为动态化、全球化和用户驱动的特点。所以,制造系统所而临的内外环境越来越充满了随机性与不确定性,例如:紧急加工工件的到来,生产设备的故障与修复,不可预知工件......
基于QAR数据的民航发动机排故方法研究分析
发布时间:2022-12-31
1引言 QAR C Quick Access Recorder)是民航飞机上装载的快速存取记录器,记录器介质通常为可擦写光盘或PCMCIA卡,记录时间可达数百小时,记录参数涵盖绝大部分飞行品质监控数据。飞机航后维护时,机务工程师对QAR记录的原始二进制数据......
一种基于NFC的自充值ETC运营系统
发布时间:2023-01-29
摘要:针对目前ETC用户在充值过程中经常遇到网点少,路途远等不便的情况,为了提升ETC用户满意度,加快ETC发展,提出了一套基于NFC技术的自充值运营系统,该系统得到了各地高速公路运营单位的认可,并且已经研制出相关设备与系统,取得了良好的效果。关键词:NFC;ETC;自充值;高速公路中图分类号:TP277文献标识码:A文章编号:2095-1302(2015)01-00-020引言近年来,ETC应用.........
基于FPGA的多路数据采集系统设计
发布时间:2023-03-12
摘要:数据采集系统是现代检测控制技术的关键,是模拟域与数字域之间的纽带,广泛应用于诸如军事、工业控制、深海测量等各领域,目前常用的是专用数据采集卡。相比较专用采集卡,基于FPGA设计的数据采集系统具有多功能、高效率、易升级、低功耗等优点。实验结果显示,本系统可以采集的电压值变化范围为0~5V,精确度能达到0.02V。系统显示可以实现单通道显示与多通道巡检显示切换。关键词:可编程逻辑;数据采集;硬件.........
基于混沌迁移及无参数变异差分进化算法的舰船电力系统网络重构
发布时间:2022-09-20
摘要:为更好地利用差分进化算法对舰船电力系统网络进行重构,提出一种基于混沌迁移及无参数变异的差分进化算法,针对差分进化算法寻找最优解容易陷入早熟的问题,引入一种基于混沌迁移的并行进化策略,该策略将原有种群分为多个子种群,进行并行进化,在优化过程中引入混沌迁移序列引导个体迁移,利用混沌的遍历性和随机性,保证子种群间能高效地进行信息交换,针对电力系统网络重构中的0,1,2编码方式在解码中信息丢失问题,.........
浅论基于ESP系统的汽车状态参数估计方法研究
发布时间:2017-01-16
随着我国人民经济水平的提高,我国的汽车销量也迅速增长至全球首位,而随之而来的车辆安全、环保等问题却日益凸显。据有关部门统计,在2015年全球发生的交通事故中,车辆在弯道或易滑路面的转向失控是造成车辆失控导致交通事故的重要原......
基于Android系统的医院移动查房系统的设计与实现
发布时间:2023-01-30
摘要:随着信息技术飞速发展,国内越来越多的医院正加速实施医疗信息化的整体建设,以提高服务水平和工作效率。在充分考虑医院查房工作实际,本文利用网络技术、Web Service技术、Android技术以及二维条码扫描技术等最新技术开发基于......
计算机硬盘数据备份和数据恢复技术
发布时间:2023-01-15
摘要:在计算机时代的今天,用户信息都以数据形式保存在硬盘中,但是,这些信息并不像我们想象的那么安全,数据丢失情况大有发生。这篇论文就是从技术角度总结硬盘常见问题点和一般数据的恢复和备份方法。 关键词:计算机 数据 备份......
分析电力自动化系统的数据处理
发布时间:2022-12-21
欢迎浏览,以下是给您推荐一篇关于分析电力自动化系统的数据处理的自动化毕业论文 对于我国的经济发展来说电力系统就是最重要的大动脉之一,目前随着经济迅速发展以及社会建设的不断完善,我国不同行业以及各地居民对于电力系统 发......
基于移动终端的混合式学习系统分析与应用
发布时间:2022-07-23
摘 要:本文在阐述了移动学习、混合式学习、公众平台、MOOC、翻转课堂等重要概念及理论基础上,重点围绕现代教学对泛在学习环境的需要,开展移动端混合式学习平台研究的各项工作。首先是在多重理论基础上探讨基于移动端的混合式学习系......
基于移动互联网技术的高校食堂特色订餐系统的研究
发布时间:2023-02-25
随着智能手机的普及和4G网络的发展,以O2O为代表的互联网+服务模式从衣食住行等方方面面改变着我们的生活方式。如今,只需动动手指就可以把外卖叫到家,外卖受到了年轻人的追捧,在时间紧、不愿意出门的情况下,可以快速地解决就餐问题。目前,外卖正在逐渐渗透到校园,大学生网上订餐消费的市场潜力巨大。现在大多数高校的食堂仍旧采用非常传统的经营模式,高校学生食堂主要采用现场选择购买,当场支付的传统形式,在食堂用.........
一种基于IFDR改进的测试激励数据压缩方法
发布时间:2016-03-30
摘要:通过改进IFDR码,提出一种基于游程相等编码的改进FDR(ERFDR)方法.首先,该方法不仅能同时对原测试集的0游程和1游程进行编码,而且,当相邻游程相等时还可以用较短的码字来代替,从而进一步提高了压缩率.其次,还提出针对该压......
基于CNKI数据的智慧旅游研究文献统计分析及述评
发布时间:2023-04-01
关键词:CNKI;智慧旅游;文献统计法;统计分析 1.引言 随着科技的发展进步,旅游产业也享有了信息化的福利,智慧旅游就是应运时代发展和人们需求而生的科技产物。2008年,美国IBM公司提出了智慧地球的战略构想,由此衍生出智慧城......
基于数据挖掘的审计数据分析
发布时间:2023-05-21
[摘要] 本文针对计算机审计的现状,提出了基于数据挖掘的审计数据分析流程,以及应用DBSCAN聚类算法查找审计证据的方法。 [关键词] 计算机审计;数据挖掘;聚类算法;噪声数据 随着经济和信息技术的不断发展,许多企业开始引......
一种基于压缩感知与混沌系统的比特级图像加密方法
发布时间:2023-05-20
摘要:近年来受到了国内外学者广泛关注的压缩感知技术,在突破Nyquist采样理论的同时,为信息安全提供了一种新的加密机制。为了避免密钥过大和消耗问题,将混沌参数作为密钥,通过控制参数映射生成观测矩阵和加密控制矩阵。利用观测矩阵对原始图像在稀疏基进行观测,再用加密控制矩阵对观测值的比特面进行置乱。解密过程为置乱算法逆运算和压缩感知的重构算法。实验仿真表明,该方法具有良好的加密抗攻击特性,且能在加密图.........
基于数据提取的压力测试系统的设计
发布时间:2023-07-10
摘要:在无线分布式冲击波测试中,实验后突发式的大量数据传输使网络的负荷急剧增大,导致网络拥堵,降低了无线传输效率。针对以上问题,采用数据提取技术降低单个测点的数据量,对测点进行选择性的无线传输,提高了整体传输效率。验证了系统数据提取的功能,应用到实弹测试中,有效获取了冲击波压力数据。关键词:数据提取;无线网络;冲击波超压;测试系统冲击波效应是武器系统和弹药等毁伤因素之一,准确测量冲击波超压可为武器.........
一种基于MC9S12XDO51单片机的洁净水处理机自动控制系统
发布时间:2022-12-16
【摘 要】本文主要介绍基于MC9S12单片机的洁净水处理机自动控制系统的组成部分、设计原理及自动控制方法。 【关键词】社区洁净水处理机净水控制系统;MC9S12XDO51主控板多路阀电机驱动板 健康是生命之本,水是生命之源。据世界卫......
基于MSK与MIMO技术的高速移动通信图像传输系统性能研究
发布时间:2022-11-18
【摘 要】MSK信号具有包络恒定、相位连续的优点, 被广泛应用于无线通信领城。在以往的高速移动系统,人们采用的调制一般是BPSK和QAM,性能上并不能满足人们的需求。为了满足人们使用高速移动通信系统传输清楚视频数据的需要,本文设......
基于光纤测温技术的数据中心监控系统探究
发布时间:2016-10-24
数据中心作为当前大数据、云计算和移动互联网各类应用的基石,近年来获得了迅猛的发展。随着数据中心建设规模越来越大,消耗的电能、空调冷量也越来越多,如何提高机房内环境的安全,并且达到节能减排的要求,已经成为一个重要的课题。......
基于SWPC构想的GSM/WLAN数据分流方法研究
发布时间:2023-02-28
【摘 要】为实现网络负荷的实时自动分流,保证用户良好的业务体验,提出了一种基于超级无线策略控制器构想的GSM/WLAN数据分流方法,并在高校场景下进行应用,详细阐述了超级无线策略控制器(SWPC)的实现原理。经过测试验证,能够实现......
基于数据挖掘的会计管理与分析研究
发布时间:2015-08-05
摘要:随着计算机技术的飞速发展,会计管理也逐步实现了计算机化,计算机进行会计管理过程中会产生大量的数据,而这些数据含有很宝贵的潜在价值,值得去进行分析。而要对这些大数据进行分析,光依赖人工是无法实现的,因此,基于数据......
基于UML的地质灾害数据采集系统建模
发布时间:2023-05-20
1 UML建模语言 UML (Unified Modeling Language)为面向对象软件设计提供统一的、标准的、可视化的建模语言。适用于描述以用例为驱动,以体系结构为中心的软件设计的全过程。 UML的定义包括UML语义和UML表示法两个部分: 总体来......
一种基于时域信号分析的TDD系统失步检测方法
发布时间:2022-10-19
【摘 要】在网络运行中会出现由于设备故障等因素导致部分基站失步问题,从而造成对同天面及邻近区域TDD网络的干扰。为了快速发现并定位失步干扰,提出了一种基于时域信号分析的失步干扰检测方法,该方法不仅可以定位运营商内部TDD系统......
基于LLE的数据降维方法研究
发布时间:2023-02-18
摘要:随着当今社会科学技术的飞速发展,数据信息日益向高维化过渡,所以,想要从它们之间提取出我们所需要的信息越来越难,也给我们带来了前所未有的挑战。因此,对把高维数据通过降维的方法投影到一个相对低维的空间,进而找到隐藏......
电力自动化系统的数据处理
发布时间:2022-12-27
对于我国的经济发展来说电力系统就是最重要的大动脉之一,目前随着经济迅速发展以及社会建设的不断完善,我国不同行业以及各地居民对于电力系统 发展提出了更高的要求。电力系统的自动化技术,其作用就是可以更好的实现对于运行状态的集中......
基于LabVIEW的数控机床热误差自动测量系统的设计研究
发布时间:2015-09-09
摘 要:介绍了一套基于LabVIEW软件平台的数控机床热误差自动测量系统,该系统可以实现机床热误差的集成测量以及热误差在线建模等功能。论述了数控机床温度与热误差的测量系统,分析了常见的热误差建模方法,详细介绍了利用多元线性回......
基于LBS下的移动广告发展研究
发布时间:2015-08-06
【摘要】科技的进步尤其是信息的发展将人们带入了一个全新的时代,它极大改变了人们的沟通交流方式,丰富了信息资讯传播的途径。在一个移动设备广泛普及的年代,移动生活已经潜移默化的影响了人们的生活方式。基于LBS技术下的移动广告......
基于HTML5的移动调查评估系统设计与实现
发布时间:2022-11-14
摘要:在干部教育培训过程中,经常需要及时对学员作课前需求调查或课后教学效果评估。传统调查评估需要借助纸质调查问卷或者电脑完成,效率低、周期长。开发设计了基于HTML5的移动调查评估系统,学员可通过手机微信完成调查或评估问卷......
基于JAVA的动态考试系统的设计与实现
发布时间:2023-07-17
摘 要:随着计算机技术的飞速发展,能否利用现代化的技术使得繁重的工作由复杂变简单,是衡量工作效率的一个重要方面。一个完备的考试系统可以使学生及时检测自己的学习效果,从而发现自己的不足之处从而查漏补缺,更好的提高自己的学......
基于突变级数法的装备制造企业信息化评价研究
发布时间:2017-01-05
摘 要:现代社会随着科学技术的不断进步而发展,信息化技术已被逐步应用到了各个制造企业中,其应用提高了企业经营管理的水平。信息化自身并不能提高企业的外在竞争力,但是其与企业的管理、战略目标一旦相互配合之后就能提高企业的现......
嵌入式数据库系统设计研究
发布时间:2022-11-19
摘 要:随着我国社会经济发展速度不断加快,计算机技术也在不断发展进步,数据库处理方式以及存储方式也在进行改变,作为计算机中重要的组成部分,对于移动数据的处理技术要求也随着有所改变,嵌入式数据库系统也随之发展。 本文通......
关于一种自充电电动车控制系统的设计
发布时间:2023-02-19
随着科学技术的快速发展,人们环保的意识不断增强,电动车在生活中的作用将越来越广。电动车的技术不断成熟,产品的质量提高,售后服务的完善,使电动自行车成为代步工具的理想选择,同时电池的重量减轻,使用寿命延长,容量增大,一次......
浅谈一种安全高效的数据交换模型研究
发布时间:2016-10-27
在数字校园的建设过程中,信息孤岛是必须要解决的问题。解决信息孤岛的主要思路有2种模式:数据大集中模式和数据交换模式。数据大集中模式需要推倒所有原有系统重新建设,实现难度非常大,现实应用较难,不符合实际情况。数据交换模式......
基于Web的在线考试系统的分析研究
发布时间:2023-01-15
摘 要:作为对传统考试方式的改革,网络化考试是近年来研究的一个热点课题。在线考试是网络化考试系统的重要组成部分。利用在线考试系统,试卷动态生成,使用计算机自动判卷,大大提高阅卷效率,采用管理员、教师、考生三级授权方式,......
一种新的数据加密技术
发布时间:2022-09-28
潘晓中 孙 军 杨晓元 王法能 (武警工程学院电子技术系 西安 710086)【摘要】该文简要介绍了数据加密的一般方法及基于公钥加密算法的方法与步骤,较为详细介绍了多步加密算法的原理与算法。【关键词】加密算法 密钥 多步加密A New Data......
基于Web Service技术的企业信息系统数据交互
发布时间:2023-02-11
【摘 要】 分析了南车戚墅堰机车有限公司目前使用的一种数据交互方式局限性,进一步介绍了Web Service技术的特点,提出了企业信息系统数据交互框架,结合企业ERP系统与机车修理系统数据交互实例,介绍信息系统数据交互实现方法。 【......
基于SpatialHadoop的空间大数据拓展研究
发布时间:2022-09-19
摘要:文章针对空间大数据的处理框架SpatialHadoop作了系统性的研究。鉴于其在空间大数据实际应用中所存在的无法实现图属关联以及大多数空间分析空间分析不支持的问题对其做了一定程度上的扩展,首先为SpatialHadoop的默认数据类型添加了唯一的标识,并以此为基础关联了空间对象的属性信息。其次还增加了SpatialHadoop对其他类型数据的解析功能,最后扩展了空间操作对属性信息的支持。扩展.........
基于“互联网+”和大数据分析技术研究社区老人智能医疗服务系统
发布时间:2017-06-14
1研究背景1.1国内外研究现状通过对国外医疗设施以及整个医疗措施的研究,得知截止目前为止,国外已经形成较为完善的智能医疗信息化系统。在智能医学器件、医疗信息管理和远程医疗三大具体应用方面有着极高的水平。他们的医疗标准就是既能方便病人,又能让他们得到更妥善的医疗保障,让他们不管在何时何地都可以在平台上直接完成预约医生,医生也可为更多病人提供治疗。和国外相比,我国智能医疗探索和时间起步较晚,但近年来发.........
审计数据转换系统的设计与研究
发布时间:2022-11-14
「 内容 摘要」 本文从 计算 机审计中审计数据转换的必要性入手,给出了审计数据转换涉及的相关操作,结合这些操作设计出审计数据转换系统,并对审计数据转换日志进行了深入探讨。 1、引言 审计数据转换是计算机审计中非常重要......
基于Web数据挖掘技术研究
发布时间:2022-11-25
摘要:基于Web的数据挖掘是采用数据挖掘技术对网页资源进行挖掘的一个热门研究方向,此文分析了了网页数据挖掘的概念、分类、挖掘原理以及相关技术。 关键词:数据挖掘;Web数据挖掘;分类;挖掘技术 Abstract: Web based data ......
基于两次人口普查数据对陕西劳动力就业态势的分析
发布时间:2019-11-18
摘要:从第五次人口普查到第六次人口普查的10年间,陕西劳动力人口和就业人口无论总量还是结构都发生了新的变化,深究其因,既与劳动力人口的相对增速有关,也与产业结构与劳动力素质结构匹配度及城市化有关。面对经济新常态,陕西就业政策的选择既要立足全局、着眼长远,又要扩张数量、提升质量。关键词:人口普查数据;陕西;劳动力;就业态势中图分类号:F2492741文献标志码:A文章编号:1002-7408(201.........
开发基于Web的地震目录数据库查询系统
发布时间:2023-05-29
开发基于Web的地震目录数据库查询系统 开发基于Web的地震目录数据库查询系统 信息技术论文 更新:2006-4-8 阅读: 开发基于Web的地震目录数据库查询系统 许云廷 熊志强 赵爱平 (江西省地震局 南昌 330039......
关于细分股份与债权的关系研究
发布时间:2023-05-01
查字典范文网为大家收集整理了细分股份与债权的关系研究,供大家参考,希望对大家有所帮助!!! 近来,因证监会(SecuritiesandFuturesCommission:中国证券监督管理委员会简称证监会,是国务院直中国证券监督管理委员会属机构,是全国证券......
一种新的数据加密技术
发布时间:2013-12-18
一种新的数据加密技术 一种新的数据加密技术 信息技术论文 更新:2006-4-8 阅读: 一种新的数据加密技术 潘晓中 孙 军 杨晓元 王法能 (武警工程学院电子技术系 西安 710086) 【摘要】该文简要......
基于STM32的μCOS―Ⅲ系统移植的设计
发布时间:2023-01-22
摘 要:随着嵌入式系统产品渐渐完善,并在全世界各行业得到广泛应用,通过移植嵌入式操作系统,计算机可以更好地管理内存,并且在很大程度上提高系统的实时性。文章主要介绍了μCOS-Ⅲ操作系统在基于ARM Contex-M3为内核的STM32处理器......
基于大数据环境下的数据安全探究
发布时间:2017-06-16
一、大数据的概念大数据是互联网技术和云计算技术迅猛发展的产物,指的是无法在规定的时间内使用当前通用的数据管理工具进行收集处理的规模巨大且形式多样化的数据信息。大数据的研究如今已成为国内外学者、政府机构、研究机构广泛关注的前沿科技。其主要来源是人们在使用互联网和各种终端设备所产生和输出的各种文字、图片或者视频、文件等种类繁多的数据信息。二、大数据环境的特点通过对大数据概念的研究我们可以看到大数据环境.........
浅析基于云计算的分布式数据挖掘系统设计与实现
发布时间:2016-12-31
随着网络大数据信息处理技术的发展,对数据处理的规模不断增大,对数据信息处理的精度要求不断提升,采用云计算进行数据分布式网格计算,能提高数据的并行处理和调度性能,根本上提高数据的计算速度,因此,云计算成为未来大数据信息处......
基于LNOPT景观优化的生态系统服务价值研究
发布时间:2022-12-20
摘要:运用LNOPT平台和GIS软件对5种生态系统服务功能进行优化分析,构建研究区的生态景观优化模型。运用生态系统服务价值当量因子方法对怀来县土地利用总体规划前、土地利用总体规划后和土地利用景观优化后的生态系统服务价值进行计算......
基于现场总线的电气自动化设备管理系统
发布时间:2023-01-08
摘要:现场总线(FCS)用于控制设备和上层自动化控制设备之间双向串行链路的连接,因其具有现场信息丰富、数字传输准确以及结构布线简单等优点,广泛地应用于工业生产自动化控制中。本文就现场总线控制系统(FCS)中Profibus-DP总线工......
基于数据包络分析的县级政府网站效率评价
发布时间:2022-10-29
〔关键词〕数据包络分析;政府网站;效率评价;县级政府;国家治理 〔中图分类号〕D63-39〔文献标识码〕A〔文章编号〕2095-8048-(2015)03-0083-04 一、引言 县级政府一直是我国最基层的行政层级,是国家治理的基础单位,县级政府直......
浅谈基于数据中心下的数据共享服务体系
发布时间:2016-10-19
进人21世纪以来,随着计算机网络技术的不断提高,以网络为核心的信息技术在不断的改变着人类的生活方式与生产方式。目前,基于数据中心而构建组成的数据共享服务体系已经在我国军事工程建设上得到良好的运用,各部队在行军作战上已经越......
一种基于云计算数据挖掘平台架构的设计与实现
发布时间:2022-12-26
【 摘 要 】 随着网络技术的飞速发展,不仅给人们生产和生活提供更多有价值的信息,而且又能提升人类从大量数据中发现有价值信息的能力。现阶段,数据挖掘技术已广泛应用在各行各业当中,并且已取得了较好成果。本文主要针对基于云计......
分析数据库系统的安全管理
发布时间:2023-06-26
分析数据库系统的安全管理 分析数据库系统的安全管理 分析数据库系统的安全管理 精品源自英 语 科 摘 要:摘要:本文主要探讨数据库安全管理的访问控制模型,通过分析改造数据库实现数据库安全,并对数据库中间件(DBSAPI)进行......
基于DSP的数字式电动舵机伺服系统
发布时间:2022-12-19
【摘要】本文主要阐述基于DSP的电动舵机伺服系统的设计与实现,简述了舵机控制器硬件和软件设计,并通过数学模型仿真,对电动舵机伺服系统的性能进行了优化。 【关键词】DSP 电动舵机 伺服 一、基于DSP的数字式控制方法 (一)......
基于大数据的高校学生综合评测系统设计
发布时间:2022-10-27
引言 随着互联网技术和物联网技术的全面发展、石计算时代的到来,以及手机、平板电脑、PC及移动触摸设备的更新,使得巨大非传统的有意义的数据急剧增长,由此产生的一个大规模生产、分享和应用数据的时代大数据时代应用而生。 大数据......
基于数据的可视化资产管理系统的相关设计
发布时间:2017-06-16
随着计算机技术、网络技术、信息技术的飞速发展,人们对互联网环境下数据的呈现提出了更高的要求,传统的以表格为主的呈现方式已难以满足人们多样化的需求。为了适应网络大数据时代背景下信息的充分挖掘再利用,数据可视化的研究逐渐得到越来越多的重视。国外数据可视化技术的研究起步较早,目前已经在军事、电力、金融、商业、交通、通信、物流等领域内得到了广泛的应用。近几年,我国的数据可视化技术研究与应用取得了很大的进步.........
家庭安防系统数据通信问题的研究
发布时间:2015-09-11
【摘 要】当今社会,家庭的安全防盗成为了重大的问题,为了维护家庭的生命财产安全,及时发现危险情况,安装一套家庭安防系统是很有必要的,家庭安防系统的重点在于安防数据的通信,以便实时预警。本文阐述了安防系统的整个数据通信过......
基于PMML的电子商务数据挖掘研究
发布时间:2023-05-04
〔摘要〕随着互联网技术的发展,电子商务进入了海量数据时代,从这些海量数据里挖掘出有用的模式具有非常高的商业价值。常规的数据挖掘模型会依赖于特定的数据挖掘平台,而目前的数据挖掘平台并不能做到随时随地跨平台交换数据挖掘模型。文章提出基于PMML的电子商务数据挖掘方法,只要数据挖掘平台兼容了PMML规范就可以真正做到跨台平交换数据挖掘模型。文章重点研究了PMML语言是如何表示完整数据挖掘模型,并就某电商.........
一种用于无线通信的数字语音识别系统设计
发布时间:2019-12-09
摘要:数字语音录制过程中存在的环境、用户口音和非目标词汇等干扰,使以往开发出的无线通信数字语音识别系统准确性较低、可移植性较差。因此,对无线通信的数字语音识别系统进行优化设计,设计系统的核心元件为C6727DSP芯片、QGDH710语音识别芯片和CC2520射频收发器。C6727DSP芯片进行数字语音的前期处理工作;QGDH710语音识别芯片对处理后的数字语音进行识别,并将其识别出的指令反馈到CC.........
基于信任的移动支付采纳因素研究
发布时间:2013-12-18
摘要:本文在TAM 模型的基础上,加入了感知的可试用性、感知成本、感知的信任及其影响因素,将TAM 模型改进成为对于分析移动支付更加适用的模型,创新性的提出了移动支付用户接受模型。通过设计问卷、发放问卷来回收了用户对于移动支付......
基于反思教学的九年级数学课堂师生互动研究
发布时间:2022-10-11
摘 要:基于反思教学的九年级数学课堂师生互动,对教师和学生的成长都有极为重要的作用。主要对基于反思教学的九年级数学课堂师生互动进行了简述,指出基于反思教学的九年级数学课堂师生互动的作用,并总结了基于反思教学的九年级数学......
一种基于FA/D独立电调天线的新型天馈系统
发布时间:2015-08-05
摘要:随着4G网络建设的大力推进,天线对整个4G网络的影响越来越大。如何最有效结合原有天线部署来建设LTE天线的选择是极为重要的。同时保障最佳网络性能,进而保证用户体验,也是是广大TD-LTE运营商日益关注的问题。 关键词:电调......
基于数据分析的高校学生学业预警机制研究
发布时间:2023-03-05
摘要:随着高校大规模扩招,在校的学生人数不断增多,随之而来的学业问题也日益增加,试读、降级、退学学生人数也有明显攀升,建立合理有效的学业预警机制是预防和解决学业问题的有效途径。对某高校制药工程专业大二学生的学业预警数......
基于Ionic的混合移动应用的研究与实现
发布时间:2023-03-29
摘要:Ionic框架是一种开源软件开发工具包(SDK),用于开发具有HTML5,CSS和JavaScript的混合移动应用。开发者可使用HTML5、CSS、TypeScript来创建可在Android,iOS和WindowsPhone上有效部署的移动应用程序。文章讨论了这三种开发模式的优缺点,阐述了如何基于Ionic开发混合移动应用,并通过开发实例――移动微课App,证明了方案的有效性。关键词:I.........
跳出大赛看大数据生态系统构建
发布时间:2023-03-09
“我觉得你这个项目是可以做的。我可以帮你去推进,甚至带你去华大基因( 去交流)。” 贵州经信委常务副主任马宁宇在2月12日举办的“云上贵州”大数据商业模式大赛北京赛区复赛上,这样对HI基因项目的代表、来自上海博恩惠尔生物科技......
基于Android平台的移动应用的研究与开发
发布时间:2023-05-15
【摘 要】本文首先分析了Android平台的系统架构和组件模型,解析了Android平台中的重要API和应用构成,探讨了Intent和生命周期的机制。在此基础上,基于Android平台设计和开发了个人随身通讯录软件,系统界面友好、操作便捷,具有良好......
一种基于构件的可信软件系统框架及其表示
发布时间:2022-11-07
摘 要:随着软件在信息社会中发挥越来越重要的作用,人们对软件系统的可信性方面的要求也愈来愈高。对可信软件和软件构件进行定义和分析的基础上,提出了一种基于构件的可信软件系统框架;一个基于构件的可信软件系统框架包括软件系统......
基于部分连接神经网络的序列数据分类算法研究
发布时间:2023-04-27
摘 要: 研究梳理了序列数据的定义,并且分析了5种类型的序列数据,结合局部连接神经网络的特点,研究了基于局部连接神经网络的序列数据的分类算法。使用该算法进行计算,学习与收敛速度较快,对于自适应建模与控制十分适用,利用方形......
轨道交通工程项目设备系统进度动态管理研究论文
发布时间:2023-03-22
我国于2005年出台的《关于优先发展城市公共交通的意见》中明确指出要大力发展公共汽(电)车,有序发展城市轨道交通。和公共汽车等普通公共交通运输工具相比,轨道交通具有速度快、运量大、环保、节能等优点,被誉为绿色交通,轨道交通工程的建设对我国社会经济的可持续发展来说非常重要,但是,轨道交通的投资成本很高,据统计,在十五期间我国在地铁建设上的投资总额已经高达2000亿元,所以,做好轨道交通工程建设项目的.........
基于对象数据模型的信息管理系统结构设计技术探究
发布时间:2023-01-18
一、基于对象数据模型的建立 面向对象的数据库模型时比较常见的信息系统方法之一,这种方法与人联系紧密,主要通过对人的思维习惯进行模拟,使软件开发的过程和方法最大限度的与人们解决现实问题,认识所处世界的过程和方法接近,用......
简析一种分层次的数据溯源安全模型
发布时间:2022-08-09
数据溯源是一个新兴的研究领域,诞生于20 世纪90 年代,由Data Provenance翻译而来。起初,部分文献将其称为数据标志或数据档案,在后期的发展过程中,逐渐演变为数据溯源,表示追踪数据的起源和重现数据的历史状态。通过对大量相关文......
探讨数据分析在移动电子商务中的应用
发布时间:2023-05-13
一、移动电子商务的定义移动电子商务(M-Commerce)是由电子商务(E-Commerce)衍生出的新生概念。随着互联网的不断发展,移动电子商务正在全世界范围内的普及和发展。移动电子商务本质上是电子商务技术的一种创新,基于移动无线网络,依托手机等个人移动通信设备,使用户能够减少时间和空间的限制并进行活动,是电子商务的一种新形式,并改变了电子商务的传统格局。据艾瑞咨询最新统计数据显示,2016年移.........
基于PDM系统的物料分类探究
发布时间:2016-09-14
现零部件分类模块是许多PDM平台的重要组成部分,对于制造类企业而言也是一种有效管理零部件的手段。作者把企业按时间段大致分为成立阶段及发展壮大两个阶段,每个阶段对于制造业企业而言,其侧重点是有所不同的。例如在成立阶段,企业......
一种基于RSS的WIFI室内定位的研究方法
发布时间:2023-03-14
【摘要】在无线网络几乎无处不在的今天,人们能够通过无线定位技术来定位自己所处的区域,或者是定位目标地所在的位置,无线定位技术极大的满足了人们对定位服务的需求[4]。目前的室内定位系统中,绝大多数都是基于接收信号强度(ReceivedSignalStrength,RSS)的指纹识别算法。该算法是一种基于指纹数据库的匹配定位算法,通过建立定位区域信号强度的指纹数据库,再与实时采集的信号强度进行匹配来达.........
基于云动态资源扩展的选课系统优化实践
发布时间:2023-07-23
摘要:针对高校选课系统并发访问量巨大、业务逻辑复杂的特点,总结近10年的选课工作经验,优化选课工作过程安排,通过搭建H3CCAS云管理平台,实现面向应用的云动态资源扩展,有效解决了高校选课期间大量并发访问导致选课系统崩溃等问题,确保了高校选课系统的高效、可靠运行。关键词:选课系统;云管理平台;云动态资源扩展DOIDOI:10.11907/rjdk.161634中图分类号:TP319文献标识码:A文.........
基于天地图的校园导航系统移动端的设计与开发
发布时间:2016-10-25
1 引言 天地图是国家测绘地理信息局建设的地理信息综合服务网站。它是数字中国的重要组成部分,是国家地理信息公共服务平台的公众版。通过天地图用户可以进行地理位置的信息查询、浏览、搜索、路线规划等操作,用户也可以通过服务接口......
浅谈基于STM32 的μCOS-Ⅲ系统移植的设计
发布时间:2023-01-03
引言 随着人类社会经济的不断发展,科研领域不断的拓宽,嵌入式系统产品渐渐完善,并在全世界各行业得到广泛应用。通过移植嵌入式操作系统,计算机可以更好的管理内存,并且在很大程度上实现了系统的实时性。COS-Ⅲ作为一个微型实时操......
基于物联网技术的能耗动态监管系统设计
发布时间:2023-06-18
摘要:为实现能耗监管的现代化,采用计算机网络技术、通信技术、计量控制技术等信息化技术,研究和设计基于物联网技术的能耗动态监管系统,实现对所辖地区重点用能单位能源利用状况进行实时、准确的动态监管,以现代技术手段加强节能......