★各行业数据归档方案★
数据归档平台
来源：市场部 作者：市场部
数据归档系统是对数据进行存储、归档、索引建立、恢复的软件产品。产品通过信息提取技术和大数据处理技术实现对重要数据和历史数据的组织管理、资源共享、多级异质归档保存等功能，为用户提供可靠、高效的数据备份归档应用。
产品组成
（1）数据获取模块
数据归档系统支持的数据类型包括非结构化数据和结构化数据，其中结构化数据除了支持常用的数据库：Oracle、MySQL、Microsoft SQL Server 还支持国产达梦、神通、人大金仓等数据库。
（2）数据管理模块数据管理包括文档内容管理、图片、视频数据的管理。
1）文档内容管理：数据管理里面其中一个重要的部分是文档内容的管理，系统是采用基于分词索引的全文检索技术来实现的。用户输入内容关键词后，通过数据库管理模块将关键字与全文
2）图片管理：系统提供图片格式内容管理，采用 OCR 识别技术，通过图像处理模块，来提取图片中的文本信息，提供图片内容的全文检索，并且在用户查询时，支持图片格式文件的微缩预览。
3）视频管理：系统采用关键帧提取技术，将归档的视频提取多个关键帧信息，供用户快速预览。
（3）数据存储模块
系统支持磁光混合存储模式，分别是磁盘在线存储模式，光盘库近线存储模式。用户可以根据实际归档数据量的大小，可以灵活选择存储方案。
1）磁盘存储：常用数据存储于归档服务器中。
2）蓝光光盘库：归档服务器将采集的数据归档至蓝光光盘库中，避免磁介质易损性，并能够长期永久保存（50 年以上），单个蓝光光盘库存储量可以达至 PB 级，系统依据设定的归档策略完全自动化运行，无需人工干预。
（4）系统监控模块
1）系统监控包括：计划执行、权限控制、状态检测。系统可对归档全过程进行监控。
2）计划执行：系统执行数据归档和数据还原任务的过程，在系统监控过程中，如某一项任务失败，系统会自动重试 3 次，若 3 次后还不成功，系统将自动预警至管理员。
3）权限控制：系统管理员可将文档权限分配至不同用户使用，进行权限控制。
产品功能
1．文件归档管理
支持图片、音视频、文档等所有格式的文件归档。文件归档管理包括：文件完整归档、增量归档、自动归档、手动归档、文件类型过滤和大文件切分功能。
（1）文件完整归档：将设置目录中的所有文件上传到服务器上，然后将数据刻录到蓝光光盘库中。每次归档时，检查当前任务所有文件，如果执行文件完整归档任务失败，则该任务自动回滚，确保数据的一致性；
（2）增量归档：归档时拷贝增加的文件，如遇文件归档失败，则在下次执行归档任务时再重新归档；
（3）定时归档：支持按单次、年、月、日、周设置归档计划、按时间间隔设置归档计划、设置单次执行归档计划，支持在指定的某事件段内不执行归档计划；
（4）手动归档：手动立即执行归档任务；
（5）文件类型过滤：支持根据文件后缀名过滤；
（6）大文件切分：单文件大于光盘大小时，文件自动切分、任务文件大于光盘大小时，文件自动切分。
2．数据库归档管理
数据库归档管理，支持数据库的完整归档和增量归档。支持常用数据库类型：Oracle、MySQL、SQLServer。支持国产数据库类型：达梦、神通、人大金仓。数据归档系统能直接对接业务系统和数据库，将生产系统中庞大的历史数据迁移到光盘库中，同时对重要数据进行备份，在保障生产系统安全运行的前提下，减轻生产系统存储的压力，最大化提升系统访问效率。
3．数据还原管理
支持 B/S 和 C/S 架构文件还原，支持客户端版本还原，支持多个文件打包还原，支持文件还原到指定目录。支持在 web 页面进行数据还原和在客户端进行数据还原，其中 Web 还原有两个入口：
（1）用户从任务管理页面中提交任务还原申请（还原整个任务），然后在还原任务管理页面查看申请状态并下载还原数据；
（2）用户从文件检索页面中搜索需要还原的文件，提交还原（支持批量还原），然后在还原任务管理页面查看申请状态并下载还原数据。
数据还原方式：
（1）数据在服务器硬盘上的直接下载，选择文件后填写保存路径直接下载到本地，不需要提交申请；
（2）数据在光盘库的在线片匣上的先提交申请，等待数据从光盘库拷贝到服务器上之后，然后在还原任务管理页面点击下载；
（3）数据在光盘库的离线片匣上的，先提交申请，需要管理员将离线片匣放到光盘库中，然后等待数据从光盘库拷贝到服务器上之后，在还原任务管理页面选择下载路径。
4．设备管理
数据归档系统可以管理蓝光光盘库设备，可以查看光驱、光盘、光盘匣等信息；具备对光盘库的管理功能，包括添加/删除光盘库、绑定光驱、初始化及扫描光盘库，支持机械手从光盘匣中抓取任意一张光盘等，支持多光驱的并发刻录和读取。
5．用户管理
归档系统根据权限把用户分为三类：
（1）归档用户，可以客户端登录和 Web 登录，在客户端创建新的归档计划，并制定归档执行的策略，在 Web 网页进行查看或下载；
（2）普通用户，只可以通过 Web 登录，对文件进行检索或下载；
（3）系统管理员，负责创建归档用户和普通用户，对系统进行管理，查看系统所有日志信息等。
6．全文检索
（1）支持关键词精确查询、模糊查询及基于关键字的高级检索功能：关键词支持文件名和文件内容的精确及模糊查询，根据关键词频度进行排序展示；
（2）支持文档在线预览功能：支持如办公文档 doc、xls、ppt、pdf 等文档的在线预览功能；
（3）支持图片检索及预览：使用支持图片属性查看、图片缩略图及全图的预览功能，图片支持按图片大小、分辨率、地理位置（经纬度）等条件进行检索，缩略图以瀑布流的方式展示；
（4）支持视频关键帧提取及微缩视频预览功能，支持视频原文件在线播放功能；
（5）根据文件访问频度自动将光存储介质的数据调整到磁介质存储，支持快速检索。
7．文件统计
数据归档系统提供根据文件热度、文件大小、归档时间等参数进行件统计功能，通过对归档和还原的数据进行深度分析挖掘自动生成图表统计信息，统计结果支持饼图和表格两种方式展示。
产品组成
（1）数据获取模块
数据归档系统支持的数据类型包括非结构化数据和结构化数据，其中结构化数据除了支持常用的数据库：Oracle、MySQL、Microsoft SQL Server 还支持国产达梦、神通、人大金仓等数据库。
（2）数据管理模块数据管理包括文档内容管理、图片、视频数据的管理。
1）文档内容管理：数据管理里面其中一个重要的部分是文档内容的管理，系统是采用基于分词索引的全文检索技术来实现的。用户输入内容关键词后，通过数据库管理模块将关键字与全文
2）图片管理：系统提供图片格式内容管理，采用 OCR 识别技术，通过图像处理模块，来提取图片中的文本信息，提供图片内容的全文检索，并且在用户查询时，支持图片格式文件的微缩预览。
3）视频管理：系统采用关键帧提取技术，将归档的视频提取多个关键帧信息，供用户快速预览。
（3）数据存储模块
系统支持磁光混合存储模式，分别是磁盘在线存储模式，光盘库近线存储模式。用户可以根据实际归档数据量的大小，可以灵活选择存储方案。
1）磁盘存储：常用数据存储于归档服务器中。
2）蓝光光盘库：归档服务器将采集的数据归档至蓝光光盘库中，避免磁介质易损性，并能够长期永久保存（50 年以上），单个蓝光光盘库存储量可以达至 PB 级，系统依据设定的归档策略完全自动化运行，无需人工干预。
（4）系统监控模块
1）系统监控包括：计划执行、权限控制、状态检测。系统可对归档全过程进行监控。
2）计划执行：系统执行数据归档和数据还原任务的过程，在系统监控过程中，如某一项任务失败，系统会自动重试 3 次，若 3 次后还不成功，系统将自动预警至管理员。
3）权限控制：系统管理员可将文档权限分配至不同用户使用，进行权限控制。
产品功能
1．文件归档管理
支持图片、音视频、文档等所有格式的文件归档。文件归档管理包括：文件完整归档、增量归档、自动归档、手动归档、文件类型过滤和大文件切分功能。
（1）文件完整归档：将设置目录中的所有文件上传到服务器上，然后将数据刻录到蓝光光盘库中。每次归档时，检查当前任务所有文件，如果执行文件完整归档任务失败，则该任务自动回滚，确保数据的一致性；
（2）增量归档：归档时拷贝增加的文件，如遇文件归档失败，则在下次执行归档任务时再重新归档；
（3）定时归档：支持按单次、年、月、日、周设置归档计划、按时间间隔设置归档计划、设置单次执行归档计划，支持在指定的某事件段内不执行归档计划；
（4）手动归档：手动立即执行归档任务；
（5）文件类型过滤：支持根据文件后缀名过滤；
（6）大文件切分：单文件大于光盘大小时，文件自动切分、任务文件大于光盘大小时，文件自动切分。
2．数据库归档管理
数据库归档管理，支持数据库的完整归档和增量归档。支持常用数据库类型：Oracle、MySQL、SQLServer。支持国产数据库类型：达梦、神通、人大金仓。数据归档系统能直接对接业务系统和数据库，将生产系统中庞大的历史数据迁移到光盘库中，同时对重要数据进行备份，在保障生产系统安全运行的前提下，减轻生产系统存储的压力，最大化提升系统访问效率。
3．数据还原管理
支持 B/S 和 C/S 架构文件还原，支持客户端版本还原，支持多个文件打包还原，支持文件还原到指定目录。支持在 web 页面进行数据还原和在客户端进行数据还原，其中 Web 还原有两个入口：
（1）用户从任务管理页面中提交任务还原申请（还原整个任务），然后在还原任务管理页面查看申请状态并下载还原数据；
（2）用户从文件检索页面中搜索需要还原的文件，提交还原（支持批量还原），然后在还原任务管理页面查看申请状态并下载还原数据。
数据还原方式：
（1）数据在服务器硬盘上的直接下载，选择文件后填写保存路径直接下载到本地，不需要提交申请；
（2）数据在光盘库的在线片匣上的先提交申请，等待数据从光盘库拷贝到服务器上之后，然后在还原任务管理页面点击下载；
（3）数据在光盘库的离线片匣上的，先提交申请，需要管理员将离线片匣放到光盘库中，然后等待数据从光盘库拷贝到服务器上之后，在还原任务管理页面选择下载路径。
4．设备管理
数据归档系统可以管理蓝光光盘库设备，可以查看光驱、光盘、光盘匣等信息；具备对光盘库的管理功能，包括添加/删除光盘库、绑定光驱、初始化及扫描光盘库，支持机械手从光盘匣中抓取任意一张光盘等，支持多光驱的并发刻录和读取。
5．用户管理
归档系统根据权限把用户分为三类：
（1）归档用户，可以客户端登录和 Web 登录，在客户端创建新的归档计划，并制定归档执行的策略，在 Web 网页进行查看或下载；
（2）普通用户，只可以通过 Web 登录，对文件进行检索或下载；
（3）系统管理员，负责创建归档用户和普通用户，对系统进行管理，查看系统所有日志信息等。
6．全文检索
（1）支持关键词精确查询、模糊查询及基于关键字的高级检索功能：关键词支持文件名和文件内容的精确及模糊查询，根据关键词频度进行排序展示；
（2）支持文档在线预览功能：支持如办公文档 doc、xls、ppt、pdf 等文档的在线预览功能；
（3）支持图片检索及预览：使用支持图片属性查看、图片缩略图及全图的预览功能，图片支持按图片大小、分辨率、地理位置（经纬度）等条件进行检索，缩略图以瀑布流的方式展示；
（4）支持视频关键帧提取及微缩视频预览功能，支持视频原文件在线播放功能；
（5）根据文件访问频度自动将光存储介质的数据调整到磁介质存储，支持快速检索。
7．文件统计
数据归档系统提供根据文件热度、文件大小、归档时间等参数进行件统计功能，通过对归档和还原的数据进行深度分析挖掘自动生成图表统计信息，统计结果支持饼图和表格两种方式展示。
|
北京创赢腾辉商贸有限公司 联系方式：13910928546 www.bjcyth.cn |
京ICP备16001081号-1｜ |