大规模冷数据处理和管理设计与实现开题报告
2020-04-13 13:42:18
1. 研究目的与意义(文献综述)
1.1 研究目的
其一,使用光盘库文件系统对整个光盘库系统进行管理,对于有不同保存要求的大规模冷数据进行长效存储。这些需要长期保存的数据一般具有两个特点:首先一旦被写入保存之后,就几乎不会修改,也被称为“写一次只读”(worm)数据;其次,考虑到超过10年以上的保存周期,这些数据也称之为冷数据,也就是在数据产生的一段时间之后,这些数据可能很长时间才能被再次读取。
2. 研究的基本内容与方案
2.1 基本内容
主要是使用光盘库文件系统对整个光盘库系统进行管理,对用户需要长期保存的大数据进行自动分盘、刻录、管理、组织和检索,用户使用客户端服务器(通过samba网络接口)或者使用外部移动设备如u盘(通过usb接口)向系统输入源数据集到硬盘缓存区中,系统则根据规则文件和分盘策略进行分盘,并将这些数据按规则刻录到光盘上去,系统中的各个模块互相交互配合对这些数据进行组织管理,并提供检索功能。
3. 研究计划与安排
(1)2018/1/14—2018/3/5:确定选题,查阅文献,外文翻译和撰写开题报告;
(2)2018/3/6—2018/4/30:系统架构、程序设计与开发、系统测试与完善;
(3)2018/5/1—2018/5/25:撰写及修改毕业论文;
4. 参考文献(12篇以上)
[1] 曹强, 黄建忠, 万继光,谢长生. 海量网络存储系统原理和设计(第一版). 华中科技大学出版社. 2010.4
[2] 一种超大容量自动光盘库的设计与实现[j]. 曹强,严文瑞,姚杰,谢长生. 红外与激光工程.2016(09)
[3] 一种面向大容量光盘库的新型文件系统[j]. 严文瑞,曹强,姚杰,谢长生. 计算机研究与发展.2015(s2)