大数据处理与分析的文件管理系统.doc

大数据处理与分析的文件管理系统

摘要

随着互联网的普及以及物联网的高速拓展，信息量的产生也在呈几何倍数增长，大数据一词无非成了当今计算机领域比较热门的话题，国内外都在积极进行着对大数据问题的研究。为了对大数据问题的学习与研究做铺垫，为了方便一些未使用过Linux系统的群体了解和接触Hadoop或是Spark，如果能够集成HDFS与JobTracker两个节点的功能又能进行文件的管理，那么将会方便这个群体的对于集群的使用。

本课题完成了一个针对大数据处理与分析的文件管理系统。主要包括用户的登陆与注册、文件系统的检索、对于HDFS上文件的增、删、改、查以及监测当前任务四个部分。该平台主要使用JA