大数据与实验报告.docxVIP

课 程 实 验 报 告 专 业 年 级 14级软件工程 课 程 名 称 大数据技术原理与应用 指 导 教 师 李均涛 学 生 姓 名 吴勇 学 号 20142205042026 实 验 日 期 2017.05.04 实 验 地 点 笃行楼B栋301 实 验 成 绩 教务处制 2017年03月09日 实验项目 名称 Liunx基本操作 实验 目的及要求 了解Liunx操作系统发展历史。 学习Liunx操作系统基本概念及操作。 学习Liunx操作系统用户及文件权限管理。 Linux 目录结构及文件基本操作。 实验 内容 1.实验楼环境介绍，常用 Shell 命令及快捷键，Linux 使用小技巧。 2.Linux 中创建、删除用户，及用户组等操作。Linux 中的文件权限设置。 3.Linux 的文件组织目录结构，相对路径和绝对路径，对文件的移动、复制、重命名、编辑等操作。 实验步骤 Liunx输入输出命令。 使用touch命令创建文件夹，后缀都为txt。 学会在命令行中获取帮助。 输出图形字符。 查看用户。 创建新用户。 删除用户。 查看文件权限。 用ls –A/Al/dl/AsSh查看文件。 变更文件所有者。 修改文件权限。 目录路径。 新建空白文件。 文件的复制、删除、移动、重命名。 实验环境 Liunx 操作系统 实验结果与 分析 通过学习Liunx操作系统的发展历史、基本操作、用户及文件权限管理以及Linux 目录结构及文件基本操作。是得我大致了解Liunx操作系统的使用，并且能够完成相应的练习。 教师评语 注：可根据实际情况加页 课 程 实 验 报 告 专 业 年 级 14级软件工程 课 程 名 称 大数据技术原理与应用 指 导 教 师 李均涛 学 生 姓 名 吴勇 学 号 20142205042026 实 验 日 期 2017.05.04 实 验 地 点 笃行楼B栋301 实 验 成 绩 教务处制 2017年03月09日 实验项目 名称 Hadoop的基本操作 实验 目的及要求 Hadoop单机模式安装. Hadoop伪分布模式配置部署. Hadoop介绍及1.X伪分布式安装. adoop2.X 64位编译. Hadoop2.X 64位环境搭建. 实验 内容 hadoop三种安装模式介绍,hadoop单机模式安装,测试安装 hadoop配置文件介绍及修改,hdfs格式化,启动hadoop进程，验证安装. Hadoop1.X伪分布安装, Hadoop介绍,Hadoop变量配置. Hadoop2.X 64位编译, 编译Hadoop2.X 64位, 编译Hadoop. 搭建环境, 部署Hadooop2.X, 启动Hadoop. 实验步骤 用户及用户组, 添加用户及用户组, 添加sudo权限. 安装及配置依赖的软件包, 安装openssh-server、java、rsync等, 配置ssh免密码登录. 下载并安装Hadoop, 下载Hadoop 2.6.0, 解压并安装, 配置Hadoop. 测试验证. 相关配置文件修改:修改core-site.xml: 格式化HDFS文件系统. Hadoop集群启动. 测试验证. 设置Host映射文件. 下载并解压hadoop安装包 在Hadoop-1.1.2目录下创建子目录. 启动hadoop. 13. 编译Hadoop2.X 64位. 14.使用yum安装sun. 15. 部署Hadooop2.X.与Hadoop1.X类似。 实验环境 hadoop Xfce终端 实验结果与 分析 通过本次实验，让我对Hadoop有所了解，但是在实验过程中出现许多问题。例如，不知道该如何下载java jdk，甚至如何创建文件夹目录下的文件，以及Hadoop的环境配置原理以及编译原理和方法。这些都是实验中出现的问题，但是通过自己查询，问同学，部分问题已经得到解决，但是还存在一部分就只能通过课后自学进行解决！！！通过上述的学习，让我对Hadoop的基本操作有了基础的掌握，包括Hadoop介绍及1.X伪分布式安装，adoop2.X 64位编译，Hadoop2.X 64位环境搭建等。 教师评语 注：可根据实际情况加页 课 程 实 验 报 告 专 业 年 级