IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> 熟悉常用的Linux操作和Hadoop操作 -> 正文阅读

[大数据]熟悉常用的Linux操作和Hadoop操作

一、实验目的

由于Hadoop运行在Linux系统上,因此需要学习实践一些常用的Linux命令。本实验旨在熟悉常用的Linux操作和Hadoop操作,为顺利开展后续其他实验奠定基础。

二、 实验平台

  • 操作系统:请说明实验所使用的操作系统版本,安装方式(如虚拟机,双系统,Windows子系统等)。
  • Hadoop:请说明实验所使用的Hadoop版本。

三、实验步骤

  1. 熟悉常用的Linux操作
  • cd命令:切换目录

    • 切换到目录"/usr/local"
    cd /usr/local
    

    请添加图片描述

    此处贴命令执行完的截图(下面的题目按相同方式完成)

    • 切换到当前目录的上一级目录
      请添加图片描述

    • 切换到当前登录Linux系统的用户的自己的主文件夹
      请添加图片描述

  • ls命令:查看文件与目录

    • 查看目录“/usr”下的所有文件和目录
      请添加图片描述
  • mkdir命令:新建目录

    • 进入“/tmp”目录,创建一个名为“a”的目录,并查看“/tmp”目录下已经存在哪些目录
      请添加图片描述

    • 进入“/tmp”目录,创建目录“a1/a2/a3/a4”
      请添加图片描述

  • rmdir命令:删除空的目录

    • 将上面创建的目录a(在“/tmp”目录下面)删除
      请添加图片描述

    • 删除上面创建的目录“a1/a2/a3/a4” (在“/tmp”目录下面),然后查看“/tmp”目录下面存在哪些目录
      请添加图片描述

  • cp命令:复制文件或目录

    • 将当前用户的主文件夹下的文件.bashrc复制到目录“/usr”下,并重命名为bashrc1
      请添加图片描述

    • 在目录“/tmp”下新建目录test,再把这个目录复制到“/usr”目录下
      请添加图片描述

  • mv命令:移动文件与目录,或更名

    • 将“/usr”目录下的文件bashrc1移动到“/usr/test”目录下
      请添加图片描述

    • 将“/usr”目录下的test目录重命名为test2
      请添加图片描述

  • rm命令:移除文件或目录

    • 将“/usr/test2”目录下的bashrc1文件删除
      请添加图片描述

    • 将“/usr”目录下的test2目录删除
      请添加图片描述

  • cat命令:查看文件内容

    • 查看当前用户主文件夹下的.bashrc文件内容
      请添加图片描述

l tac命令:反向查看文件内容
- 反向查看当前用户主文件夹下的.bashrc文件的内容
请添加图片描述

l more命令:一页一页翻动查看
- 翻页查看当前用户主文件夹下的.bashrc文件的内容
请添加图片描述

l head命令:取出前面几行
- 查看当前用户主文件夹下.bashrc文件内容前20行
请添加图片描述

  • 查看当前用户主文件夹下.bashrc文件内容,后面50行不显示,只显示前面几行
    请添加图片描述
    请添加图片描述

  • tail命令:取出后面几行

    • 查看当前用户主文件夹下.bashrc文件内容最后20行
      请添加图片描述

    • 查看当前用户主文件夹下.bashrc文件内容,并且只列出50行以后的数据
      请添加图片描述

  • touch命令:修改文件时间或创建新文件

    • 在“/tmp”目录下创建一个空文件hello,并查看文件时间
      请添加图片描述

    • 修改hello文件,将文件时间整为5天前
      请添加图片描述

l chown命令:修改文件所有者权限
- 将hello文件所有者改为root帐号,并查看属性
请添加图片描述

l find命令:文件查找
- 找出主文件夹下文件名为.bashrc的文件
请添加图片描述

l tar命令:压缩命令
- 在根目录“/”下新建文件夹test,然后在根目录“/”下打包成test.tar.gz
请添加图片描述

  • 把上面的test.tar.gz压缩包,解压缩到“/tmp”目录请添加图片描述

l grep命令:查找字符串
- 从“~/.bashrc”文件中查找字符串’examples’
请添加图片描述

l 配置环境变量
- 请在“~/.bashrc”中设置,配置Java环境变量
请添加图片描述

  • 查看JAVA_HOME变量的值
    请添加图片描述
  1. 熟悉常用的Hadoop操作
  • 使用hadoop用户登录Linux系统,启动Hadoop(Hadoop的安装目录为“/usr/local/hadoop”),为hadoop用户在HDFS中创建用户目录“/user/hadoop”
./bin/hdfs dfs -mkdir -p /user/root

请添加图片描述

  • 接着在HDFS的目录“/user/hadoop”下,创建test文件夹,并查看文件列表
./bin/hdfs dfs -mkdir test

请添加图片描述

  • 将Linux系统本地的“~/.bashrc”文件上传到HDFS的test文件夹中,并查看test
    请添加图片描述

  • 将HDFS文件夹test复制到Linux系统本地文件系统的“/usr/local/hadoop”目录下请添加图片描述

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2021-09-23 11:32:08  更:2021-09-23 11:34:07 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/23 23:37:14-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码