【实验2】在Hadoop平台上部署WordCount程序
在Hadoop平台上部署WordCount程序5. 分布式文件系统HDFS上的操作5.1 利用Shell命令与HDFS进行交互5.2 利用Web界面管理HDFS6. 分布式文件系统HDFS上的编程实践6.1 安装Eclipse6.2 创建Eclipse工程6.3 编写一个Java应用程序检测HDFS中是否存在一个文件7. Eclipse上的HDFS操作7.1 安装Hadoop-Eclipse-Plugin7.2 配置Hadoop-Eclipse-Plugin7.3在 Eclipse 中
实验内容
一、实验环境:
电脑:windows10

软件:vmware workstation 16 。
二、实验内容与步骤(过程及数据记录):
5. 分布式文件系统hdfs上的操作
5.1 利用shell命令与hdfs进行交互


(1)目录操作
在hdfs中为hfut用户创建一个用户目录,命令如下:
[hfut@master ~]$ hadoop fs -mkdir -p /user/hfut
该命令中表示在hdfs中创建一个“/user/hfut”目录,“-mkdir”是创建目录的操作,“-p”表示如果是多级目录,则父目录和子目录一起创建,这里“/user/hfut”就是一个多级目录,因此必须使用参数“-p”,否则会出错。
可以使用如下命令显示hdfs中/user目录下的内容:<
相关文章:
-
HDFS详细的读写流程,edit和fsimage文件的更新,WAL技术…
-
大数据是指无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据集合。灵活的可扩展性灵活的数据模型与云计算紧密融合现在已经有很多公司使用了NoSQL数据库:GoogleF…
-
一、配置hadoop格式化二、查看 Java 进程三、查看 HDFS 的报告…
-
AMQP:Advanced Message Queueing Protocol,是用于在应用程序或之间传递业务消息的开放标准,该协议与语言平台无关,更符合微服务中独立性的要求。Sp…
-
RabbitMQ可以实现可靠的异步通信,解耦系统中的组件,以及处理高并发和大规模的消息流。它在许多领域,如微服务架构、日志处理、任务调度等方面都有广泛的应用RabbitMQ作为消息…
-
详解HDFS和HBASE的指令操作以及JAVA API。…
版权声明:本文内容由互联网用户贡献,该文观点仅代表作者本人。本站仅提供信息存储服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 2386932994@qq.com 举报,一经查实将立刻删除。
发表评论