HDFS Shell作业1

ops/2024/10/9 8:57:14/

1.在HDFS上建立/user/stu/自己学号,和/user/stu/input目录。

命令:

hdfs dfs -mkdir  -p  /user/stu/22

hdfs dfs -mkdir   /user/stu/input

2.用两种不同的方法上传albums.csv至HDFS的学号目录和input目录中。

命令:

hdfs dfs -put party.csv /user/stu/22

hdfs dfs -copyFromLocal party.csv input

3.级联列出/user/stu/下的目录和文件。

命令:

hdfs dfs -ls -R /user/stu/

4. 查看学号目录下party.csv的前五行数据。

命令:

hdfs dfs -cat /user/stu/22560140222/party.csv |head -n 5

5. 在input目录新建文件test.txt。然后使用追写文件命令,在终端输入“Hello hadop”追加到该文件中。

命令:

hadoop fs  -touchz /user/stu/input/test.txt

echo "Hello hadop" | hadoop fs -appendToFile - /user/stu/input/test.txt

6. 复制input/test.txt到学号目录下。

命令:

hadoop dfs -cp /user/stu/input/test.txt /user/stu/

7. 显示/user/stu所占的空间大小。

命令:

hadoop fs -du -s -h /user/stu

8. 测试/user/stu/下是否存在exam目录。

命令:

hadoop fs -ls /user/stu/exam

9. 下载input/test.txt到本地文件夹/home/stu/下。

命令:

hadoop fs -get /user/stu/input/test.txt /home/stu/

10. /input和input是不是同一个目录?

不是

命令:

hadoop fs -ls /input

hadoop fs -ls input


http://www.ppmy.cn/ops/123092.html

相关文章

Python OpenCV精讲系列 - 三维重建深入理解(十七)

💖💖⚡️⚡️专栏:Python OpenCV精讲⚡️⚡️💖💖 本专栏聚焦于Python结合OpenCV库进行计算机视觉开发的专业教程。通过系统化的课程设计,从基础概念入手,逐步深入到图像处理、特征检测、物体识…

国庆练习(Day24)

作业一 数组练习 选择题 1.1、若有定义语句:int a[3][6]; ,按在内存中的存放顺序,a 数组的第10个元素是 a[0][4] B) a[1][3] C)a[0][3] D)a[1][4] 解析: 从 a[0][0] 开始…

dockertop提示Failed to fetch extensions

解决办法:重装dockertop 第一步:卸载当前的dockertop 如果卸载过程中存在AlibabaProtect的相关软件关不掉,那么参考这篇文章:卸载AlibabaProtect 第二步:删除C:\Program Files路径下的Docker文件夹 第三步&#xff1…

【目标检测】工程机械车辆数据集2690张4类VOC+YOLO格式

数据集格式:Pascal VOC格式YOLO格式(不包含分割路径的txt文件,仅仅包含jpg图片以及对应的VOC格式xml文件和yolo格式txt文件) 图片数量(jpg文件个数):2694 标注数量(xml文件个数):2694 标注数量(txt文件个数):2694 标注…

【自动驾驶】控制算法(十二)横纵向综合控制 | 从理论到实战全面解析

写在前面: 🌟 欢迎光临 清流君 的博客小天地,这里是我分享技术与心得的温馨角落。📝 个人主页:清流君_CSDN博客,期待与您一同探索 移动机器人 领域的无限可能。 🔍 本文系 清流君 原创之作&…

《论文阅读》PECER:通过动态人格提取和情境情绪推理产生同理心反应 ICASSP 2024

《论文阅读》PECER:通过动态人格提取和情境情绪推理产生同理心反应 ICASSP 2024 前言简介任务定义模型架构Cognitive-Affective Personality PerceiverMulti-source EncoderInteractive Decoder损失函数实验结果可持续发展观点前言 亲身阅读感受分享,细节画图解释,再也不用…

F5携手NetApp加速并简化大语言模型AI部署

此次合作通过先进的数据管理和安全的多云网络服务增强生成式人工智能(AI)能力,实现 RAG 集成 2024年10月8日,西雅图和加利福尼亚州圣何塞 – F5(NASDAQ:FFIV)与NetApp(NASDAQ:NTAP)日前宣布进一步扩大合作关系,旨在借助F5安全多云网络解决方案及NetApp数据管理解决方案套件,加…

idea使用技巧与插件推荐

您好!使用 IntelliJ IDEA 的技巧和插件推荐可以显著提高您的编程效率和体验。以下是一些实用的技巧和推荐的插件: 技巧 快捷键使用 - 熟悉 IDEA 的快捷键可以大大提高您的工作效率。例如,Ctrl E 可以快速访问最近的文件,Ctrl …