当前位置 : 主页 > 网络编程 > 其它编程 >

大数据实践练习系列【2、数据保存到HDFS】

来源:互联网 收集:自由互联 发布时间:2023-07-02
场景描述:数据生成后,需要备份到hdfs中,当前数据生成在根目录下:组件环境CDHQQ交流群628465680,新群没几个人,人多了再加微信1、操作步骤在hdfs中创建test目录 场景描述: 数据生成
场景描述:数据生成后,需要备份到hdfs中,当前数据生成在根目录下:组件环境CDHQQ交流群628465680,新群没几个人,人多了再加微信1、操作步骤在hdfs中创建test目录

场景描述:

数据生成后,需要备份到hdfs中,当前数据生成在根目录下:

组件环境 CDH

QQ交流群628465680,新群没几个人,人多了再加微信大数据实践练习系列【2、数据保存到HDFS】

1、操作步骤

在hdfs中创建test目录,下面创建dept,emp目录

hadoop fs -mkdir /test

hadoop fs -mkdir /test/emp

hadoop fs -mkdir /test/emp

大数据实践练习系列【2、数据保存到HDFS】

上传文件至这个两个文件夹

hadoop fs -put dept.csv /test/dept/

hadoop fs -put dept.csv /test/dept/

可以在web端进行查看

大数据实践练习系列【2、数据保存到HDFS】

为了后面好操作,我们给test 目录开通所有权限,当然也可以不用这步,因为对原数据来说我们不能对其进行任何操作。

sudo -u hdfs hadoop fs -chmod 777 /test

参考连接:https://blog.csdn.net/weixin_38201936/article/details/85319036

命令大全:https://blog.csdn.net/baidu_30851231/article/details/81664420

上一篇:Android控件之TextView支持html
下一篇:没有了
网友评论