上傳文件
1.上傳
先使用命令打開HDFS的NameNode
[root@hadoop100?hadoop-3.1.3]$ sbin/start-dfs.sh
[root@hadoop100?hadoop-3.1.3]$ sbin/stop-dfs.sh
和YARN的Job
[root@hadoop101?hadoop-3.1.3]$ sbin/start-yarn.sh
[root@hadoop101?hadoop-3.1.3]$ sbin/stop-yarn.sh
在NameNode上上傳<128M文件時可直接上傳當文件>128M時會將這個大文件拆分為多個小文件上傳
隨機創建一個小文件在NameNode上上傳操作如下:
在FinalShell上用命令上傳文件就是
上傳小文件(小于128M)
[root@hadoop100?~]$ hadoop fs -mkdir /input
[root@hadoop100?~]$ hadoop fs -put $HADOOP_HOME/wcinput/word.txt /input
上傳大文件(大于128M)
[root@hadoop100?~]$ hadoop fs -put ?/opt/software/jdk-8u212-linux-x64.tar.gz ?/
上傳的文件下載下來…可直接在頁面上下載
2.在yarn上查看上傳的文件
[root@hadoop101?~]$ cd /opt/modele/hadoop-3.1.3
[root@hadoop101?~]$?hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar wordcount /wcinput /output
刷新yarn即可查看