大数据-Hadoop 本地运行模式

拼搏现实的明天。 2021-10-23 10:29 353阅读 0赞

**Grep案例**

1. 创建在hadoop-2.7.2文件下面创建一个input文件夹

\[atguigu@hadoop101 hadoop-2.7.2\]$ mkdir input

2. 将Hadoop的xml配置文件复制到input

\[atguigu@hadoop101 hadoop-2.7.2\]$ cp etc/hadoop/\*.xml input

![1691985-20190719161011758-1814292368.png][]

3. 执行share目录下的MapReduce程序（执行）

\[atguigu@hadoop101 hadoop-2.7.2\]$ bin/hadoop jar

share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar grep input output 'dfs\[a-z.\]+'（要正常的运行，必须要保证output删除，没有才能运行）

![1691985-20190719161508029-1498206028.png][]

4. 查看输出结果

\[atguigu@hadoop101 hadoop-2.7.2\]$ cat output/\*

![1691985-20190719161544288-443737361.png][]

### **WordCount案例** ###

1. 创建在hadoop-2.7.2文件下面创建一个wcinput文件夹

\[atguigu@hadoop101 hadoop-2.7.2\]$ mkdir wcinput

2. 在wcinput文件下创建一个wc.input文件

\[atguigu@hadoop101 hadoop-2.7.2\]$ cd wcinput

\[atguigu@hadoop101 wcinput\]$ touch wc.input

3. 编辑wc.input文件

\[atguigu@hadoop101 wcinput\]$ vi wc.input

![1691985-20190719162333748-1602830536.png][]

保存退出：：wq

4. 回到Hadoop目录/opt/module/hadoop-2.7.2

5. 执行程序

\[atguigu@hadoop101 hadoop-2.7.2\]$ hadoop jar

share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar wordcount wcinput wcoutput

![1691985-20190719162519524-1553391124.png][]

6. 查看结果

\[atguigu@hadoop101 hadoop-2.7.2\]$ cat wcoutput/part-r-00000

![1691985-20190719162557934-132466157.png][]

转载于:https://www.cnblogs.com/nidegui/p/11214055.html

[1691985-20190719161011758-1814292368.png]: /images/20211023/200387b9cf334b70b3fc376f26b6d5c4.png
[1691985-20190719161508029-1498206028.png]: /images/20211023/fdb89a3c924b4297915ba4ad797f5672.png
[1691985-20190719161544288-443737361.png]: /images/20211023/625911c9706e487093d1990114af98ef.png
[1691985-20190719162333748-1602830536.png]: /images/20211023/1bc9429a7f084045b01d434e9dbfba23.png
[1691985-20190719162519524-1553391124.png]: /images/20211023/f777b8ace466440d8a01cc1ee330ea16.png
[1691985-20190719162557934-132466157.png]: /images/20211023/bff431e849d44754ba6517f2dfa7f400.png