Changes between Version 23 and Version 24 of jazz/Hadoop_Lab2
- Timestamp:
- Mar 24, 2009, 2:24:36 PM (15 years ago)
Legend:
- Unmodified
- Added
- Removed
- Modified
-
jazz/Hadoop_Lab2
v23 v24 24 24 25 25 === 1.3 下載HDFS的資料到本地目錄 === 26 26 27 * 下載 27 28 {{{ … … 35 36 36 37 === 1.4 刪除檔案 === 38 37 39 {{{ 38 40 /opt/hadoop$ bin/hadoop fs -ls input … … 40 42 }}} 41 43 === 1.5 直接看檔案 === 44 42 45 {{{ 43 46 /opt/hadoop$ bin/hadoop fs -ls input … … 46 49 47 50 === 1.6 更多指令操作 === 51 48 52 {{{ 49 53 hadooper@vPro:/opt/hadoop$ bin/hadoop fs … … 103 107 * grep 這個命令是擷取文件裡面特定的字元，在Hadoop example中此指令可以擷取文件中有此指定文字的字串，並作計數統計 104 108 105 109 {{{ 106 110 /opt/hadoop$ bin/hadoop jar hadoop-*-examples.jar grep input grep_output 'dfs[a-z.]+' 107 }}} 111 112 }}} 108 113 109 114 運作的畫面如下： 110 115 111 116 {{{ 112 117 113 118 09/03/24 12:33:45 INFO mapred.FileInputFormat: Total input paths to process : 9 … … 138 143 09/03/24 12:34:22 INFO mapred.JobClient: Job Counters 139 144 ...... 140 141 }}} 145 }}} 146 142 147 143 148 * 接著查看結果 144 {{{ 149 150 {{{ 145 151 /opt/hadoop$ bin/hadoop fs -ls grep_output 146 152 /opt/hadoop$ bin/hadoop fs -cat grep_output/part-00000 147 }}} 153 }}} 154 148 155 結果如下 149 {{{ 156 157 {{{ 150 158 3 dfs.class 151 159 3 dfs. … … 197 205 1 dfs.web.ugi 198 206 1 dfsmetrics.log 207 199 208 }}} 209 200 210 === 2.2 Hadoop運算命令 WordCount === 201 211
