作业配置

最近更新时间: 2019-11-13 06:16:46

以执行以mapreduce sleep作业为例

1) 在①处填写jar包的HDFS路径,路径任意 2) 在②处对所有mapreduce作业的配置进行填写,此作业配置内容见下表 3) 点击提交按钮,提交作业 mapreduce作业配置内容:

mapred.mapper.class=org.apache.Hadoop.examples.SleepJob
mapred.reducer.class=org.apache.Hadoop.examples.SleepJob
mapred.mapoutput.key.class=org.apache.Hadoop.io.IntWritable
mapred.mapoutput.value.class=org.apache.Hadoop.io.NullWritable
mapred.output.format.class=org.apache.Hadoop.mapred.lib.NullOutputFormat
mapred.input.format.class=org.apache.Hadoop.examples.SleepJob$SleepInputFormat
mapred.partitioner.class=org.apache.Hadoop.examples.SleepJob
sleep.job.map.sleep.time=5
sleep.job.reduce.sleep.time=10