配置文件

配置属性

说明

core-site.xml

io.file.buffer.size

使用缓冲区的排序文件的大小

io.compression.codecs

数据压缩编码

hdfs-site.xml

dfs.block.size

文件数据块的大小

dfs.namenode.handler.count namenode

远程调用的线程数

dfs.heartbeat.interval

每秒心跳次数

mapred-default.xml

mapred.reduce.tasks

每项工作的reduce个数

mapred.compress.map.output

map输出数据是否压缩

io.sort.factor

文件排序时合并的流数

io.sort.mb

文件排序时缓冲区的大小