Hadoop map和reduce的个数设置，困扰了很多学习Hadoop的成员，为什么设置了配置参数就是不生效那？Hadoop Map和Reduce个数，到底跟什么有关系。首先他的参数很多，而且可能随着版本不同一些配置参数，会发生一些变化，但是只要我们搞懂核心问题，那么其它在变，我们都能确定map的个数和reduce的个数。

那么这时候，你是否明白，map的个数跟什么有关系了？ 也就是说我们设置的map个数，如何我们不懂上面的原理，肯定是不会生效的。这就是我们为什么要优化的集群的原因了。 2.reduce个数的决定因素是分区函数 reduce我们知道有一个参数setNumReduceTasks(int num)，为什么设置之后不生效那？ 对于分区函数？肯定是没有理解的。分区函数，在这里我们叫它分类函数，更贴近我们的生活。 这里举我们生活中的例子： 我们生活中，除了男就是女，所以分区函数如下  这里应该是有两个reduce的，可是我们设置为setNumReduceTasks为3，这是不可能有3个reduce，即使说是我们Hadoop产生了3个reduce，那么也是有一个reduce是不干活的。所以你设置了3个，可能只看到2个reduce在跑。 比如我们中国有23个省，那么就有23个reduce，你硬设置是24个reduce。这显然是不合理的。 当然还有另外一种特殊的情况下会生效，那就是设置reduce的个数为1，我们会看到只有1个reduce运行。 3.总结 从上面我们就可以明白map和reduce我们为什么设置参数为什么没有生效，以及我们该如何设置合适的参数。有问题欢迎交流。