【Hadoop】mapred.map.tasks?mapreduce.job.maps?似たパラメータで悩んだときに見るページ


hiveのパラメータチューニングしてて様々なパラメータがある上になんか似たパラメータがあってどっちを設定すればいいかわからん!!
というなることが度々あります。

似たパラメータというのはだいたいhadoopのバージョンが上がることでパラメータの名前が変わっただけというのが多いです

ここのドキュメントを見れば新旧のパラメータ名が書かれているのでどっちを設定すべきか。っていうのがわかるかと。

古いパラメータを指定すると自動的に新しいパラメータ名で設定されるようなのであまり気にしなくてもいいかもですが、ある日(バージョン)を堺にその古いパラメータ名はいっさいサポートしないってなることもあるのでなるべくそのバージョンに合ったパラメータ名で設定するようにしたいです。

そんな感じです。