Hadoop中的数据倾斜是什么意思

数据倾斜是指特定的key值的数据量远远大于其他key值的数据量，这样会导致MapReduce作业的性能下降。

造成数据倾斜的原因是很多，比如数据分布不均匀，有些key值的数据量特别大，或者是某些操作会导致数据倾斜，比如join、group by、sort等。

解决数据倾斜的方法也有很多，比如采用combiner来减少数据倾斜，或者采用分区来将数据倾斜的key值分散到不同的分区中，或者采用随机数来打散数据倾斜的key值。