Spark 数据倾斜调优10策（二）
Spark通过 textFile(path, minPartitions) 方法读取文件时，使用 TextInputFormat。对于不可切分的文件，每个文件对应一个 Split 从而对应一个 Partition。此时各文件大小是否一致，很大程度上决定了是否存在数据源侧的数据倾斜。
Spark 数据倾斜调优10策（一）
何谓数据倾斜?数据倾斜指的是，并行处理的数据集中，某一部分(如Spark或Kafka的一个Partition)的数据显著多于其它部分，从而使得该部分的处理速度成为整个数据集处理的瓶颈。
大数据培训机构有用吗
大数据应用范围非常广泛，无处不在，它正悄无声息地改变这我们的生活。因此，越爱越多的人想要转行到大数据行业上来，正是看中了它的发展前景光明。那么转行大数据参加培训机构是个不错的选择，有人会质疑，大数据培训机构有用吗?
大数据培训机构怎么收费
互联网仍然在不停发展，对大数据工程师的岗位需求也在不断上涨。大数据发展前景光明就意味着有越来越多的人会加入到大数据开发领域，参加大数据培训班是个高效的选择，不过大数据培训机构怎么收费?我们来谈一谈大数据培训班的收费标准。
怎么选择大数据培训机构?应该注意什么
大数据正在蓬勃发展，这也催生了无数的大数据培训机构。对于真正想参加培训的人来说，这无疑让他们犯了选择困难。因为收到许多不确定性的影响，也有很多人受到了不靠谱的培训机构的欺骗。在选择大数据培训机构时，我们应该注意什么?怎么选择大数据培训机构?
