跨机房的hadoop集群
这是来自于阿里技术嘉年华的一个分享,因为在百度也考虑过类似的事情,所以听得比较有感悟,这里把相关内容整理一下。 首先需要说明一点,fgsj1123跨机房hadoop可能应用场景并不是很多,国内像BAT这种巨头也许需要,但是大部分的中小公司也许并不需要这个,也许这是个屠龙之技,呵呵。 把这个问题分三段来讲,第一段是问题出现的背景,第二段是解决该问题的难点,第三段是最终的解决方案。 (一) 背景: 先要看下为什么需要做一个跨机房的大集群? 大集群的优点在于数据管理和授权容易(这个问题在一个多部门的