雅虎韩轶平:持续增量大数据处理平台
雅虎北京全球研发中心高级技术经理韩轶平先生结合雅虎实际的Hadoop实践经验,与大家分享了关于持续增量的海量数据处理技术的心得。 以下为文字实录: 增量的数据处理模式 我之前的同事,他最后建议我还是用中文来演讲,我还是用中文发言了。现在开始争取用中文讲,今天我演讲的题目叫做“持续增量大数据处理平台”,我们在2009年到2010年在雅虎做的一个平台。首先我们来看什么是持续性的数据源?持续性数据源可以这么定义,随着时间的推移,时间的变化,会有不停的发生更新或增量或改变的数据来源,这