百度杨栋:HCE助MapReduce提升资源利用率
发布时间:2011-11-29 15:21 点击数:

内容简介:2011年11月26日,由CSDN独家承办的大数据技术大会在北京中旅大厦召开。本次大会汇集Hadoop、NoSQL、数据分析与挖掘、数据仓库、商业智能以及开源云计算架构等诸多热点话题。包括百度、淘宝、新浪等业界知名专家与参会者齐聚一堂,共同探讨大数据浪潮下的行业应对法则以及大数据时代的抉择。百度分布式高级研发工程师杨栋参与此次盛会并做“HCE助MapReduce提升资源利用率”的主题演讲。他介绍了MapReduce的框架,基于C++能够提升资源利用率的一个框架。简称HCE。这是一个开源软件,HCE目标有两个方面,第一,需要提升整个集群使用效率;第二,附加价值给开发者一个更好的开发接口。