Tez:运行在YARN上的DAG计算框架


本博客微信公共账号:hadoop123(微信号为:hadoop-123),分享hadoop技术内幕,hadoop最新技术进展,发布hadoop相关职位和求职信息,hadoop技术交流聚会、讲座以及会议等。二维码如下:


【导读】Tez(Hortonworks介绍:这里源代码下载:这里)是从MapReduce计算框架演化而来的通用DAG计算框架,可作为MapReduce/Hive/Pig等系统的底层数据处理引擎,它天生融入Hadoop 2.0中的资源管理平台YARN,且由Hadoop 2.0核心人员精心打造,势必将会成为计算框架中的后起之秀。

关于Tez,可先读我过去的两篇文章予以初步了解:Tez——一个运行在YARN上支持DAG的计算框架浅谈Tez中的优化技术

《程序员》8月刊中的文章《Tez:运行在YARN上的DAG计算框架》将更详细的剖析Tez内部实现,主要内容见下图:

关注《程序员》2013年8月刊,关注我的这篇《Tez:运行在YARN上的DAG计算框架》

原创文章,转载请注明: 转载自董的博客

本文链接地址: http://dongxicheng.org/mapreduce-nextgen/tez-yarn-dag/

作者:Dong,作者介绍:http://dongxicheng.org/about/

本博客的文章集合:

Leave a Comment

发表评论

电子邮件地址不会被公开。 必填项已用*标注

*

您可以使用这些HTML标签和属性: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <strike> <strong>

1 Comment to “Tez:运行在YARN上的DAG计算框架”