Quantcast
Channel: 董的博客 » Hadoop书籍
Viewing all articles
Browse latest Browse all 5

Hadoop技术内幕(YARN)第4章问题讨论

$
0
0


本博客微信公共账号:hadoop123(微信号为:hadoop-123),分享hadoop技术内幕,hadoop最新技术进展,发布hadoop相关职位和求职信息,hadoop技术交流聚会、讲座以及会议等。二维码如下:


《Hadoop技术内幕:深入解析YARN架构设计与实现原理》一书中,“第4章 应用程序设计方法”最后的问题讨论。大家可在此讨论这几个问题。

(1)   问题1:改写DistributedShell程序,使得每个container运行在不同节点上(目前是随机的,可能运行在任意节点上)。

(2)   问题2:改写DistributedShell程序,使得某个用户指定的命令可以在集群的每个节点上仅执行一次。

(3)   问题3:扩展Unmanaged AM程序,使得AM可以向ResourceManager申请一定量的资源并在申请到的container中启动用户指定的命令。

(4)   使用Thirft RPC或者Avro RPC作为本文涉及到的三个主要协议(即ApplicationClientProtocol、ApplicationMasterProtocol和ContainerManagementProtocol)的RPC(替换现有的基于Hadoop RPC的实现),并使用非Java语言(比如C++)实现DistributedShell。

原创文章,转载请注明: 转载自董的博客

本文链接地址: http://dongxicheng.org/hadoop-internals/hadoop-internals-yarn-chapter-4/

作者:Dong,作者介绍:http://dongxicheng.org/about/

本博客的文章集合:


Copyright © 2013
This feed is for personal, non-commercial use only.
The use of this feed on other websites breaches copyright. If this content is not in your news reader, it makes the page you are viewing an infringement of the copyright. (Digital Fingerprint:
)

Viewing all articles
Browse latest Browse all 5

Latest Images

Trending Articles





Latest Images