This website requires JavaScript.

Shell 脚本编写技巧

Read more

Final Cut 使用技巧

Read more

揭秘Apache Hadoop YARN,第5部分:使用FairScheduler队列属性[译]

在之前的第4部分中,我们描述了Apache Hadoop中最常用的FairScheduler属性。在第5部分中,我们将提供一些示例来展示如何单独或组合使用属性,以实现通常所需的行为,如应用程序优先级和组织队列。

Read more

揭秘Apache Hadoop YARN,第4部分:公平调度队列基础[译]

在本系列的第3部分中,快速介绍了Fair Scheduler,它是Apache Hadoop YARN(Cloudera推动)中的调度程序之一。在第4部分中,我们将讨论大多数队列属性,它们使用的一些示例以及它们的限制。

队列属性

默认情况下,Fair Scheduler使用单个默认队列。可以创建其他队列并设置相应的属性对集群上应用程序的运行方式进行更精细的控制。

FairSh

Read more

揭秘Apache Hadoop YARN,第3部分:调度程序概念[译]

第1部分第2部分,我们介绍了YARN资源分配的基础知识。在本部分中,我们将提供集群调度的概述,并介绍Fair Scheduler,YARN中提供的调度程序选择之一。

独立的计算机可以有多个CPU核心,每个核心运行一个进程,但是可以有多达几百个进程同时运行。调度程序是桌面操作系统的一部分,它将进程分配给CPU执行。

Read more