yarn是如何运行程序的

Spark可以在同一个容器中制作多个任务运行1。Spark支持资源的动态共享，运行Yarn的框架全部共享一个集中配置的资源池，2.利用Yarn的资源调度特性可以方便地对负载进行分类、隔离和优先级控制，拥有更灵活的调度策略，3.纱可以自由选择执行者的数量。4.Yarn是唯一支持Spark安全性的集群管理器，通过Yarn，Spark可以运行位于KerberizedHadoop之上，并在它们的进程之间执行安全认证，我们知道Sparkon yarn有两种模式:。

1。Yarn:同一个资源调度系统YARN:Hadoop集群。Hadoop2.0是在2.0之后推出的，主要功能有:负责集群中资源的统一调度，响应客户端的请求。优缺点2。纱芯组件和结构1。ResourceManger(RM):一个全局资源管理器，集群中只有一个活动的RM。它的具体功能包括:处理客户端请求；开始监视ApplicationMaster；监控节点管理器；；资源的分配和调度。

具体功能包括:(1)计算作业资源使用量，与RM协商申请作业资源；(2)与NodeManger通信，启动/停止容器执行/终止任务的具体执行；(3)监控任务的状态和故障处理。3.节点管理器(NM):节点的资源管理器。每个节点启动一个，一般与DataNode一一对应。

Yarn in 2、Linux里面YARN作用是什么?

Linux是一个分布式资源管理和调度平台，负责为computing 程序提供服务器计算资源。可以运行各种分布式操作程序。它相当于一个分布式操作系统平台。Hadoop、MapReduce、YARN和Spark的区别和联系这张图是一个简单的Hadoop生态系统。MapReduce负责读取HDFS的数据，YARN负责资源调度。不用说，Spark是一个类似Hadoop的开源集群计算环境。更多信息请看Linux应该如何学习。

/图像-3//图像-4/1。在cmd下，输入“npminstallcreateracttappyarnG”2。在指定的项目目录中输入CreateReactAppYour _ Project _ Name，比如“createreactappreact_test”(注意项目名不能有大写字母)。安装完成后，提示如下图所示。3.切换到安装后创建的文件夹，输入“yarnstart”测试安装是否成功。如果安装成功，将会转移到一个页面。4.切换到安装时创建的文件夹，输入“yarnaddantdsave”安装antdesign，打开package.json我们可以看到antd已经成功安装。这时，我们可以在编辑器中打开项目文件夹(这里是vscode)。可以清楚的看到createreactapp生成的目录:此时，系统已经在目录文件夹运行"yarnstart "命令下为我们生成了一个基础页面(由App.js中的组件显示)，基础页面是react的logo。这时候页面长度是这样的:那我们就可以渲染了。

在MapReduce1.0中，我们都知道有和HDFS一样的单点故障，主要是因为JobTracker同时负责资源管理和任务分配。Yarn可以添加多种计算框架，如Hadoop、Spark和MapReduce。当不同的计算框架处理不同的任务时，资源利用率可能处于互补阶段，有利于提高整个集群的资源利用率。同时，Yarn提供了共享的集群模式。随着数据的爆炸式增长，在集群之间移动数据需要更长的时间，硬件成本也会增加。共享集群模式允许多个框架共享数据和硬件资源。

在实际系统中，资源是多维度的，包括CPU、内存、网络I/O和磁盘I/O等。所以，要想精准控制资源分配，就不能再有槽点的概念了。最直接的方式就是让一个任务直接申请它需要的资源(比如一个任务可以申请1GB内存和1个CPU)，调度器会根据任务的实际需求精细分配相应的资源。

与每个应用程序相关的Global ResourceManager(RM)和ApplicationMaster(AM)。ResourceManager(RM):负责统一管理和调度每个NM上的资源。将相应的空闲容器分配给AM应用的资源请求。将AM分配给空闲容器运行并监控其状态。主要由调度器和应用程序程序 manager两部分组成。

Go to:每个Sparkexecutor都是一个纱线容器运行。Spark可以在同一个容器中制作多个任务运行1。Spark支持资源的动态共享，运行Yarn的框架全部共享一个集中配置的资源池。2.利用Yarn的资源调度特性可以方便地对负载进行分类、隔离和优先级控制。拥有更灵活的调度策略。3.纱可以自由选择执行者的数量。4.Yarn是唯一支持Spark安全性的集群管理器。通过Yarn，Spark可以运行位于KerberizedHadoop之上，并在它们的进程之间执行安全认证。我们知道Sparkon yarn有两种模式:。

1。打开SpringBoot应用程序，通过Maven command package命令将应用程序制作成jar包，2.执行命令javajarxx.jar来启动SpringBoot应用程序。输入jsp页面对应的Url映射后，可以看到没有找到该页面，3.用解压软件打开jar包，可以看到jar包中没有对应的webapps目录，所以在上面的页面中没有发现错误。