yarn 是什么?

问答 0123 ⋅ 于 2019-11-20 17:54:26 ⋅ 最后回复由 青牛 2019-11-25 12:36:34 ⋅ 1759 阅读

大佬们,Yarn到底是啥

成为第一个点赞的人吧 :bowtie:
回复数量: 1
  • 青牛 国内首批大数据从业者,就职于金山,担任大数据团队核心研发工程师
    2019-11-25 12:36:34

    Yarn 的全称是 Yet Another Resource Negotiator意思是“另一种资源调度器”,为什么要叫另一种呢?肯定是之前的那种不好,资源调度的理解是负责资源管理和调度,什么是资源CPU,内存
    几个核心概念:
    1、容器(Container)这个东西是 我们可以简单理解为一个虚拟机。
    2、ResourceManager,整个系统有且只有一个 RM ,来负责资源的调度
    3、ApplicationMaster也叫ap, Client 提交一个任务的 时候,就会新建ap。ap 去与 RM申请创建一个或多个容器,然后在容器里进行分布式计算。
    4、NodeManager 是 ResourceManager 在每台机器的上代理,监控他们的资源使用情况(cpu,内存,磁盘及网络等),以及向 RM报告使用信息。

暂无评论~~
  • 请注意单词拼写,以及中英文排版,参考此页
  • 支持 Markdown 格式, **粗体**、~~删除线~~、`单行代码`, 更多语法请见这里 Markdown 语法
  • 支持表情,可用Emoji的自动补全, 在输入的时候只需要 ":" 就可以自动提示了 :metal: :point_right: 表情列表 :star: :sparkles:
  • 上传图片, 支持拖拽和剪切板黏贴上传, 格式限制 - jpg, png, gif,教程
  • 发布框支持本地存储功能,会在内容变更时保存,「提交」按钮点击时清空
Ctrl+Enter