当前位置: 课程库 > 大数据 > Spark > 课程详情
如果你无法观看此视频,请先确认是否安装了Flash Player
安装Flash Player
Spark on YARN
免费试看

Spark on YARN

倒计时时间开始直播
难度:高级
学习人数:
学习咨询
分享有礼
你的学习进度:已完成% 
适合人群:

有一定Spark基础或对大数据开发感兴趣的人群

课程描述:

Apache Hadoop YARN (Yet Another Resource Negotiator,另一种资源协调者)是一种新的 Hadoop 资源管理器,它是一个通用资源管理系统,可为上层应用提供统一的资源管理和调度,它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。本次课需要了解Spark的运行模式以及如何提交Spark应用程序到YARN上运行。

学习目标:

1.了解Spark的四种运行模式 ;

2.了解YARN产生背景 ;

3.理解YARN架构及运行原理 ;

4.掌握Spark on YARN的使用以及两种不同模式的区别 。

学习建议:

要学会查找第一手资料,也就是通过官方文档进行学习,查阅Spark官网的Submitting Applications章节的文档,自己动手尝试测试client模式和cluster模式的区别(日志、中断客户端等)。

下载资料:有

目录

试题加载中...

资料下载
    讲师简介
    关闭
    关闭

    了解
    畅学卡

    手机端
    学习