hadoop3.0新特性与展望——董西成

9.90

1. Hadoop 3.0概况

(1) 背景以及现状

 

2. Common Hadoop主要改进

(1) 精简hadoop内核

(2) shell脚本重构

 

3. MapReduce主要改进

(1) 引入Native Task加速计算

(2) 内存自动推断

 

4. HDFS新功能与特性

(1) HDFS 可擦除编码

(2) 多Namenode支持(多余2个namenode)

(3) Intra-datanode balancer

 

5. YARN新功能与特性

(1) 基于cgroup的内存隔离和IO Disk隔离

(2) TimelineServer v2

(3) Container resizing

授课教师