1. 容错语义的背景要理解Spark Streaming所提供的容错语义，我们首先需要回忆一下Spark RDD所提供的基本容错语义。 RDD是不可变的，可重算的，分布式数据集。每个RDD都记录了其创建算子的依赖信息，其中每个算子都以可容

1. 部署应用要运行一个Spark Streaming 应用，你首先需要具备以下条件： 集群以及集群管理器 – 这是一般Spark应用的基本要求，详见 deployment guide。 给Spark应用打个JAR包 –

1. 缓存/持久化和RDD类似, DStream也支持将数据持久化到内存中, 只需要调用DStream的persist()方法, 该方法内部会调用DStream中每个RDD的persist()方法, 进而将数据持久化到内存中, 这对于可能需

1. DStreams(离散数据流)离散数据流(DStream) 是spark Streaming最基本的抽象，它代表了一种连续的数据流，要么从某种数据源提取数据，要么从其他数据流映射转换而来。DStream内部是由一系列连续的RDD 组成

1. 介绍Spark Streamingspark streaming 是 spark 核心 api 的扩展，支持可扩展，高吞吐量，实时数据流的容错处理，数据可以从 kafka，flume，Kinesis 或者 TCP socket 中获取

1. Final介绍final 中文意思是最后的，最终的。 final可以修饰类、属性、方法和局部变量。 在某些情况下，程序员可能有一下需求，就会使用到final 2. final 修饰类使用 final 修饰类表示该类不能被继承。也就是说

1. 代码块基本介绍代码块又称为初始化块， 属于类中的成员， 即为类的额一部分，类似于方法，将逻辑语句封装在方法体中， 通过 {} 包围起来。 但代码块又和方法不同， 没有方法名，没有返回值， 没有参数，只有方法体，而且不通过对象或类显式调

1. 介绍在Java中，static是一个关键字，用于修饰类、方法和变量。使用static关键字声明的成员属于类级别，不需要实例化对象就可以访问和使用。在类定义中使用static关键字声明的变量可以作为常量使用。 2. 为什么设计 stat

1. shuffle 相关参数1.1 spark.shuffle.manager spark 1.2 官方支持两种shuffle ,即 HashBasedShuffle 和 SortBasedShuffle ， spark1.0之前仅支持

Spark 中大部分配置参数都有默认值，以下是常用配置： 1. Application Properties 属性 默认值 描述 spark.app.name (none) 应用程序的名称，会在日志和webUI显示 spark

1. 什么是RDD传统的MapReduce 虽然有自动容错，平衡负载和可扩展的优点，但是其最大的缺点是在迭代计算的时候，要进行大量的磁盘IO操作，而RDD正是解决这一缺点的抽象方法。RDD (Resilient Distributed Da

1. 多态介绍 多态就是方法或对象具有的多种状态 多态是建立在封装和继承基础之上的具体表现有方法的重写跟方法的重载 多态是面向对象的三个基本特征之一 多态的前提是 两个对象（类）存在继承关系 2. 方法的多态12345678910