A.实现所有分片处理时更新共享变量的功能。B.工作节点上的任务不能访问累加器的值。C.累加器是一个只读变量。D.累加器中的共享变量会发往每一个Executor。
单项选择题下列关于rdd分区描述错误的是()。
A.rangeB.range robinC.hashD.自定义
单项选择题下列关于spark的cache算子默认缓存机制描述错误的是()。
A.多次使用同一个RDD ,可以将该RDD缓存起来。B.缓存的计算结果,可以在后期得到重用。C.重用计算结果的前提是当前进程JVM不能停止工作。D.将数据持久化到硬盘,使用时再加载的策略。
单项选择题下列关于spark 的local模式描述错误的是()。
A.local[*]表示直接使用最大cpu核数。B.不需要启动master和worker守护进程。C.driver程序在应用程序结束后就会终止。D.SparkSubmit进程只充当客户提交任务的Client进程。
单项选择题以下不支持用来编写spark程序的语言是()。
A.JavaB.PythonC.ScalaD.C#
单项选择题下面哪个算子是Transformation算子?()
A.collectB.reduceC.reduceByKeyD.countByKey
单项选择题spark读取一个200M的文件,生成的RDD会有几个分区?()
A.1B.2C.3D.4
单项选择题对Spark中RDD的描述,错误的是:()。
A.RDD默认存储到内存中,内存不足时也会存储到磁盘中B.RDD表示一批元素的集合C.RDD中的数据是被分区的D.RDD中的数据不会丢失
单项选择题spark的master和worker的作用错误的是?()
A.master负责分配jobB.worker执行jobC.spark的计算是在内存中进行D.spark的计算是在硬盘中进行
单项选择题哪个不是kafka的组件?()
A.生产者B.消费者C.reduceByKeyD.kafka集群
单项选择题flume的作用?()
A.从日志中读取数据B.从mysql读取数据C.从Oracle读取数据D.从sqlserver读取数据
单项选择题哪个不是sparksql的作用?()
A.从mysql读取数据B.使用sql语句进行统计分析C.与Python代码整合使用D.不支持UDF
单项选择题py4j的作用是()。
A.生成contextB.读取rdd数据C.调用java代码的第三方python库D.存储在磁盘或HDFS
单项选择题哪个不是SparkSession封装的context ?()
A.SparkContextB.rediscontextC.SqlContextD.hivecontext
单项选择题哪个不是spark的运行模式?()
A.localB.StandloneC.Yarn clusterD.zookeeper
多项选择题在scala中有三种循环模式,分别是()。
A.whileB.do..whileC.ifD.for