1、第一次信息化浪潮主要解决什么问题?
A、信息传输
B、信息处理
C、信息爆炸
D、信息转换
2、下面哪个选项属于大数据技术的"数据存储和管理"技术层面的功能?
A、利用分布式文件系统、数据仓库、关系数据库等实现对结构化、半结构化和非结构化海量数据的存储和管理
B、利用分布式并行编程模型和计算框架,结合机器学习和数据挖掘算法,实现对海量数据的处理和分析
C、构建隐私数据保护体系和数据安全体系,有效保护个人隐私和数据安全
D、把实时采集的数据作为流计算系统的输入,进行实时处理分析
3、在大数据的计算模式中,流计算解决的是什么问题?
A、针对大规模数据的批量处理
B、针对大规模图结构数据的处理
C、大规模数据的存储管理和查询分析
D、针对流数据的实时计算
4、大数据产业指什么?
B、提供智能交通、智慧医疗、智能物流、智能电网等行业应用的企业
D、提供分布式计算、数据挖掘、统计分析等服务的各类企业
5、下列哪一个不属于大数据产业的产业链环节?
A、数据存储层
B、数据源层
C、数据分析层
D、数据应用层
6、下列哪一个不属于IT领域最新的技术发展趋势?
A、互联网
B、云计算
C、大数据
D、物联网
7、云计算平台层(PaaS)指的是什么?
A、操作系统和围绕特定应用的必需的服务
B、将基础设施(计算资源和存储)作为服务出租
C、从一个集中的系统部署软件,使之在一台本地计算机上(或从云中远程地)运行的一个模型
D、提供硬件、软件、网络等基础设施以及提供咨询、规划和系统集成服务8、云计算数据中心是什么?
A、数据中心是云计算的重要载体,为各种平台和应用提供运行支撑环境
B、提供智能交通、智慧医疗、智能物流、智能电网等
C、提供分布式计算、数据挖掘、统计分析等服务
D、提供硬件、软件、网络等基础设施
9、下列哪个不属于物联网的应用?
A、智能物流
B、智能安防
C、环保监测
D、数据采集
10、下列哪项不属于大数据的发展历程?
A、成熟期
B、萌芽期
C、大规模应用期
D、迷茫期
11、第三次信息化浪潮的标志是什么?
A、个人计算机
B、物联网
C、云计算和大数据
D、互联网
12、信息科技为大数据时代提供哪些技术支撑?
A、存储设备容量不断增加
B、网络带宽不断增加
C、CPU处理能力大幅提升
D、数据量不断增大
13、大数据具有哪些特点?
A、数据的"大量化"
B、数据的"快速化"
C、数据的"多样化"
D、数据的"价值化"
14、下面哪个属于大数据的应用领域?
A、智能医疗研发
B、监控身体情况
C、实时掌握交通状况
D、金融交易
15、大数据的两个核心技术是什么?
A、分布式存储
B、数据处理与分析
C、分布式处理
D、数据存储与管理
16、云计算关键技术包括什么?
B、虚拟化
C、分布式计算
D、多租户
17、云计算的服务模式和类型包括哪些?
A、软件即服务(SaaS)
B、平台即服务(PaaS)
C、基础设施即服务(IaaS)
D、数据即服务(DaaS)
18、物联网主要由下列哪些部分组成的?
A、应用层
B、处理层
C、感知层
D、网络层
19、物联网的关键技术包括哪些?
A、识别和感知技术
B、网络与通信技术
C、数据挖掘与融合技术
D、信息处理一体化技术
20、大数据对社会发展的影响有哪些?
A、大数据成为一种新的决策方式
B、大数据应用促进信息技术与各行业的深度融合
C、大数据开发推动新技术和新应用的不断涌现
21、下列哪个不属于Hadoop的特性?
A、成本高
B、高可靠性
C、高容错性
D、运行在Linux平台上
22、Hadoop框架中最核心的设计是什么?
A、为海量数据提供存储的HDFS和对数据进行计算的MapReduce
B、提供整个HDFS文件系统的NameSpace(命名空间)管理、块管理等所有服务
C、Hadoop不仅可以运行在企业内部的集群中,也可以运行在云计算环境中
D、Hadoop被视为事实上的大数据处理标准
23、在一个基本的Hadoop集群中,DataNode主要负责什么?
A、存储被拆分的数据块
B、协调数据计算任务
C、负责协调集群中的数据存储
D、负责执行由JobTracker指派的任务24、Hadoop最初是由谁创建的?
A、DougCutting
B、Lucene
C、Apache
D、MapReduce
25、下列哪一个不属于Hadoop的大数据层的功能?
A、数据挖掘
B、离线分析
C、实时查询
D、BI分析
26、在一个基本的Hadoop集群中,SecondaryNameNode主要负责什么?
A、帮助NameNode收集文件系统运行的状态信息
B、负责执行由JobTracker指派的任务
C、协调数据计算任务
D、负责协调集群中的数据存储
27、下面哪一项不是Hadoop的特性?
A、只支持少数几种编程语言
B、可扩展性高
C、成本低
D、能在linux上运行
28、下列哪个不是Hadoop在企业中的应用架构?
A、网络层
B、访问层
C、大数据层
D、数据源层
29、在Hadoop项目结构中,HDFS指的是什么?
A、分布式文件系统
B、分布式并行编程模型
C、资源管理和调度器
D、Hadoop上的数据仓库
30、在Hadoop项目结构中,MapReduce指的是什么?
A、分布式并行编程模型
B、流计算框架
C、Hadoop上的工作流管理系统
D、提供分布式协调一致性服务31、Hadoop的特性包括哪些?
A、高可扩展性
B、支持多种编程语言
32、Hadoop在企业中的应用架构包括哪几层?
A、访问层
B、大数据层
C、数据源层
33、Hadoop中,访问层的功能是什么?
A、数据分析
B、数据实时查询
C、数据挖掘
D、数据接收
34、MapReduce的作业主要包括什么?
A、从磁盘或从网络读取数据,即IO密集工作
B、计算数据,即CPU密集工作
C、针对不同的工作节点选择合适硬件类型
35、一个基本的Hadoop集群中的节点主要包括什么?
A、DataNode:存储被拆分的数据块
B、JobTracker:协调数据计算任务
C、TaskTracker:负责执行由JobTracker指派的任务
D、SecondaryNameNode:帮助NameNode收集文件系统运行的状态信息36、下列关于Hadoop的描述,哪些是正确的
A、为用户提供了系统底层细节透明的分布式基础架构
B、具有很好的跨平台特性
C、可以部署在廉价的计算机集群中
D、被公认为行业大数据标准开源软件37、Hadoop主要提供哪些技术服务
A、开发工具
B、开源软件
C、商业化工具
38、Hadoop集群的整体性能主要受到什么因素影响?
A、CPU性能
B、内存
C、网络
D、存储容量
39、下列关于Hadoop的描述,哪些是错误的?
A、为用户提供了系统顶层分布式基础架构
B、具有较差的跨平台特性
D、被公认为行业大数据标准开源软件
40、下列哪一项不属于Hadoop的特性?
A、较低可扩展性
B、只支持java语言
41、分布式文件系统指的是什么?
A、把文件分布存储到多个计算机节点上,成千上万的计算机节点构成计算机集群
B、用于在Hadoop与传统数据库之间进行数据传递
C、一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统
D、一种高吞吐量的分布式发布订阅消息系统,可以处理消费者规模的网站中的所有动作流数据
42、下面哪一项不属于计算机集群中的节点?
A、源节点(SourceNode)
B、主节点(MasterNode)
C、名称结点(NameNode)
D、节点(SlaveNode)
43、在HDFS中,默认一个块多大?
A、64MB
B、32MB
C、128MB
D、16MB
44、下列哪一项不属于HDFS采用抽象的块概念带来的好处?
A、强大的跨平台兼容性
B、支持大规模文件存储
C、简化系统设计
D、适合数据备份
45、在HDFS中,NameNode的主要功能是什么?
A、存储元数据
B、存储文件内容
C、文件内存保存在磁盘中
D、维护了blockid到datanode本地文件的映射关系46、下面对FsImage的描述,哪个是错误的?
A、FsImage文件没有记录文件包含哪些块以及每个块存储在哪个数据节点
B、FsImage文件包含文件系统中所有目录和文件inode的序列化形式
C、FsImage用于维护文件系统树以及文件树中所有的文件和文件夹的元数据
D、FsImage文件记录了所有针对文件的创建、删除、重命名等操作
47、下面对SecondaryNameNode第二名称节点的描述,哪个是错误的?
A、SecondaryNameNode一般是并行运行在多台机器上
C、SecondaryNameNode通过HTTPGET方式从NameNode上获取到FsImage和EditLog文件,并下载到本地的相应目录下
D、SecondaryNameNode是HDFS架构中的一个组成部分48、HDFS采用了什么模型?
A、主从结构模型
B、分层模式
C、管道-过滤器模式
D、点对点模式
49、在Hadoop项目结构中,HDFS指的是什么?
B、流数据读写
50、下列关于HDFS的描述,哪个不正确?
A、HDFS采用具体的块概念,具有支持大规模文件存储、简化系统设计
B、HDFS采用了主从(Master/Slave)结构模型
C、HDFS采用了冗余数据存储,增强了数据可靠性
D、HDFS还采用了相应的数据存放、数据读取和数据复制策略,来提升系统整体读写响应性能
51、HDFS要实现以下哪几个目标?
A、兼容廉价的硬件设备
C、大数据集
D、复杂的文件模型
52、HDFS特殊的设计,在实现上述优良特性的同时,也使得自身具有一些应用局限性,主要包括以下哪几个方面?
A、不适合低延迟数据访问
B、无法高效存储大量小文件
C、不支持多用户写入及任意修改文件
D、较差的跨平台兼容性
53、HDFS采用抽象的块概念可以带来以下哪几个明显的好处?
A、支持大规模文件存储
B、简化系统设计
C、适合数据备份
D、支持中等规模文件存储
54、在HDFS中,名称节点(NameNode)主要保存了哪些核心的数据结构?
A、FsImage
B、EditLog
C、Block
D、DN8
55、数据节点(DataNode)的主要功能包括哪些?
A、负责数据的存储和读取
B、根据客户端或者是名称节点的调度来进行数据的存储和检索
C、向名称节点定期发送自己所存储的块的列表
56、HDFS的命名空间包含什么?
A、目录
B、文件
C、块
D、磁盘
57、下列对于客服端的描述,哪些是正确的?
A、客户端是用户操作HDFS最常用的方式,HDFS在部署时都提供了客户端
B、HDFS客户端是一个库,暴露了HDFS文件系统接口
C、严格来说,客户端并不算是HDFS的一部分
D、客户端可以支持打开、读取、写入等常见的操作
58、HDFS只设置唯一一个名称节点,这样做虽然大大简化了系统设计,但也带来了哪些明显的局限性?
A、命名空间的限制
B、性能的瓶颈
C、隔离问题
D、集群的可用性
59、HDFS数据块多副本存储具备以下哪些有点?
A、加快数据传输速度
B、容易检查数据错误
C、保证数据可靠性
D、适合多平台上运行
60、HDFS具有较高的容错性,设计了哪些相应的机制检测数据错误和进行自动恢复?
A、名称节点出错
B、数据节点出错
C、数据出错
D、数据源太大
61、下列哪个不属于NoSQL数据库的特点?
A、灵活的可扩展性
B、灵活的数据模型
C、与云计算紧密融合
D、大型的数据库
62、下面关于NoSQL和关系数据库的简单比较,哪个是错误的?
A、RDBMS有关系代数理论作为基础,NoSQL没有统一的理论基础
B、NoSQL很难实现横向扩展,RDBMS可以很容易通过添加更多设备来支持更大规模的数据
C、RDBMS需要定义数据库模式,严格遵守数据定义,NoSQL不存在数据库模式,可以自由灵活定义并存储各种不同类型的数据
D、RDBMS借助于索引机制可以实现快速查询,很多NoSQL数据库没有面向复杂查询的索引
63、下列哪一项不属于NoSQL的四大类型?
A、文档数据库
B、图数据库
C、列族数据库
64、下列关于键值数据库的描述,哪一项是错误的?
A、扩展性好,灵活性好
B、大量写操作时性能高
C、无法存储结构化信息
D、条件查询效率高
65、下列关于列族数据库的描述,哪一项是错误的?
A、查找速度慢,可扩展性差
B、功能较少,大都不支持强事务一致性
C、容易进行分布式扩展
D、复杂性低
66、下列哪一项不属于数据库事务具有ACID四性?
A、间断性
B、原子性
C、一致性
D、持久性
67、下面关于MongoDB说法,哪一项是正确的?
A、具有较差的水平可扩展性
B、设置个别属性的索引来实现更快的排序
C、提供了一个面向文档存储,操作复杂
D、可以实现替换完成的文档(数据)或者一些指定的数据字段68、下列关于MongoDB数据类型的说法,哪一项是错误的?
A、Code用于存储二进制数据
B、Object用于内嵌文档
C、Null用于创建空值
D、String字符串,储数据常用的数据类型
69、下列关于NoSQL与关系数据库的比较,哪个说法是错误的?
A、在一致性方面,RDBMS强于NoSQL
B、在数据完整性方面,RDBMS容易实现
C、在扩展性方面,NoSQL比较好
D、在可用性方面,NoSQL优于RDBMS
70、关于文档数据库的说法,下列哪一项是错误的?
A、数据是规则的
B、性能好(高并发)
C、缺乏统一的查询语法
71、关系数据库已经无法满足Web2.0的需求,主要表现在以下几个方面?
A、无法满足海量数据的管理需求
B、无法满足数据高并发的需求
C、无法满足高可扩展性和高可用性的需求
D、使用难度高
72、下列关于MySQL集群的描述,哪些是正确的?
A、复杂性:部署、管理、配置很复杂
B、数据库复制:MySQL主备之间采用复制方式,只能是异步复制
C、扩容问题:如果系统压力过大需要增加新的机器,这个过程涉及数据重新划分
D、动态数据迁移问题:如果某个数据库组压力过大,需要将其中部分数据迁移出去
73、关系数据库引以为傲的两个关键特性(完善的事务机制和高效的查询机制),到了Web2.0时代却成了鸡肋,主要表现在以下哪几个方面?
A、Web2.0网站系统通常不要求严格的数据库事务
B、Web2.0网站系统基本上不用数据库来存储
C、Web2.0并不要求严格的读写实时性
D、Web2.0通常不包含大量复杂的SQL查询
74、下面关于NoSQL与关系数据库的比较,哪些是正确的?
A、关系数据库以完善的关系代数理论作为基础,有严格的标准
B、关系数据库可扩展性较差,无法较好支持海量数据存储
C、NoSQL可以支持超大规模数据存储
D、NoSQL数据库缺乏数学理论基础,复杂查询性能不高75、下列关于文档数据库的描述,哪些是正确的?
A、性能好(高并发),灵活性高
B、具备统一的查询语法
C、文档数据库支持文档间的事务
D、复杂性低,数据结构灵活
76、下列关于图形数据库的描述,哪些是正确的?
A、专门用于处理具有高度相互关联关系的数据
B、比较适合于社交网络、模式识别、依赖分析、推荐系统以及路径寻找等问题
C、灵活性高,支持复杂的图形算法
D、复杂性高,只能支持一定的数据规模77、NoSQL的三大基石?
A、CAP
B、最终一致性
C、BASE
78、关于NoSQL的三大基石之一的CAP,下列哪些说法是正确的?
A、一致性,是指任何一个读操作总是能够读到之前完成的写操作的结果量
B、一个分布式系统可以同时满足一致性、可用性和分区容忍性这三个需求
C、可用性,是指快速获取数据
D、分区容忍性,是指当出现网络分区的情况时(即系统中的一部分节点无法和其他节点进行通信),分离的系统也能够正常运行
79、当处理CAP的问题时,可以有哪几个明显的选择?
A、CA:也就是强调一致性(C)和可用性(A),放弃分区容忍性(P)
B、CP:也就是强调一致性(C)和分区容忍性(P),放弃可用性(A)
C、AP:也就是强调可用性(A)和分区容忍性(P),放弃一致性(C)
D、CAP:也就是同时兼顾可用性(A)、分区容忍性(P)和一致性(C),当时系统性能会下降很多
80、数据库事务具有ACID四性,下面哪几项属于四性?
A、原子性
B、持久性
C、间断性
D、一致性
81、下列哪个不属于云计算的优势?
A、按需服务
B、随时服务
C、通用性
D、价格不菲
82、下列关于云数据库的描述,哪个是错误的?
A、云数据库是部署和虚拟化在云计算环境中的数据库
B、云数据库是在云计算的大背景下发展起来的一种新兴的共享基础架构的方法
C、云数据库价格不菲,维护费用极其昂贵
D、云数据库具有高可扩展性、高可用性、采用多租形式和支持资源有效分发等特点
83、下列哪一个不属于云数据库产品?
A、MySQL
B、阿里云RDS
C、OracleCloud
D、百度云数据库
84、UMP系统是构建在一个大的集群之上的,下列哪一项不属于系统向用户提供的功能?
A、读写分离
B、分库分表
C、数据安全
D、资源合并
85、下列关于UMP系统功能的说法,哪个是错误的?
A、充分利用主从库实现用户读写操作的分离,实现负载均衡
B、UMP系统实现了对于用户透明的读写分离功能
C、UMP采用的两种资源隔离方式(用Cgroup限制MySQL进程资源和在Proxy服务器端限制QPS)
D、UMP系统只设计了一种机制来保证数据安全86、下列关于阿里云RDS的说法,哪个是错误的?
A、RDS是阿里云提供的关系型数据库服务
B、RDS由专业数据库管理团队维护
C、RDS具有安全稳定、数据可靠、自动备份
D、RDS实例,是用户购买RDS服务的基本单位。在实例中,用户只能创建一个数据库
87、下面哪一项不是云数据库的特性?
A、动态可扩展
B、高成本
C、易用性
D、大规模并行处理
88、下列哪个不是UMP系统中的角色?
A、Controller服务器
B、Proxy服务器
C、愚公系统
D、数据处理服务器
89、关于UMP系统架构依赖的开源组件Mnesia,说法错误的是哪一项?
A、Mnesia是一个分布式数据库管理系统
B、Mnesia的数据库模式(schema)只能在未运行前静态重配置
C、Mnesia的这些特性,使其在开发云数据库时被用来提供分布式数据库服务
D、Mnesia支持事务,支持透明的数据分片
90、关于UMP系统架构的Controller服务器,说法错误的是哪一项?
A、Controller服务器向UMP集群提供各种管理服务
B、Controller服务器上运行了一组Mnesia分布式数据库服务
C、当其它服务器组件需要获取用户数据时,不可以向Controller服务器发送请求获取数据
D、为了避免单点故障,保证系统的高可用性,UMP系统中部署了多台Controller服务器
91、云数据库具有以下哪些特性?
B、高可用性
C、免维护
D、安全
92、下列关于云数据库的描述,哪些是正确的?
A、Amazon是云数据库市场的先行者
B、GoogleCloudSQL是谷歌公司推出的基于MySQL的云数据库
C、从数据模型的角度来说,云数据库并非一种全新的数据库技术
D、云数据库并没有专属于自己的数据模型
93、UMP系统架构设计遵循了以下哪些原则?
A、保持单一的系统对外入口,并且为系统内部维护单一的资源池
B、消除单点故障,保证服务的高可用性
C、保证系统具有良好的可伸缩,能够动态地增加、删减计算与存储节点
D、保证分配给用户的资源也是弹性可伸缩的
94、UMP系统架构依赖的哪些开源组件?
A、Mnesia
B、LVS
C、RabbitMQ
D、ZooKeeper
95、一个基本的Hadoop集群中的节点主要包括什么?
D、SecondaryNameNode:帮助NameNode收集文件系统运行的状态信息96、下列关于UMP系统架构的描述,哪些是正确的?
A、信息统计服务器定期将采集到的用户的连接数
B、Web控制台向系统人员提供系统管理界面
C、LVS(LinuxVirtualServer)即Linux虚拟服务器
D、UMP系统借助于LVS来实现集群内部的负载均衡
97、为什么说云数据库是个性化数据存储需求的理想选择?
A、云数据库可以满足大企业的海量数据存储需求
B、云数据库可以满足中小企业的低成本数据存储需求
C、云数据库可以满足企业动态变化的数据存储需求
D、前期零投入、后期免维护的数据库服务,可以很好满足它们的需求98、下列关于云数据库与其他数据库的关系,哪些是正确的?
A、从数据模型的角度来说,云数据库并非一种全新的数据库技术
B、云数据库并没有专属于自己的数据模型,云数据库所采用的数据模型可以是关系数据库所使用的关系模型
C、同一个公司只能提供采用不同数据模型的单个云数据库服务
D、许多公司在开发云数据库时,后端数据库都是直接使用现有的各种关系数据库或NoSQL数据库产品
99、下列关于Amazon的云数据库产品,说法正确的哪几项?
A、AmazonRDS:云中的关系数据库
B、AmazonSimpleDB:云中的键值数据库
C、AmazonDynamoDB:云中的数据仓库
D、AmazonElastiCache:云中的分布式内存缓存
100、Microsoft的云数据库产品SQLAzure具有以下哪些特性?
A、属于关系型数据库:支持使用TSQL来管理、创建和操作云数据库
B、支持存储过程:它的数据类型、存储过程和传统的SQLServer具有很大的相似性
C、支持大量数据类型
D、支持云中的事务:支持局部事务,但是不支持分布式事务101、下列传统并行计算框架,说法错误的是哪一项?
A、刀片服务器、高速网、SAN,价格贵,扩展性差上
B、共享式(共享内存/共享存储),容错性好
C、what-how,难
D、实时、细粒度计算、计算密集型
102、下列关于MapReduce模型的描述,错误的是哪一项?
A、MapReduce采用"分而治之"策略
B、MapReduce设计的一个理念就是"计算向数据靠拢"
C、MapReduce框架采用了Master/Slave架构
D、MapReduce应用程序只用Java来写
103、MapReduce的体系结构在,JobTracker是主要任务是什么?
A、负责资源监控和作业调度,监控所有TaskTracker与Job的健康状况
B、使用"slot"等量划分本节点上的资源量(CPU、内存等)
C、会周期性地通过"心跳"将本节点上资源的使用情况和任务的运行进度汇报给TaskTracker
D、会跟踪任务的执行进度、资源使用量等信息,并将这些信息告诉任务
(Task)
104、下列关于MapReduce工作流程,哪个描述是正确的?
A、所有的数据交换都是通过MapReduce框架自身去实现的
B、不同的Map任务之间会进行通信
C、不同的Reduce任务之间可以发生信息交换
D、用户可以显式地从一台机器向另一台机器发送消息105、下列关于MapReduce的说法,哪个描述是错误的?
A、MapReduce具有广泛的应用,比如关系代数运算、分组与聚合运算等
B、MapReduce将复杂的、运行于大规模集群上的并行计算过程高度地抽象到了两个函数
C、编程人员在不会分布式并行编程的情况下,也可以很容易将自己的程序运行在分布式系统上,完成海量数据集的计算
D、不同的Map任务之间可以进行通信
106、下列关于Map和Reduce函数的描述,哪个是错误的?
A、Map将小数据集进一步解析成一批
B、Map每一个输入的
C、Reduce输入的中间结果
D、Reduce输入的中间结果
107、下面哪一项不是MapReduce体系结构主要部分?
A、Client
B、JobTracker
C、TaskTracker以及Task
D、Job
108、关于MapReduce的体系结构的描述,下列说法错误的是?
A、用户可通过Client提供的一些接口查看作业运行状态
B、用户编写的MapReduce程序通过Client提交到JobTracker端
C、JobTracker负责资源监控和作业调度
D、JobTracker会跟踪任务的执行进度、资源使用量等信息,并将这些信息告诉任务调度器(TaskScheduler)
109、关于MapReduce的体系结构的描述,下列说法错误的是?
A、Task分为MapTask和ReduceTask两种,分别由JobTracker和TaskTracker启动
B、slot分为Mapslot和Reduceslot两种,分别供MapTask和ReduceTask使用
C、TaskTracker使用"slot"等量划分本节点上的资源量(CPU、内存等)
D、TaskTracker会周期性接收JobTracker发送过来的命令并执行相应的操作(如启动新任务、杀死任务等)
110、下列说法有误的是?
A、HadoopMapReduce是MapReduce的开源实现,后者比前者使用门槛低很多
B、MapReduce非共享式,容错性好
C、MapReduce批处理、实时、数据疏散型
D、MapReduce采用"分而治之"策略
111、MapReduce相较于传统的并行计算框架有什么优势?
A、非共享式,容错性好
B、普通PC机,便宜,扩展性好
C、what,简单
D、批处理、非实时、数据密集型
112、MapReduce体系结构主要由以下那几部分构成?
C、TaskTracker
D、Task
113、下列关于MapReduce的体系结构的描述,说法正确的有?
A、用户编写的MapReduce程序通过Client提交到JobTracker端
B、JobTracker负责资源监控和作业调度
C、TaskTracker监控所有TaskTracker与Job的健康状况
D、TaskTracker使用"slot"等量划分本节点上的资源量(CPU、内存等)114、MapReduce的作业主要包括什么?
115、对于MapReduce而言,其处理单位是split。split是一个逻辑概念,它包含哪些元数据信息?
A、数据起始位置
B、数据长度
C、数据所在节点
D、数据大小
116、下列关于Map端的Shuffle的描述,哪些是正确的?
A、MapReduce默认1000MB缓存
B、多个溢写文件归并成一个或多个大文件,文件中的键值对是排序的
C、当数据很少时,不需要溢写到磁盘,直接在缓存中归并,然后输出给Reduce
D、每个Map任务分配多个缓存,使得任务运行更有效率117、MapReduce的具体应用包括哪些?
A、关系代数运算(选择、投影、并、交、差、连接)
B、分组与聚合运算
C、矩阵-向量乘法
D、矩阵乘法
118、MapReduce执行的全过程包括以下哪几个主要阶段?
A、从分布式文件系统读入数据
B、执行Map任务输出中间结果
C、通过Shuffle阶段把中间结果分区排序整理后发送给Reduce任务
D、执行Reduce任务得到最终结果并写入分布式文件系统
119、下列关于分布式并行编程的描述,哪些是正确的?
A、"摩尔定律",CPU性能大约每隔18个月翻一番
B、分布式程序运行在大规模计算机集群上
C、谷歌公司最先提出了分布式并行编程模型MapReduce
D、MapReduce是Hadoop的开源实现
120、下列说法正确的是?
A、MapReduce体系结构主要由四个部分组成,分别是:Client、JobTracker、TaskTracker以及Task
B、Task分为MapTask和ReduceTask两种,均由TaskTracker启动
C、在MapReduce工作流程中,所有的数据交换都是通过MapReduce框架自身去实现的
D、在MapReduce工作流程中,用户不能显式地从一台机器向另一台机器发送消息
121、Hadoop1.0的核心组件(仅指MapReduce和HDFS,不包括Hadoop生态系统内的Pig、Hive、HBase等其他组件),下列哪项是它的不足?
A、抽象层次高
B、表达能力有限,抽象层次低,需人工编码
C、价格昂贵
D、可维护性低
122、下面哪个选项不属于Hadoop1.0的问题?
A、单一名称节点,存在单点失效问题
B、单一命名空间,无法实现资源隔离
C、资源管理效率低
D、很难上手
123、下列哪项是Hadoop生态系统中Spark的功能?
A、处理大规模数据的脚本语言
B、工作流和协作服务引擎,协调Hadoop上运行的不同任务
C、支持DAG作业的计算框架
D、基于内存的分布式并行编程框架,具有较高的实时性,并且较好支持迭代计算
124、在Hadoop生态系统中,Kafka主要解决Hadoop中存在哪些的问题?
A、Hadoop生态系统中各个组件和其他产品之间缺乏统一的、高效的数据交换中介
B、不同的MapReduce任务之间存在重复操作,降低了效率
C、延迟高,而且不适合执行迭代计算
D、抽象层次低,需要手工编写大量代码
125、下列哪一个不属于HDFS1.0中存在的问题?
A、不可以水平扩展
B、多点故障问题
C、HDFSHA是热备份,提供高可用性,但是无法解决可扩展性、系统性能和隔离性
D、系统整体性能受限于单个名称节点的吞吐量
126、关于HDFSFederation的设计的描述,哪个是错误的?
A、属于不同命名空间的块可以构成同一个"块池"
B、HDFSFederation中,所有名称节点会共享底层的数据节点存储资源,数据节点向所有名称节点汇报
C、设计了多个相互独立的名称节点
D、HDFS的命名服务能够水平扩展
127、下列关于.HDFSFederation的描述,错误的是?
A、不存在单点故障
B、JobTracker"大包大揽"导致任务过重
C、容易出现内存溢出(分配资源只考虑MapReduce任务数,不考虑CPU、内存)
D、资源划分不合理(强制划分为slot,包括Mapslot和Reduceslot)128、下列哪一项不属于MapReduce1.0的缺陷?
129、下列哪个不属于YARN体系结构中ResourceManager的功能?
A、处理客户端请求
B、监控NodeManager
C、资源分配与调度
D、处理来自ApplicationMaster的命令
130、下列哪个不属于YARN体系结构中ApplicationMaster的功能?
A、任务调度、监控与容错
B、为应用程序申请资源
C、将申请的资源分配给内部任务
D、处理来自ResourceManger的命令
131、下列选项中,哪些属于Hadoop1.0的核心组件的不足之处?
A、实时性差(适合批处理,不支持实时交互式)
B、资源浪费(Map和Reduce分两阶段执行)
C、执行迭代操作效率低
D、难以看到程序整体逻辑
132、Hadoop的优化与发展主要体现在哪几个方面?
A、Hadoop自身核心组件MapReduce的架构设计改进
B、Hadoop自身核心组件HDFS的架构设计改进
C、Hadoop生态系统其它组件的不断丰富
D、Hadoop生态系统减少不必要的组件,整合系统133、下列哪些属于Hadoop2.0的改进?
A、设计了HDFSHA
B、提供名称节点热备机制
C、设计了HDFSFederation,管理多个命名空间
D、设计了新的资源管理框架YARN
134、下面哪个属于不断完善的Hadoop生态系统中的组件?
A、Pig
B、Spark
C、Kafka
135、HDFS1.0主要存在哪些问题?
A、单点故障问题
B、不可以水平扩展
C、单个名称节点难以提供不同程序之间的隔离性
136、HDFSFederation相对于HDFS1.0的优势主要体现在哪里?
A、能够解决单点故障问题
B、HDFS集群扩展性
C、性能更高效
D、良好的隔离性
137、JobTracker主要包括哪三大功能?
A、资源管理
B、任务调度
C、任务监控
D、数据即服务
138、YARN体系结构主要包括哪三部分?
A、ResourceManager
B、NodeManager
C、ApplicationMaster
D、DataManager
139、在YARN体系结构中,ApplicationMaster主要功能包括哪些?
A、当用户作业提交时,ApplicationMaster与ResourceManager协商获取资源,ResourceManager会以容器的形式为ApplicationMaster分配资源
B、把获得的资源进一步分配给内部的各个任务(Map任务或Reduce任务),实现资源的"二次分配"
C、定时向ResourceManager发送"心跳"消息,报告资源的使用情况和应用的进度信息
D、向ResourceManager汇报作业的资源使用情况和每个容器的运行状态140、YARN的目标就是实现"一个集群多个框架",为什么?
A、一个企业当中同时存在各种不同的业务应用场景,需要采用不同的计算框架
B、为了避免不同类型应用之间互相干扰,企业就需要把内部的服务器拆分成多个集群,分别安装运行不同的计算框架,即"一个框架一个集群"
C、这些产品通常来自不同的开发团队,具有各自的资源调度管理机制
D、解决单点故障
141、下列关于Spark的描述,错误的是哪一项?
A、Spark最初由美国加州伯克利大学(UCBerkeley)的AMP实验室于2009年开发
B、Spark在2014年打破了Hadoop保持的基准排序纪录.
C、Spark用十分之一的计算资源,获得了比Hadoop快3倍的速度
D、Spark运行模式单一
142、下面关于Spark的说法,错误的是哪一项?
A、使用DAG执行引擎以支持循环数据流与内存计算
B、可运行于独立的集群模式中,可运行于Hadoop中,也可运行于AmazonEC2等云环境中
C、支持使用Scala、Java、Python和R语言进行编程,但是不可以通过SparkShell进行交互式编程
D、Spark提供了内存计算,可将中间结果放到内存中,对于迭代计算效率更高
143、下列关于Scala特性的描述,错误的是哪一项?
A、Scala语法复杂,但是能提供优雅的API计算
B、Scala具备强大的并发性,支持函数式编程,可以更好地支持分布式系统
C、Scala兼容Java,运行速度快,且能融合到Hadoop生态圈中
D、Scala是Spark的主要编程语言144、下列说法哪项有误?
A、相对于Spark来说,使用Hadoop进行迭代计算非常耗资源
B、Spark将数据载入内存后,之后的迭代计算都可以直接使用内存中的中间结果作运算,避免了从磁盘中频繁读取数据
C、Hadoop的设计遵循"一个软件栈满足不同应用场景"的理念
D、Spark可以部署在资源管理器YARN之上,提供一站式的大数据解决方案145、在Spark生态系统组件的应用场景中,下列哪项说法是错误的?
A、Spark应用在复杂的批量数据处理
B、SparkSQL是基于历史数据的交互式查询
C、SparkStreaming是基于历史数据的数据挖掘
D、GraphX是图结构数据的处146、下列说法错误的是?
A、RDD(ResillientDistributedDataset)是运行在工作节点
(WorkerNode)的一个进程,负责运行Task
B、Application是用户编写的Spark应用程序
C、一个Job包含多个RDD及作用于相应RDD上的各种操作
D、DirectedAcyclicGraph反映RDD之间的依赖关系147、下列关于RDD说法,描述有误的是?
A、一个RDD就是一个分布式对象集合,本质上是一个只读的分区记录集合
B、每个RDD可分成多个分区,每个分区就是一个数据集片段
C、RDD是可以直接修改的
D、RDD提供了一种高度受限的共享内存模型
148、下列哪一项不属于Spark架构的优点?
A、实现一键式安装和配置、线程级别的任务监控和告警
B、降低硬件集群、软件维护、任务监控和应用开发的难度
C、便于做成统一的硬件、计算平台资源池
D、不用负载应用混搭,集群利用率高
149、Spark生态系统组件SparkStreaming的应用场景是?
A、基于历史数据的数据挖掘
B、图结构数据的处理
C、基于历史数据的交互式查询
D、基于实时数据流的数据处理
150、Spark生态系统组件MLlib的应用场景是?
A、图结构数据的处理
B、基于历史数据的交互式查询
C、复杂的批量数据处理
D、基于历史数据的数据挖掘
151、Spark具有以下哪几个主要特点?
A、运行速度快
B、容易使用
D、运行模式单一
152、Scala具有以下哪几个主要特点?
A、Scala的优势是提供了REPL(Read-Eval-PrintLoop,交互式解释器),提高程序开发效率
B、Scala兼容Java,运行速度快,且能融合到Hadoop生态圈中
C、Scala具备强大的并发性,支持函数式编程
D、Scala可以更好地支持分布式系统153、下列哪些选项属于Hadoop的缺点?
A、表达能力有限
B、磁盘IO开销大
C、延迟高
D、在前一个任务执行完成之前,其他任务就无法开始,难以胜任复杂、多阶段的计算任务
154、下列说法中,哪些选项描述正确?
A、Spark在借鉴HadoopMapReduce优点的同时,很好地解决了MapReduce所面临的问题
B、Spark的计算模式也属于MapReduce,但不局限于Map和Reduce操作
C、HadoopMapReduce编程模型比Spark更灵活
D、HadoopMapReduce提供了内存计算,可将中间结果放到内存中,对于迭代运算效率更高
155、在实际应用中,大数据处理主要包括以下哪三个类型?
A、不同场景之间输入输出数据无法做到无缝共享,通常需要进行数据格式的转换
B、不同的软件需要不同的开发和维护团队
C、需要较高的使用成本
D、比较难以对同一个集群中的各个系统进行统一的资源协调和分配
157、与HadoopMapReduce计算框架相比,Spark所采用的Executor具有哪些优点?
A、利用多线程来执行具体的任务,减少任务的启动开销
B、Executor中有一个BlockManager存储模块,有效减少IO开销
C、提供了一种高度受限的共享内存模型
D、不同场景之间输入输出数据能做到无缝共享158、Spark运行架构具有以下哪些特点?
A、每个Application都有自己专属的Executor进程,并且该进程在Application运行期间一直驻留
B、Executor进程以多线程的方式运行Task
C、Spark运行过程与资源管理器无关,只要能够获取Executor进程并保持通信即可
D、Task采用了数据本地性和推测执行等优化机制
159、Spark采用RDD以后能够实现高效计算的原因主要在于?
A、高效的容错性
B、中间结果持久化到内存,数据在内存中的多个
C、存放的数据可以是Java对象,避免了不必要的对象序列化和反序列化
D、现有容错机制:数据复制或者记录日志
160、Spark支持三种不同类型的部署方式,包括?
A、Standalone(类似于MapReduce1.0,slot为资源分配单位)
B、SparkonMesos(和Spark有血缘关系,更好支持Mesos)
C、SparkonYARN
D、SparkonHDFS
161、下列关于流计算的说法,哪项是错误的?
A、实时获取来自不同数据源的海量数据,经过实时分析处理,获得有价值的信息
C、对于一个流计算系统来说,它应该支持TB级甚至是PB级的数据规模
A、在传统的数据处理流程中,存储的数据是旧的
B、在传统的数据处理流程中,需要用户主动发出查询来获取结果
C、传统的数据处理流程,需要先采集数据并存储在关系数据库等数据管理系统中
D、流计算的处理流程一般包含三个阶段:数据实时采集、数据批量计算、实时查询服务
163、下列哪项不属于流计算的处理流程的三个阶段?
A、数据实时采集
B、数据批量采集
C、数据实时计算
D、实时查询服务
164、下列哪一项不属于Storm的特点?
A、支持各种编程语言:Storm支持使用各种编程语言来定义任务
B、容错性:Storm需要人工进行故障节点的重启、任务的重新分配
C、可扩展性:Storm的并行特性使其可以运行在分布式集群中
D、免费、开源:Storm是一款开源框架,可以免费使用165、下列关于Storm设计思想,描述有误的是?
A、Storm将Streams的状态转换过程抽象为Spout
B、Storm认为每个Stream都有一个源头,并把这个源头抽象为Spout
C、Storm将Spouts和Bolts组成的网络抽象成Topology
D、Topology里面的每个处理组件(Spout或Bolt)都包含处理逻辑,而组件之间的连接则表示数据流动的方向
166、下列关于Storm和Hadoop架构组件功能对应关系,哪个是错误的?
A、HadoopJob对应StormTopology
B、HadoopTaskTracker对应StormSupervisor
C、HadoopJobTracker对应StormSpout
D、HadoopReduce对应StormBolt167、下面哪一项不属于Samza的系统架构?
A、流数据层(Kafka)
B、执行层(YARN)
C、处理层(SamzaAPI)
D、数据采集层(Scribe)
168、下列哪个说法是错误的?
A、从编程的灵活性来讲,Storm是比较理想的选择,它使用ApacheThrift,可以用任何编程语言来编写拓扑结构(Topology)
B、当有大量的状态需要处理时,比如每个分区都有数十亿个元组,则可以选择Storm和SparkStreaming
C、SparkStreaming无法实现毫秒级的流计算
D、在Spark上可以统一部署SparkSQL,SparkStreaming、MLlib,GraphX等组件,提供便捷的一体化编程模型
169、下列关于Storm的描述,有误的是?
A、Storm将流数据Stream描述成一个有限的Tuple序列
B、Storm保证每个消息都能完整处理
C、Storm认为每个Stream都有一个源头,并把这个源头抽象为Spout
D、Bolt可以执行过滤、函数操作、Join、操作数据库等任何操作170、下列哪个关于StreamGroupings的描述,有误的是?
A、FieldsGrouping:广播发送,每一个Task都会收到所有的Tuple
B、GlobalGrouping:全局分组,所有的Tuple都发送到同一个Task中
C、NonGrouping:不分组,和ShuffleGrouping类似,当前Task的执行会和它的被订阅者在同一个线程中执行
D、DirectGrouping:直接分组,直接指定由某个Task来执行Tuple的处理171、流数据具有以下哪些特征?
A、数据快速持续到达,潜在大小也许是无穷无尽的
D、系统可以控制将要处理的新到达的数据元素的顺序172、下列关于批量计算和实时计算的说法,正确的有?
B、静态数据不适合采用批量计算,因为它不适合用传统的关系模型建模
C、流数据必须采用实时计算
173、对于一个流计算系统来说,它应达到以下哪些需求?
A、高性能:处理大数据的基本要求,如每秒处理几十万条数据
C、分布式:支持大数据的基本架构,必须能够平滑扩展
D、可靠性:能可靠地处理流数据
174、下列关于流计算与Hadoop的说法,正确的有?
A、Hadoop擅长批处理,不适合流计算
B、MapReduce是专门面向静态数据的批量处理的
C、Hadoop设计的初衷是面向大规模数据的批量处理
D、MapReduce不适合用于处理持续到达的动态数据
175、下列关于流处理系统与传统的数据处理系统的描述,正确的有?
A、流处理系统处理的是实时的数据,而传统的数据处理系统处理的是预先存储好的静态数据
B、用户通过流处理系统获取的是实时结果,而通过传统的数据处理系统,获取的是过去某一时刻的结果
C、流处理系统无需用户主动发出查询,实时查询服务可以主动将结果推送给用户
D、传统的数据处理系统系统无需用户主动发出查询,批量查询服务可以主动将结果推送给用户
176、Storm具有以下哪些特点?
A、整合性:Storm可方便地与队列系统和数据库系统进行整合
B、简易的API:Storm的API在使用上即简单又方便
C、容错性:Storm可自动进行故障节点的重启、任务的重新分配
D、可扩展性:Storm的并行特性使其可以运行在分布式集群中177、目前,Storm中的StreamGroupings有如下哪几种方式?
A、AllGrouping:广播发送,每一个Task都会收到所有的Tuple
C、FieldsGrouping:按照字段分组,保证相同字段的Tuple分配到同一个Task中
D、DirectGrouping:随机分组,随机分发Stream中的Tuple,保证每个Bolt的Task接收Tuple数量大致一致
178、下列关于Storm框架,描述正确的有?
A、worker:每个worker进程都属于一个特定的Topology
B、executor:executor是产生于worker进程内部的线程
C、task:实际的数据处理由task完成
D、在Topology的生命周期中,每个组件的task数目是不会发生变化的,而executor的数目却不一定
179、下列关于SparkStreaming与Storm的描述,哪些是正确的的?
A、SparkStreaming无法实现毫秒级的流计算
B、Storm可以实现毫秒级响应件
C、Storm的低延迟执行引擎(100ms+)可以用于实时计算
D、SparkStreaming采用的小批量处理的方式使得它可以同时兼容批量和实时数据处理的逻辑和算法
180、下列关于Samza的描述,哪些是正确的?
A、一个作业(Job)是对一组输入流进行处理转化成输出流的程序
B、Samza的流数据单位既不是Storm中的元组,也不是SparkStreaming中的DStream,而是一条条消息
C、一个作业会被进一步分割成多个任务(Task)来执行
D、分区之间没有定义顺序,从而允许每一个任务独立执行
181、下列关于数据可视化的描述,哪个是错误的?
A、数据可视化是指将大型数据集中的数据以图形图像形式表示
B、利用数据分析和开发工具发现其中未知信息的处理过程
C、数据可视化技术的基本思想是将数据库中每一个数据项作为单个图元素表示
D、将数据的各个属性值以一维数据的形式表示
182、学习D3可视化库需要的一些基础知识,下列说法错误的是?
A、HTML:文档对象模型,用于修改文档的内容和结构
B、CSS:层叠样式表,用于设定网页的样式
C、SVG:可缩放矢量图形,用于绘制可视化的图形
D、JavaScript:一种直译式脚本语言,用于设定网页的行为183、下列选项中,哪些不属于SVG标签的视觉元素?
A、矩形
B、圆形
C、线条
D、图片
184、下列哪个不属于可视化工具?
A、GoogleChartAPI
B、D3
C、Visual.ly
D、Spark
185、下列说法错误的是?
A、大数据魔镜是一款优秀的国产数据分析软件,可以让用户真正理解探索分析数据
B、Tableau是桌面系统中最简单的商业智能工具软件,是一个用于网页作图、生成互动图形的JavaScript函数库
C、GoogleFusionTables让一般使用者也可以轻松制作出专业的统计地图
D、ModestMaps是一个小型、可扩展、交互式的免费库,提供了一套查看卫星地图的API
186、下面关于Timetoast的描述,哪个是错误的?
187、HBase实际应用中的性能优化方法不包括下面哪一项?
A、创建表的时候,可以通过HColumnDescriptor.setInMemory(true)将表放到Region服务器的缓存中,保证在读取的时候被cache命中
B、创建表的时候,可以通过HColumnDescriptor.setMaxVersions(intmaxVersions)设置表中数据的最大版本,如果只需要保存最新版本的数据,那么可以设置setMaxVersions(1)
C、创建表的时候,可以通过HColumnDescriptor.setTimeToLive(inttimeToLive)设置表中数据的存储生命期
188、下列关于可视化工具中高级分析工具的说法,错误的是?
A、R是属于GNU系统的一个自由、免费、源代码开放的软件
B、Weka主要用于社交图谱数据可视化分析,可以生成非常酷炫的可视化图形
C、Gephi主要用于社交图谱数据可视化分析,可以生成非常酷炫的可视化图形
D、R通常用于大数据集的统计与分析
189、下面关于D3的说法,哪个是错误的?
A、D3是一个被数据驱动的文档
B、D3是一个JavaScript的函数库,使用它主要是用来做数据可视化的
C、D3是一个JavaScript函数库,并不需要通常所说的"安装"
D、D3有多个文件,在HTML中引用即可
190、在大数据时代,可视化技术可以支持实现哪些目标?
A、观测、跟踪数据
B、分析数据
C、辅助理解数据
D、增强数据吸引力
191、信息图表是信息、数据、知识等的视觉化表达,下列哪个说法正确?
A、谷歌公司的制图服务接口GoogleChartAPI,可以用来为统计数据并自动生成图片
B、D3是最流行的可视化库之一,是一个用于网页作图、生成互动图形的JavaScrip函数库
C、Visual.ly可以用它来快速创建自定义的、样式美观且具有强烈视觉冲击力的信息图表
D、大数据魔镜是一款优秀的国产数据分析软件,它丰富的数据公式和算法可以让用户真正理解探索分析数据
192、下列说法正确的有?
A、HTML:超文本标记语言,用于设定网页的内容
B、CSS:一种直译式脚本语言,用于设定网页的行为
C、DOM:文档对象模型,用于修改文档的内容和结构
D、SVG:层叠样式表,用于设定网页的样式
193、D3可以处理哪些类型的数据?
A、数值数组
B、字符串
C、对象(本身包含其他数组或键/值对)
D、JSON和GeoJSON
194、下列描述正确的有?
A、d3.select("body")查找DOM中的body
B、selectAll("p")选择DOM中的所有段落
C、enter()绑定数据和DOM元素
D、text("Newparagraph!")为新创建的p标签插入一个文本值195、下列关于SVG标签的描述,说法正确的有?
A、圆。使用cx和cy,指定指定半径的中心的坐标,和表示半径
B、线。使用x1和Y1到指定线的一端的坐标,x2和y2指定的另一端的坐标。
C、文本。使用x和y指定文本的位置
D、椭圆。使用x和y的指定左上角的坐标,width和height指定的尺寸196、下列关于SVG性质的描述,说法正确的有?
A、描边(stroke)-颜色值
B、描边宽度(stroke-width)-数字(通常以像素为单位)
C、SVG的默认样式是黑色填充
D、不透明度(opacity)–0.0(完全透明)和1.0(完全不透明)之间的数值
197、下列关于数据可视化的描述,正确的有?
B、数据可视化技术的基本思想是将数据库中每一个数据项作为单个图元素表示
C、利用数据分析和开发工具发现其中未知信息的处理过程
198、下列说法中,哪些是正确的?
A、CSS:层叠样式表,用于设定网页的样式
B、JavaScript:一种直译式脚本语言,用于设定网页的行为
C、SVG标签包含一些视觉元素,包括矩形,圆形,椭圆形,线条,文字和路径等
D、SVG的默认样式是黑色填充。如果想换颜色,就必须将样式应用到相应的元素
199、下列说法中,哪些是正确的?
A、ModestMaps是一个小型、可扩展、交互式的免费库
B、Leaflet是一个小型化的地图框架,通过小型化和轻量化来满足移动网页的需要
200、下列说法错误的是?
A、UserCF算法推荐的是那些和目标用户有共同兴趣爱好的其他用户所喜欢的物品
B、ItemCF算法推荐的是那些和目标用户之前喜欢的物品类似的其他物品
C、UserCF算法的推荐更偏向个性化
D、UserCF随着用户数目的增大,用户相似度计算复杂度越来越高201、下面关于UserCF算法和ItemCF算法的对比,哪个是错误的?
A、UserCF算法的推荐更偏向社会化:适合应用于新闻推荐、微博话题推荐等应用场景,其推荐结果在新颖性方面有一定的优势
B、ItemCF算法的推荐更偏向于个性化
C、ItemCF随着用户数目的增大,用户相似度计算复杂度越来越高
202、下列哪一项不属于大数据的应用?
A、电信行业:客户离网分析
B、智能机器人
C、零售行业:发现关联购买行为、进行客户群体细分
D、推荐系统
203、下列关于推荐系统的描述,哪一项是错误的?
A、推荐系统是大数据在互联网领域的典型应用
B、推荐系统是自动联系用户和物品的一种工具
C、推荐系统可以创造全新的商业和经济模式,帮助实现长尾商品的销售
D、推荐系统分为基于物品的协同过滤和基于商家的协同过滤
204、下列哪一项不属于推荐算法?
A、基于物品和商家的联合协同推荐
B、基于统计的推荐
C、专家推荐
D、基于内容的推荐
205、下列描述有误的是?
A、专家推荐:人工推荐,由资深的专业人士来进行物品的筛选和推荐,需要较多的人力成本性
B、基于统计的推荐:通过机器学习的方法去描述内容的特征,并基于内容的特征来发现与之相似的内容
C、协同过滤推荐:应用最早和最为成功的推荐方法之一
D、混合推荐:结合多种推荐算法来提升推荐效果
206、下列哪一项不属于完整推荐系统的三个模块之一?
A、用户建模模块
B、推荐对象建模模块
C、推荐算法模块
D、数据采集模块
207、下列关于协同过滤的说法,哪一项是错误的?
A、协同过滤可分为基于用户的协同过滤和基于物品的协同过滤
B、UserCF算法符合人们对于"趣味相投"的认知,即兴趣相似的用户往往有相同的物品喜好
C、实现UserCF算法的关键步骤是计算物品与物品之间的相似度
D、基于物品的协同过滤算法(简称ItemCF算法)是目前业界应用最多的算法208、下列哪个说法是错误的?
A、无论是亚马逊还是Netflix,其推荐系统的基础都是ItemCF算法
B、ItemCF算法是给目标用户推荐那些和他们之前喜欢的物品相似的物品
C、ItemCF算法主要通过分析用户的行为记录来计算物品之间的相似度
D、实现UserCF算法的关键步骤是计算物品与物品之间的相似度
209、下列哪一项说法是错误的?
C、ItemCF算法的推荐更偏向社会化,而UserCF算法的推荐更偏向于个性化
D、ItemCF算法倾向于推荐与用户已购买商品相似的商品,往往会出现多样性不足、推荐新颖度较低的问题
210、下列哪些属于大数据应用?
B、物流:基于大数据和物联网技术的智能物流
C、智能交通:利用交通大数据,实现交通实时监控
D、汽车:无人驾驶汽车,实时采集车辆各种行驶数据和周围环境211、下列关于推荐系统集群的描述,哪些是正确的?
A、为了让用户从海量信息中高效地获得自己所需的信息,推荐系统应运而生
B、推荐系统是大数据在互联网领域的典型应用
C、推荐系统是自动联系用户和物品的一种工具
D、推荐系统是利用大数据为用户推荐消费内容、调整线下门店布局、控制店内人流量
212、下列关于推荐长尾理论的描述,哪些是正确的?
A、推荐系统可以创造全新的商业和经济模式,帮助实现长尾商品的销售
B、"长尾"概念于2004年提出,用来描述以亚马逊为代表的电子商务网站的商业和经济模式
C、可以通过发掘长尾商品并推荐给感兴趣的用户来提高销售额
213、推荐系统的本质是建立用户与物品的联系,根据推荐算法的不同,推荐方法包括以下哪几类?
A、专家推荐:人工推荐,由资深的专业人士来进行物品的筛选和推荐,需要较多的人力成本
C、基于内容的推荐:通过机器学习的方法去描述内容的特征,并基于内容的特征来发现与之相似的内容
D、混合推荐:结合多种推荐算法来提升推荐效果214、一个完整的推荐系统通常包括以下哪三个模块?
B、数据采集模块
C、推荐对象建模模块
D、推荐算法模块
215、下列关于推荐系统的描述,哪些是正确的?
A、用户建模模块:对用户进行建模,根据用户行为数据和用户属性数据来分析用户的兴趣和需求
B、推荐对象建模模块:根据对象数据对推荐对象进行建模
C、推荐算法模块:基于用户特征和物品特征,采用推荐算法计算得到用户可能感兴趣的对象
D、推荐算法模块:根据推荐场景对推荐结果进行一定调整,将推荐结果最终展示给用户
216、协同过滤可分为哪几种过滤方式?
A、基于用户的协同过滤
B、基于物品的协同过滤
C、基于用户和物品的联合协同过滤
D、基于商家的协同过滤
217、关于基于用户的协同过滤,下列哪些说法是正确的?
A、基于用户的协同过滤算法(简称UserCF算法)在1992年被提出,是推荐系统中最古老的算法
B、UserCF算法符合人们对于"趣味相投"的认知
C、实现UserCF算法的关键步骤是计算用户与用户之间的兴趣相似度
D、UserCF算法符合兴趣相似的用户往往有相同的物品喜好
218、实现UserCF算法的关键步骤是计算用户与用户之间的兴趣相似度,下列哪些是属于计算相似度的算法?
B、余弦相似度
C、调整余弦相似度
D、调整正弦相似度
219、下列关于协同过滤算法的描述,哪些是正确的?
A、基于物品的协同过滤算法(简称ItemCF算法)是目前业界应用最多的算法
C、ItemCF算法通过建立用户到物品倒排表(每个用户喜欢的物品的列表)来计算物品相似度
D、UserCF算法推荐的是那些和目标用户有共同兴趣爱好的其他用户所喜欢的物品
220、下列关于BigTable的描述,哪个是错误的?
B、BigTable是一个分布式存储系统
C、BigTable起初用于解决典型的互联网搜索问题
D、网络搜索应用查询建立好的索引,从BigTable得到网页
221、下列选项中,关于HBase和BigTable的底层技术对应关系,哪个是错误的?
A、GFS与Zookeeper
B、GFS与HDFS
C、MapReduce与HadoopMapReduce
D、Chubby与Zookeeper
222、在HBase中,关于数据操作的描述,下列哪一项是错误的?
A、HBase则采用了更加简单的数据模型,它把数据存储为未经解释的字符串
B、HBase操作不存在复杂的表与表之间的关系
C、HBase操作只有简单的插入、查询、删除、清空等
D、HBase在设计上就避免了复杂的表和表之间的关系223、在HBase访问接口中,Pig主要用在哪个场合?
A、适合做数据统计
B、适合HBase管理使用
C、适合其他异构系统在线访问HBase表数据
D、适合HadoopMapReduce作业并行批处理HBase表数据
224、HBase中需要根据某些因素来确定一个单元格,这些因素可以视为一个"四维坐标",下面哪个不属于"四维坐标"?
A、关键字
B、行键
C、列族
225、关于HBase的三层结构中各层次的名称和作用的说法,哪个是错误的?
A、Zookeeper文件记录了用户数据表的Region位置信息
B、-ROOT-表记录了.META.表的Region位置信息
C、.META.表保存了HBase中所有用户数据表的Region位置信息
D、Zookeeper文件记录了-ROOT-表的位置信息
226、下面关于主服务器Master主要负责表和Region的管理工作的描述,哪个是错误的?
A、实现相同Region服务器之间的负载均衡行
B、在Region分裂或合并后,负责重新调整Region的分布
C、对发生故障失效的Region服务器上的Region进行迁移
D、管理用户对表的增加、删除、修改、查询等操作
227、HBase实际应用中的性能优化方法不包括下面哪一项?
228、HBase只有一个针对行健的索引,如要要访问HBase表中的行,下面哪种方式是不可行的?
A、通过单个行健访问
C、通过一个行健的区间来访问
D、全表扫描
229、下面关于Region的说法,哪个是错误的?
A、同一个Region不会被分拆到多个Region服务器
B、为了加快访问速度,.META.表的全部Region都会被保存在内存中
C、一个-ROOT-表可以有多个Region
D、为了加速寻址,客户端会缓存位置信息,同时,需要解决缓存失效问题
230、关系数据库已经流行很多年,并且Hadoop已经有了HDFS和MapReduce,为什么需要HBase?
A、Hadoop可以很好地解决大规模数据的离线批量处理问题,但是,受限于HadoopMapReduce编程框架的高延迟数据处理机制,使得Hadoop无法满足大规模数据实时处理应用的需求上
B、HDFS面向批量访问模式,不是随机访问模式
C、传统的通用关系型数据库无法应对在数据规模剧增时导致的系统扩展性和性能问题
D、传统关系数据库在数据结构变化时一般需要停机维护;空列浪费存储空间231、HBase与传统的关系数据库的区别主要体现在以下哪几个方面?
A、数据类型
B、数据操作
C、存储模式
D、数据维护
232、HBase访问接口类型包括哪些?
A、NativeJavaAPI
B、HBaseShell
C、ThriftGateway
D、RESTGateway
233、下列关于数据模型的描述,哪些是正确的?
A、HBase采用表来组织数据,表由行和列组成,列划分为若干个列族
B、每个HBase表都由若干行组成,每个行由行键(rowkey)来标识
C、列族里的数据通过列限定符(或列)来定位
234、HBase的实现包括哪三个主要的功能组件?
A、库函数:链接到每个客户端
B、一个Master主服务器
C、许多个Region服务器
D、部署在廉价的计算机集群中
235、HBase的三层结构中,三层指的是哪三层?
A、Zookeeper文件
B、-ROOT-表
C、.META.表
D、数据类型
236、HBase性能监视主要包括以下哪几方面?
A、Master-status(自带)
B、Ganglia
C、OpenTSDB
D、Ambari
237、Zookeeper是一个很好的集群管理工具,被大量用于分布式计算,它主要提供什么服务?
A、配置维护
B、域名服务
C、分布式同步
D、组服务
238、下列关于Region服务器工作原理的描述,哪些是正确的?
A、每个Region服务器都有一个自己的HLog文件
B、每次刷写都生成一个新的StoreFile,数量太多,影响查找速度
C、合并操作比较耗费资源,只有数量达到一个阈值才启动合并
D、Store是Region服务器的核心
239、下列关于HLog工作原理的描述,哪些是正确的?
A、分布式环境必须要考虑系统出错。HBase采用HLog保证
B、HBase系统为每个Region服务器配置了一个HLog文件
C、Zookeeper会实时监测每个Region服务器的状态
D、Master首先会处理该故障Region服务器上面遗留的HLog文件240、下列关于图结构数据的描述,错误的是?
A、许多非图结构的大数据,通常会被转换为关系模型后进行分析
B、许多大数据都是以大规模图或网络的形式呈现
C、图数据结构很好地表达了数据之间的关联性
D、关联性计算是大数据计算的核心
241、下面哪个细节是用户通过网页监控看不到的?
A、关于出度分布的柱状图
B、处于活跃状态的边数量
D、所有用户自定义Aggregator的值
242、在Pregel计算模型中,图中的每个顶点会对应一个计算单元,下列哪一项不属于计算单元的成员变量?
A、顶点值(Vertexvalue):顶点对应的PR值
B、出射边(Outedge):只需要表示一条边,可以不取值
C、消息(Message):传递的消息
D、入射边(Iutedge):只需要表示一条边,可以不取值
243、采用MapReduce实现PageRank的计算过程包括三个阶段,下列哪一项是错的?
A、第一阶段:解析网页
B、第二阶段:PageRank分配
C、第三阶段:收敛阶段
D、第一阶段:收集网页
244、下列关于PageRank算法在MapReduce中的实现的描述,错误的是?
A、解析网页的任务就是分析一个页面的链接数,但是不赋初值
B、PageRank分配就是多次迭代计算页面的PageRank值
C、收敛阶段的任务就是由一个非并行组件决定是否达到收敛
D、一般判断是否收敛的条件是所有网页的PageRank值不再变化,或者运行30次以后我们就认为已经收敛了
245、下列哪个不属于PageRank算法在Pregel和MapReduce中实现方式的区别?
A、Pregel将PageRank处理对象看成是连通图,而MapReduce则将其看成是键值对
B、Pregel将计算细化到顶点,同时在顶点内控制循环迭代次数
C、apReduce将计算批量化处理,按任务进行循环迭代控制
D、图算法如果用Pregel实现,需要一系列的Pregel的调用246、下列哪项不属于在Vetex类中的值类型参数?
A、顶点的出度
B、顶点
C、边
D、消息
247、在每个超步中,Worker调用顶点上的Compute()函数,下列哪个参数是不需要传递?
A、该顶点的当前值
B、一个接收到的消息的迭代器
C、一个出射边的迭代器
D、一个入射边的迭代器
248、下列哪一项不属于每个超步的组件?
A、全局计算
B、局部计算
C、通讯
D、栅栏同步
249、在一个Worker中,它所管辖的分区的状态信息是保存在内存中的,下列哪一项不属于分区的状态信息?
A、顶点的当前值
B、消息队列
C、标志位
D、一个接收到的消息的迭代器
250、很多传统的图计算算法都存在以下哪些典型问题?
A、常常表现出比较差的内存访问局部性
B、针对单个顶点的处理工作过少
C、计算过程中伴随着并行度的改变
D、计算过程简易
251、针对大型图(比如社交网络和网络图)的计算问题,哪些说法是正确的?
A、为特定的图应用定制相应的分布式实现:通用性不好
B、基于现有的分布式计算平台进行图计算:在性能和易用性方面往往无法达到最优
C、使用单机的图算法库,但是,在可以解决的问题的规模方面具有很大的局限性
D、使用已有的并行图计算系统,但是,对大规模分布式系统非常重要的一些方面(比如容错),无法提供较好的支持
252、针对大型图的计算,目前通用的图计算软件主要哪些?
A、基于遍历算法的、实时的图数据库,如Neo4j、OrientD
B、DEX和InfiniteGraph
B、以图顶点为中心的、基于消息传递批处理的并行引擎,如GoldenOrb、Giraph、Pregel和Hama
C、基于遍历算法的、实时的图数据库,如GoldenOrb、Giraph、Pregel和Hama
D、以图顶点为中心的、基于消息传递批处理的并行引擎,如Neo4j、OrientD
253、一次BSP(BulkSynchronousParallelComputingModel,又称"大同步"模型)计算过程包括一系列全局超步(所谓的超步就是计算中的一次迭代),每个超步主要包括哪些组件?
A、局部计算:每个参与的处理器都有自身的计算任务
B、通讯:处理器群相互交换数据
C、栅栏同步:当一个处理器遇到"路障"(或栅栏),会等到其他所有处理器完成它们的计算步骤
D、基于现有的分布式计算平台进行图计算254、下列说法正确的是?
A、在Pregel执行计算过程时,在每个超步中都会并行调用每个顶点上定义的Compute()函数
B、顶点之间的通讯是借助于消息传递机制来实现的
C、在默认情况下,Pregel计算框架并不会开启Combiner功能
D、通常只对那些满足交换律和结合律的操作才可以去开启Combiner功能255、在Pregel计算框架中,图的保存格式多种多样,具体包括哪些?
A、文本文件
B、关系数据库
C、键值数据库
D、语音文件
256、下列对于Pregel的执行过程,哪些是正确的?
A、选择集群中的多台机器执行图计算任务,每台机器上运行用户程序的一个副本
B、Master把一个图分成多个分区,并把分区分配到多个Worker
C、ster会把用户输入划分成多个部分,通常是基于文件边界进行划分
D、ster向每个Worker发送指令,Worker收到指令后,开始运行一个超步
257、在一个Worker中,它所管辖的分区的状态信息是保存在内存中的,分区中的顶点的状态信息包括?
B、以该顶点为起点的出射边列表,每条出射边包含了目标顶点ID和边的值
C、消息队列,包含了所有接收到的、发送给该顶点的消息
D、标志位,用来标记顶点是否处于活跃状态
258、在每个超步中,Worker会对自己所管辖的分区中的每个顶点进行遍历,并调用顶点上的Compute()函数,在调用时,会把以下哪些参数传递进去?
D、标志位,用来标记顶点是否处于活跃状态259、下列说法正确的有?
A、在Pregel中,为了获得更好的性能,"标志位"和输入消息队列是分开保存的
B、在超步S中,当一个Worker在进行顶点处理时,用于当前超步的消息会被处理
C、需要两个消息队列用于存放作用于当前超步S的消息和作用于下一个超步S+1的消息
D、每个Worker上都保存了一个或多个分区的状态信息,当一个Worker发生故障时,它所负责维护的分区的当前状态信息就会丢失