简单描述你对Hadoop集群SafeMode模式的理解?集群处于安全模式,不能执行重要操作(写操作),集群属于只读状态。但是严格来说,只是保证HDFS元数据信息的访问,而不保证文件的访问。集群启动完成后,自动退出安全模式, 如果集群处于安全模式,想要完成写操作,需要离开安全模式。 (1)bin/hdfs dfsadmin -safemode get (功能描述:查看安全模式状态) (2)bin/h
NO.5 CORRECT TEXT(第五题 正确文本)Problem Scenario 13 : You have been given following mysql database details as well as other info.(问题场景13:已经提供了以下mysql数据库详细信息和其他信息) user=retail_dba password=cloudera database
转载 10月前
62阅读
电话面试,30多分钟,本次面试主要是面试我的意愿,基础能力,解决问题的能力。如果面试完觉得我不错的话会帮我推到阿里达摩院面试系统里面进行正式的面试流程。1. 首先是自我介绍,项目经历,实习经历,毕业的一些想法。2. 面试问答问题:问烟火检测怎么降低误报率(容易把红色的目标误检成火)。(因为我的简历上面我写了我做过烟火检测)回答:针对烟火数据难以收集的问题,尤其是小烟和小火,可以考虑使用GAN网络来
转载 2024-08-02 12:34:25
31阅读
  单项选择题  1. 下面哪个程序负责 HDFS 数据存储。  a)NameNode  b)Jobtracker  c)Datanode  d)secondaryNameNode  e)tasktracker  2. HDfS 中的 block 默认保存几份?  a)3 份  b)2 份  c)1 份  d)不确定  3. 下列哪个程序通常与 NameNode 在一个节点启动?a)Seconda
转载 2024-06-13 08:19:51
75阅读
hadoop相关面试题 以下未实际验证,可借鉴不可笃信。hadoop相关面试题1.hdfs写流程2.hdfs读流程3.hdfs的体系结构4.一个datanode 宕机,怎么一个流程恢复5.hadoop 的 namenode 宕机,怎么解决6.namenode对元数据的管理7.元数据的checkpoint8.yarn资源调度流程9.hadoop中combiner和partition的作用10.用ma
转载 2024-02-26 21:14:57
34阅读
一、单选题1、Shuffle中Partitioner 分区发生在哪个过程( A )A. 溢写过程B. 本地MergeC. reduce函数阶段D. map函数阶段 2、在整个maprduce运行阶段,数据是以(   A     )形式存在的A. key/valueB. LongWritableC.
转载 2023-07-13 11:15:57
123阅读
Shuffle过程环形缓冲区的作用:key,value从map()方法输出,被outputcollector收集通过getpartitioner()方法获取分区号,在进入环形缓冲区。默认情况下,环形缓冲区大小值为100MB。当map输入的数据进入环形缓冲区的量达到80MB以上时,那么开始执行溢写过程,溢写过程中如果有其他数据进入,那么由剩余的百分之20反向写入。溢写过程会根据key,value先进
转载 2024-05-17 12:58:13
39阅读
若泽数据@Hadoop 试题一单选题 1、Hadoop 的作者(C) A:Martin Fowler   #敏捷开发方法论-软件开发教父B:Kent Beck      #极限编程,测试驱动开发,实现模式C:Doug Cutting D:James Gosling  #java之父2、YARNWebUI 默认端口是(B
转载 2024-01-09 22:17:37
35阅读
Hadoop常见面试题整理及解答一、基础知识篇:1.把数据仓库从传统关系型数据库转到hadoop有什么优势? 答: (1)关系型数据库成本高,且存储空间有限。而Hadoop使用较为廉价的机器存储数据,且Hadoop可以将大量机器构建成一个集群,并在集群中使用HDFS文件系统统一管理数据,极大的提高了数据的存储及处理能力。 (2)关系型数据库仅支持标准结构化数据格式,Hadoop不仅支持标准结
转载 2023-10-06 20:36:27
174阅读
1、海量日志数据提取出某日访问百度次数最多的IP,怎么做?2、有一个1G大小的文件,里面每一行是一个词,词的大小不超过16字节,内存限制大小是1M。返回频数最高的100个词。3、更智能&更大的数据中心架构与传统的数据仓库架构有何不同?传统的企业数据仓库架构基于 Hadoop 的数据中心架构4、运行Hadoop集群需要哪些守护进程?DataNode,NameNode,TaskTracker和
转载 2023-11-13 06:34:30
91阅读
很多中间件,都用到了 Zookeeper,比如大数据相关那一群小伙伴Kafka、Hadoop、HBase。作为一个分布式协同管理插件,Zookeeper被很多公司使用。又是一不得不学习的技术啊,给大家准备了36个知识点或者说面试题,又可以收藏一波了。1.CAP理论?C : Consistency 一致性,数据在多个副本之间似否能够保持一致的特性。A: Availability 可用性,系统服务必须
转载 2023-12-27 13:12:40
45阅读
Hadoop是什么从HDFS、MR、Yarn进行讲解。HDFS的读写流程读流程: 写流程:MR任务中的Shuffle过程Map方法之后Reduce方法之前这段处理过程叫「Shuffle」Map方法之后,数据首先进入到分区方法,把数据标记好分区,然后把数据发送到环形缓冲区;环形缓冲区默认大小100m,环形缓冲区达到80%时,进行溢写;溢写前对数据进行排序,排序按照对key的索引进行字典顺序
转载 2024-05-23 15:19:20
58阅读
一 概论    1、大数据5V特点Volume(大量)、Velocity(高速)、Variety(多样)、Value(低密度价值)、Veracity(真实性)   *2、Google三驾马车GFS(分布式文件系统)、MapReduce(超大集群的简单数据处理)、BigTable(结构化数据的分布式存储系统)   3、H
3、写一个a个字节对齐的宏正确答案:#pragma pack(a)   VC中提供了#pragma pack(n)宏,使我们可以屏蔽默认对齐方式,来设定变量以n字节对齐方式。n字节对齐就是说变量存放的起始地址的偏移量有两种情况:第一、如果n大于等于该变量所占用的字节数,那么偏移量必须满足默认的对齐方式,第二、如果n小于该变量的类型所占用的字节数,那么偏移量为n的倍数,...
原创 2021-09-29 09:44:15
311阅读
3、写一个a个字节对齐的宏 正确答案:#pragma pack(a) VC中提供了#pragma​ pack(n)宏,使我们可以屏蔽默认对齐方式,来设定变量以n字节对齐​方式。n字节对齐就是说变量存放的起始地址的偏移量​有两种情况:第一、如果n大于等于该变量所占用的字节数,那么偏移量必须满足默认的对齐方式,第二、如果n小于该变量的类型所占用的字节数,那么偏移量为n的倍数,不用满足默认
转载 2012-10-26 11:34:00
245阅读
2评论
1、说说你对spring的理解,或者说下什么是spring?分析:主要考察求职者对spring的整体掌握度,附带考察求职者思维缜密度、表达能力等,面对这类半开放型题目,我们只需要围着理论依据+实际使用经验,展开描述即可,千万不要去背官方的甲骨文,要附带自己的理解和见解。答:spring是一款主流的非侵入式设计、轻量级web框架,最大特点是面向Java bean编程,降低了类之间的耦合性, 其IOC
转载 2024-03-12 14:05:38
185阅读
1.     namenode的重要性是什么?namenode的作用在Hadoop中非常重要。它是Hadoop的大脑,主要负责管理系统上的分配块,还为客户提出请求时的数据提供特定地址2.     当NameNode关闭时会发生什么?如果NameNode关闭,文件系统将脱机。 3.&nbsp
转载 2024-04-19 17:28:49
100阅读
Hadoop1.请说下HDFS读写流程2. HDFS 在读取文件的时候,如果其中一个块突然损坏了怎么办?3. HDFS 在上传文件的时候,如果其中一个 DataNode 突然挂掉了怎么办? Hadoophadoop中常问的有三块,第一:存储,问到存储,就把HDFS相关的知识点拿出来;第二:计算框架(MapReduce);第三:资源调度框架(yarn)1.请说下HDFS读写流程这个问题虽然见过无
题一:unsigned char *p1; unsigned long *p2; p1=(unsigned char *)0x801000; p2=(unsigned long *)0x810000;请问p1+5= 什么?p2+5= 什么?801005   810005801010   810014801005   810014801010  810015回
原创 2015-05-21 21:27:18
1412阅读
1.static有什么用途?(请至少说明两种)    1)在函数体,一个被声明为静态的变量在这一函数被调用过程中维持其值不变。    2) 在模块内(但在函数体外),一个被声明为静态的变量可以被模块内所用函数访问,但不能被模块外其它函数访问。它是一个本地的全局变量。    3) 在模块内,一个被声明为静态的函
转载 精选 2015-09-27 17:17:02
390阅读
  • 1
  • 2
  • 3
  • 4
  • 5