简单描述你对Hadoop集群SafeMode模式的理解？集群处于安全模式，不能执行重要操作（写操作），集群属于只读状态。但是严格来说，只是保证HDFS元数据信息的访问，而不保证文件的访问。集群启动完成后，自动退出安全模式， 如果集群处于安全模式，想要完成写操作，需要离开安全模式。 （1）bin/hdfs dfsadmin -safemode get （功能描述：查看安全模式状态） （2）bin/h
电话面试，30多分钟，本次面试主要是面试我的意愿，基础能力，解决问题的能力。如果面试完觉得我不错的话会帮我推到阿里达摩院面试系统里面进行正式的面试流程。1. 首先是自我介绍，项目经历，实习经历，毕业的一些想法。2. 面试问答问题：问烟火检测怎么降低误报率（容易把红色的目标误检成火）。（因为我的简历上面我写了我做过烟火检测）回答：针对烟火数据难以收集的问题，尤其是小烟和小火，可以考虑使用GAN网络来
转载
2024-08-02 12:34:25
31阅读
NO.5 CORRECT TEXT（第五题 正确文本）Problem Scenario 13 : You have been given following mysql database details as well as other info.（问题场景13：已经提供了以下mysql数据库详细信息和其他信息）
user=retail_dba
password=cloudera
database
单项选择题 1. 下面哪个程序负责 HDFS 数据存储。 a)NameNode b)Jobtracker c)Datanode d)secondaryNameNode e)tasktracker 2. HDfS 中的 block 默认保存几份? a)3 份 b)2 份 c)1 份 d)不确定 3. 下列哪个程序通常与 NameNode 在一个节点启动?a)Seconda
转载
2024-06-13 08:19:51
75阅读
1.什么是spark？ spark是基于内存计算的通用大数据并行计算框架，是一个快速、通用可扩展的大数据分析引擎。它给出了大一统的软件开发栈，适用于不同场合的分布式场景，如批处理、迭代算法、交互式查询、流处理、机器学习和图计算。2.Spark生态系统？ SparkCore：spark的核心计算 主要Rdd SparkSQLa：提供了类sql方式操作结构化半结构化数据。对历史数据进行交互式查询。（即
转载
2024-09-06 11:58:18
54阅读
mysql 查询相关的笔试题是开发人员面试过程中常见的一类问题，这类题目通常涉及SQL语法、数据库设计及优化等方面。为了更好地理解和解决这些问题，我将整理出一套完整的解决方案，包括环境预检、部署架构、安装过程、依赖管理、故障排查和迁移指南，以应对相关笔试题的挑战。
### 环境预检
在进行MySQL查询题的准备前，首先需要确保我们的开发环境符合要求。为了做到这一点，我使用了四象限图来进行兼容性分
hadoop相关面试题 以下未实际验证，可借鉴不可笃信。hadoop相关面试题1.hdfs写流程2.hdfs读流程3.hdfs的体系结构4.一个datanode 宕机,怎么一个流程恢复5.hadoop 的 namenode 宕机,怎么解决6.namenode对元数据的管理7.元数据的checkpoint8.yarn资源调度流程9.hadoop中combiner和partition的作用10.用ma
转载
2024-02-26 21:14:57
34阅读
一、单选题1、Shuffle中Partitioner 分区发生在哪个过程( A )A. 溢写过程B. 本地MergeC. reduce函数阶段D. map函数阶段 2、在整个maprduce运行阶段，数据是以( A )形式存在的A. key/valueB. LongWritableC.
转载
2023-07-13 11:15:57
123阅读
Shuffle过程环形缓冲区的作用：key，value从map()方法输出，被outputcollector收集通过getpartitioner()方法获取分区号，在进入环形缓冲区。默认情况下，环形缓冲区大小值为100MB。当map输入的数据进入环形缓冲区的量达到80MB以上时，那么开始执行溢写过程，溢写过程中如果有其他数据进入，那么由剩余的百分之20反向写入。溢写过程会根据key，value先进
转载
2024-05-17 12:58:13
39阅读
mysql索引相关笔试题是许多IT面试中常见的一类考题。索引在数据库中起着至关重要的作用，能够显著提高查询性能，降低响应时间。理解mysql索引的作用、特性以及其优化方法，对于数据库管理员和开发者来说都是非常重要的。本文将全面剖析mysql索引，希望能帮助大家更深入地掌握这一知识。
## 适用场景分析
在不同的业务场景中，mysql索引的应用具有不同的匹配度。为了更清晰地了解这些场景，我们使用
IO面试题1、Java中的IO流分为几种按照流的流向分，可以分为输入流和输出流；按照操作单元划分，可以划分为字节流和字符流；Java IO 流共涉及 40 多个类，这些类看上去很杂乱，但实际上很有规则，而且彼此之间存在非常紧密的联系， Java IO 流的 40 多个类都是从如下 4 个抽象类基类中派⽣出来的。InputStream/Reader: 所有的输⼊流的基类，前者是字节输⼊流，后者是字符
转载
2024-10-18 08:38:54
62阅读
Spring Boot/Spring Cloud104. 什么是 Spring Boot？ Spring Boot是由Pivotal团队提供的全新框架，其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置，从而使开发人员不再需要定义样板化的配置。通过这种方式，Spring Boot致力于在蓬勃发展的快速应用开发领域（rapid application de
转载
2024-04-11 12:35:17
56阅读
若泽数据@Hadoop 试题一单选题 1、Hadoop 的作者（C） A：Martin Fowler #敏捷开发方法论-软件开发教父B：Kent Beck #极限编程，测试驱动开发，实现模式C：Doug Cutting D：James Gosling #java之父2、YARNWebUI 默认端口是（B
转载
2024-01-09 22:17:37
35阅读
Hadoop常见面试题整理及解答一、基础知识篇：1.把数据仓库从传统关系型数据库转到hadoop有什么优势？ 答： （1）关系型数据库成本高，且存储空间有限。而Hadoop使用较为廉价的机器存储数据，且Hadoop可以将大量机器构建成一个集群，并在集群中使用HDFS文件系统统一管理数据，极大的提高了数据的存储及处理能力。 （2）关系型数据库仅支持标准结构化数据格式，Hadoop不仅支持标准结
转载
2023-10-06 20:36:27
174阅读
相关笔试面试题什么是菱形继承？菱形继承的问题是什么？什么是菱形虚拟继承？如何解决数据冗余和二义性？继承和组合的区别是什么？什么时候用组合？什么时候用继承？多继承中指针偏移的问题？1.两个子类继承同一个父类，而又有子类又分别继承这两个子类数据冗余和二义性2.虚拟继承可以解决菱形继承的二义性和数据冗余的问题。借助虚基表和虚基表指针实现，其中虚基表中存在当前对象相对于基类部分的偏...
原创
2021-08-10 10:23:02
157阅读
一、移除链表中指定的节点题目：/**
* 删除链表中等于给定值 val 的所有节点。
*
* 示例:
* 输入: 1->2->6->3->4->5->6, val = 6
* 输出: 1->2->3->4->5
*/题的描述很简单，做起来并不容易，有一些小坑，要注意的就是头尾的节点的处理和连续相等的情况处理，其它的就非常简单了
转载
2024-09-25 11:45:05
154阅读
Nginx面试三连问: Nginx如何工作？负载均衡策略有哪些？如何限流？ 1、什么是Nginx，谈谈个人都理解，项目中是否用到，为什么要用，有什么优点？Nginx ，是一个 Web 服务器和反向代理服务器用于 HTTP、HTTPS、SMTP、POP3 和 IMAP 协议。主要功能如下：1、正向、反向代理2、负载均衡、分流3、虚拟主机（绑定host）优点：跨平台、配置简单，非阻塞、高并
转载
2024-05-19 05:58:40
25阅读
1、海量日志数据提取出某日访问百度次数最多的IP，怎么做?2、有一个1G大小的文件，里面每一行是一个词，词的大小不超过16字节，内存限制大小是1M。返回频数最高的100个词。3、更智能&更大的数据中心架构与传统的数据仓库架构有何不同?传统的企业数据仓库架构基于 Hadoop 的数据中心架构4、运行Hadoop集群需要哪些守护进程?DataNode，NameNode，TaskTracker和
转载
2023-11-13 06:34:30
91阅读
很多中间件，都用到了 Zookeeper，比如大数据相关那一群小伙伴Kafka、Hadoop、HBase。作为一个分布式协同管理插件，Zookeeper被很多公司使用。又是一不得不学习的技术啊，给大家准备了36个知识点或者说面试题，又可以收藏一波了。1.CAP理论？C : Consistency 一致性,数据在多个副本之间似否能够保持一致的特性。A: Availability 可用性，系统服务必须
转载
2023-12-27 13:12:40
45阅读
Nginx常见面试题1、解释一下什么是Nginx?2、请列举Nginx的一些特性3、解释Nginx如何处理HTTP请求4、在Nginx中，如何使用未定义的服务器名称来阻止处理请求?5、使用“反向代理服务器”的优点6、解释Nginx服务器上的Master和Worker进程7、如何通过不同于80的端口开启Nginx?8、请解释是否有可能将Nginx的错误替换为502错误、503?9、在Nginx中，
转载
2024-02-26 16:59:14
252阅读
