Hadoop是一个开源、高可靠、可扩展的分布式计算框架，主要用来解决海量数据的存储（HDFS）、海量数据的分析（MapReduce）、分布式资源调度（Yarn）等。Hadoop可以用于日志分析、基于海量数据的在线应用、推荐系统、计算广告、复杂算法、网盘和搜索引擎等。Hadoop的起源是Lucence，Lucence是用java编写的，用于实现和Google类似的全文检索功能，Hadoop是2005
转载
2023-07-12 12:38:59
120阅读
PreferenceActivity是一个非常有用的基类，当我们开发Android项目时避免不了选项设置，这些设置习惯用Preference来保存。Android专门为这种Activity提供了便捷的基类PreferenceActivity。如果继承自Preference则不需要自己控制Preference的读写，PreferenceActivity会为我们处理一切。PreferenceActiv
在Test Manager中，测试计划用于管理某个迭代的整个测试工作。包括测试用例、测试结果，计划测试的配置。Test Center分为4个主要活动区域：Plan---用于管理整个测试计划，包括计划的属性，以及构成计划的独立测试集和测试用例。Test---用于浏览可以执行的测试用例列表，从这里可以通过启动测试来执行测试用例，保存测试结果，记录bug等。Track---在Track区可以修改当前正在
编译 : 编译(compilation , compile) 1、
转载
2023-01-06 15:33:44
550阅读
它将任务分为两个阶段：Map 阶段和 Reduce 阶段。Map 阶段将输入数据拆分成键值对，然后应用用户定义的函数进行处理。Reduce 阶段将 Map 阶段的输出进行合并和汇总。MapReduce 适用于离线数据处理，但不适合实时数据处理。3. Spark 技术特点和概述Spark 是一个通用的大数据处理框架，具有以下特点：
4. MapReduce 和 Spark 的区别速度：Spar
转载
2024-07-26 08:03:11
43阅读
什么是Redis？Redis全称（Remote Dictionary Server）； Redis本质上是一个Key-Value类型的内存数据库，整个数据库统统加载在内存当中进行操作，定期通过异步操作把数据库数据flush到硬盘上进行保存。因为是纯内存操作，Redis的性能非常出色，每秒可以处理超过 10万次读写操作，是已知性能最快的Key-Value DB。 Redis的出色之处不仅仅是性能，R
转载
2023-09-06 22:58:43
91阅读
在Hadoop中ApplicationMaster是干什么的？ ...
转载
2021-10-24 12:50:00
239阅读
2评论
Pig包括两部分：用于描述数据流的语言，称为Pig Latin。用于执行Pig Latin程序的执行环境，当前有两个环境：单JVM中的本地执行环境和Hadoop集群上的分布式执行环境。 Pig内部，每个操作或变换是对输入进行数据处理，然后产生输出结果，这些变换操作被转换成一系列MapReduce作业，Pig让程序员不需要知道这些转换具体是如何进行的，这样工程师可以
转载
2023-07-25 00:35:07
138阅读
python是干什么的?书声琅琅Python培训徐老师介绍，最近许多有意向学习的朋友咨询，python挺火的，朋友们都说python语言值得学习，那么python能干什么，我们都知道python可以做人工智能，大数据分析，爬虫等等，下面跟大家聊一聊python能做什么的话题。Python可以做什么?1)网站后端程序员：Python可以用来搭建网站，使得网站易于维护。用Python搭建的有一些网站。
转载
2023-09-12 23:12:35
81阅读
Java是目前世界上最流行的计算机编程语言，是一种可以编写跨平台应用软件的面向对象的程序设计语言。很多应用软件的开发都离不开Java。我们经常提到Java，很多小白只听说过但对其并没有太多具体的了解，随着互联网的快速发展，对于程序员的需求量很大，对于新手来说，现在学习java还来得及吗。那么什么是Java？Java是做什么的？java开发学习需知java是做什么的Java真的这么强大吗？其实，Ja
转载
2023-08-14 16:14:19
127阅读
调研Hadoop颇久，就是想知道hadoop是什么？hadoop能做什么？怎么用hadoop？最主要是这三块，至于投入和风险也会随之出来（浓缩了我几十页的调研方案啊！！！）hadoop是什么？Hadoop是一个开源的框架，可编写和运行分不是应用处理大规模数据，是专为离线和大规模数据分析而设计的，并不适合那种对几个记录随机读写的在线事务处理模式。Hadoop=HDFS（文件系统，数据存
转载
2023-07-12 12:38:51
122阅读
Hadoop组成Hadoop HDFS：一个高可靠、高吞吐量的分布式文件系统，对海量数据的存储。 Hadoop MapReduce：一个分布式的资源调度和离线并行计算框架。 Hadoop Yarn：基于HDFS,用于作业调度和集群资源管理的框架。本篇将学习分布式并行计算框架MapReduce什么是计算框架？计算框架是指实现某项任务或某项工作从开始到结束的计算过程或流的结构。用于去解决或者处理某个复
转载
2023-09-20 10:20:43
55阅读
回发或回调参数无效。在配置中使用 <pages enableEventValidation="true"/> 或在页面中使用 <%@ Page EnableEventValidation="true" %> 启用了事件验证。出于安全目的，此功能验证回发或回 调事件的参数是否来源于最初呈现这些事件的服务器控件。如果数据有效并且是预期的，则使用 ClientScriptMana...
转载
2010-07-09 13:56:00
467阅读
2评论
vuex是干什么的 一、总结 一句话总结： 【状态管理库】：vuex是基于vue框架的一个状态管理库。可以管理复杂应用的数据状态，比如兄弟组件的通信、多层嵌套的组件的传值等等。 1、vuex是干什么的？ 【状态管理库】：vuex是基于vue框架的一个状态管理库。可以管理复杂应用的数据状态，比如兄弟组
转载
2020-03-13 09:30:00
330阅读
2评论
npm 是干什么的 一、总结 一句话总结：包管理工具，比如java的maven，比如php的composer 有些程序员就受不鸟了，一个拥有三大美德的程序员 Isaac Z. Schlueter （以下简称 Isaaz）给出一个解决方案：用一个工具把这些代码集中到一起来管理吧！ 这个工具就是他用 J
转载
2018-11-06 17:07:00
372阅读
网上的 npm 教程主要都在讲怎么安装、配置和使用 npm，却不告诉新人「为什么要使用 npm」。今天我就来讲讲这个话题。本文目标读者是「不太了解 npm 的新人」，大神您别看了，不然又说我啰嗦了 �� 社区程序员自古以来就有社区文化：社区的意思是：拥有共同职业或兴趣的人们，自发组织在一起，通过分享信息和资源进行合作。虚拟社区的参与者经常会在线讨论相关话题，或访问某些网站。 前端程序员也有社区，世
转载
2019-05-03 20:05:00
137阅读
2评论
这是MSDN对HttpContext的说明: HttpContext 类:封装有关个别 HTTP 请求的所有 HTTP 特定的信息。 (网上说是上下文信息,啥又叫上下文呢?个人感觉说的不清不楚) 这是MSDN对它的备注: 为继承 IHttpModule 和 IHttpHandler 接口的类提供了对
转载
2017-06-14 11:35:00
377阅读
2评论
【PMP是干什么的】—— 深入解析PMP认证及考试
PMP，即项目管理专业人士（Project Management Professional），是国际公认的项目管理领域的高级认证。对于从事项目管理工作的人员来说，获得PMP认证不仅是对自身能力的认可，也是职业发展的重要资本。本文将详细介绍PMP认证的相关内容，特别是PMP考试的相关信息。
一、PMP认证的价值
PMP认证是项目管理领域最具权
原创
2023-11-16 12:57:56
79阅读
Kubernetes是一个开源的容器编排引擎，用于管理容器化应用程序的部署、扩展和操作。它允许开发人员在集群中运行、管理和监控容器化应用程序。下面我们来一步步了解Kubernetes的使用。
### 步骤概览
| 步骤 | 描述 |
|------|----------------------------------|
| 1 | 安
原创
2024-04-29 11:35:08
77阅读
Ceph是一个开源的分布式存储系统，旨在提供高性能、高可靠性和高扩展性。它是一个基于对象存储的系统，可以容纳大规模的数据，并且可以实现数据的自动扩容和平衡。Ceph最初由Sage Weil于2004年创建，随后成为一个开源项目，受到广泛关注和应用。
Ceph的核心组件包括RADOS（Reliable Autonomic Distributed Object Store），RBD（RADOS Bl
原创
2024-03-11 11:31:15
122阅读
