1. hadoop 生态概况Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。具有可靠、高效、可伸缩的特点。Hadoop的核心是YARN,HDFS和Mapreduce下图是hadoop生态系统，集成spark生态圈。在未来一段时间内，hadoop将于spark共存，hadoop与spark
转载
2023-09-14 13:45:52
62阅读
文章目录一、概述二、Hue架构三、Hue安装1）安装数据源2）安装docker3）通过Docker快速安装3）通过CM安装集成到CDH1、添加服务2、将 Hue 服务添加到 CDH3、自定义角色分配4、数据库设置5、安装完成6、启动hue服务7、创建账户4）官方demo演示四、Hue简单使用1）通过Hue操作HDFS2）通过Hue操作Impala3）通过Hue操作Hive 一、概述Hue是一个开
转载
2024-01-09 21:54:00
130阅读
HadoopHadoop是一款开源的大数据通用处理平台，其提供了3个组件，分别是HDFS分布式文件系统、YARN分布式资源调度、MapReduce分布式离线计算。MapReduce适合大规模的数据同时对实时性要求不高的场景，不适合大量的小文件以及频繁修改的文件。Hadoop的特点1.水平扩展：Hadoop集群可以达到上千个节点，同时能够动态的新增和删除节点，能够存储和处理PB级的数据量。2.低成本
转载
2020-08-27 15:25:32
1230阅读
点赞
OSPF（Open Shortest Path First）是一种动态路由协议，常用于互联网中的路由选择。OSPF通过计算最短路径来确定数据包的传输路径，从而提高网络的效率和性能。华为作为全球领先的通信技术解决方案提供商，也为其用户提供了相关的OSPF讲解视频，帮助用户更好地理解和应用这一技术。
OSPF讲解视频通过详细的演示和讲解，帮助用户了解OSPF协议的原理、工作方式、配置方法以及故障排除
原创
2024-03-06 09:38:45
45阅读
How to use a scalable Git branching model called Gitflow git视频合集列表 github大本营 gitflow中文备忘清单 关于 git-flow 是一个 git 扩展集，按 Vincent Driessen 的分支模型提供高层次的库操作。
转载
2018-10-12 14:10:00
140阅读
2评论
视频特点蓝光画质，界面尺寸最佳倍速播放，控制速度快慢现场评分，均为满分讲解要点提示，抓住操作重点按键提示，操作准确无误视频截图预览图1：要点提示为了帮助同学理解操作原理，大猫老师在讲解重要步骤时，均配有要点提示，能够极大的方便考生学习图2：字幕说明关键性操作配有字幕说明，最大程度的帮助学生理解操作。图3：现场评分每一个讲解视频，均为现场评分满分
原创
2022-10-17 06:34:23
67阅读
Kubernetes（简称K8S）是一个用于自动化部署、扩展和管理容器化应用程序的开源平台。本文将从头开始讲解Kubernetes的关键概念和基本步骤，并附带代码示例。
## 1. 准备工作
在开始之前，需要确保已经完成以下准备工作：
- 安装Docker：Kubernetes使用Docker容器化应用程序，因此需要先安装Docker。
- 安装Kubernetes：下载并安装合适的Kuber
原创
2024-01-25 16:14:42
82阅读
Redis详解及使用前言：对于缓存这个概念大家应该都清除，在项目开发中，为了避免用户频繁请求数据库，比如类似于淘宝这样的大量请求下，导致服务器的数据库访问压力过大导致崩溃，因此我们通过设置缓存来解决数据库压力过大的问题；此篇博客将主要对于redis缓存进行介绍1.redis简介redis概念Redis 是速度非常快的非关系型（NoSQL）内存键值数据库，可以存储键和五种不同类型的值之间的映射；键的
转载
2023-07-10 19:02:07
35阅读
一、hadoop的概念（1）什么是大数据 大数据是不能用传统的计算技术处理的大型数据集的集合。它不是一个单一的技术或工具，而是涉及的业务和技术的许多领域。 （2）hadoop的定义 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 Hadoop的框架最核心的设计就是：HDFS和MapReduce。HDFS为海量的数据提供了存储，则MapReduce为海量的数据提供
转载
2023-07-24 13:17:54
75阅读
文章目录容器和传统虚拟机的区别容器架构图传统虚拟机架构图Docker的优势高效资源利用快速启动环境一致持续交付和部署轻松迁移维护扩展总结 容器和传统虚拟机的区别传统虚拟机技术是虚拟出一套硬件后， 在其上运行一个完整操作系统， 在该系统上再运行所需应用进程; 而容器内的应用进程直接运行于宿主的内核， 容器内没有自己的内核， 而且也没有进行硬件虚拟。 因此容器比传统虚拟机更为轻便。容器架构图传统虚拟
转载
2023-07-11 23:42:44
41阅读
文章目录〇、要点一、概念1.1 Hadoop是什么1.2 Hadoop发展历史1.3 Hadoop的三大发行版本1.4 Hadoop的优势1.5 Hadoop的组成1.5.1 HDFS架构概述1.5.2 Yarn架构概述1.5.3 MapReduce架构概述1.5.4 HDFS、Yarn、MapReduce三者的关系1.6 大数据技术生态体系1.7 推荐系统案例二、环境准备2.1 模板
转载
2023-12-08 12:52:43
26阅读
p01 课程整体介绍p02 大数据的概念p03大数据的特点p04 05 大数据应用场景p06 未来工作内容p07hadoop入门 课程介绍p08 09 hadoop是什么p 10 hadoop3大发行版本p11 hadoop优势p12 hadoop 1 2 3版本区别p13 HDFS概述NameNode DataNode SecondNameNodep14 Hadoop入门 YARN概述Resou
转载
2023-09-22 13:31:31
85阅读
所谓视频，其实就是将一张一张的图片连续的放出来，就像放幻灯片一样，由于人眼的惰性，
转载
2022-06-14 11:00:58
179阅读
一.先让我为大家介绍一下BIOS。
系统开机启动 BIOS，即微机的基本输入输出系统(Basic Input-Output System)，是集成在主板上的一个ROM芯片，其中保存有微机系统 最重要的基本输入/输出程序、系统信息设置、开机上电自检程序和系统启动
转载
2023-09-15 08:32:41
217阅读
1859b99d79e BERT代码(源码)从零解读【Pytorch-手把手教你从零实现一个BER
原创
2023-10-31 14:07:19
76阅读
华为是一家全球领先的通信技术解决方案提供商，其产品和服务广泛应用于电信运营商、企业和消费者市场。作为网络领域的巨头，华为一直致力于推动行业的创新和发展。在网络虚拟化方面，华为引领着行业的发展，为用户提供了许多先进的解决方案，其中包括了VXLAN技术。
VXLAN是Virtual eXtensible LAN的缩写，它是一种多租户的数据中心互联技术。在传统的数据中心网络中，由于物理网络的限制，无法
原创
2024-02-06 10:10:07
91阅读
着重介绍了HDFS运行了示例程序wordcount，自己也试了一遍（用的伪分布式）1.建立数据（和讲师的操作有些不一样，不过我相信自己）2.运行wordcount程序3.查看结果（可以看出来，只要没空格，它都看作是一个单词） 接下来介绍了50030和50070查看任务和HDFS状态......其中如果想看日志的话除了命令行也可以直接输入http://localhost:50070/log
转载
2023-09-22 13:24:22
63阅读
Docker镜像讲解镜像是什么镜像是一种轻量级、可执行的独立软件包，用来打包软件运行环境和基于运行环境开发的软件，它包含运行某个软件所需的所有内容：代码、库、环境变量、配置文件等。所有应用，直接打包成Docker镜像，就可以直接跑起来。Docker镜像加载原理UnionFS （联合文件系统）UnionFS是一种分层、轻量级并且高性能的文件系统，它支持对文件系统的修改作为一次提交来一层层的叠加，同时
转载
2023-09-11 10:19:04
69阅读
目录 第一章 认识Redis一.认识NoSQL(非关系型数据库) 1.数据结构，SQL是结构化(Structured) 2.数据关联，SQL是关联的（Relational)3.查询方式4.事务特征5.存储方式6.扩展性7.使用场景 二.认识Redis1.Redis(Remote Dictonary Server)：远程词典服务器，是一个基于内在的
转载
2023-05-22 15:32:32
85阅读
Docker安装使用官方安装脚本自动安装安装命令如下：curl -fsSL https://get.docker.com | bash -s docker --mirror aliyun也可以使用国内 daocloud 一键安装命令：curl -sSL https://get.daocloud.io/docker | sh手动安装卸载旧版本较旧的 Docker 版本称为 docker 或 dock
转载
2023-09-12 16:10:30
155阅读
