Hadoop-HDFSHadoop历史Hadoop进化史NutchHadoop最早起源于Nutch。Nutch的设计目标是构建一个大型的全网搜索引擎，包括网页抓取、索引、查询等功能但随着抓取网页数量的增加，遇到了严重的可扩展性问题——如何解决数十亿网页的存储和索 引问题。Google2003年、2004年谷歌发表的两篇论文为该问题提供了可行的解决方案。GFS : Google File Syste
2.1 操作系统的启动(1)CPU, I/O, 内存通过总线连接。 (2)DISK:存放OS； BIOS：基本I/O处理系统( basic I/O system); Bootloader: 加载OS到内存中。 (3)当电脑通电时，段寄存器CS和指令寄存器IP能够确定一个内存地址，例如CS:IP = 0xf000:fff0. (4)POST(加电自检)，寻找显卡和执行BIOS。(显示器，键盘…是否正
目录OS操作系统系列文章目录第二章：启动、中断、异常和系统调用计算机的启动过程中断、异常、系统调用中断（异步）异常（同步）系统调用（异步或同步）区别 第二章：启动、中断、异常和系统调用 计算机的启动过程 CPU、I/O、内存 通过总线连接； Disk（硬盘）：存放OS和Bootloader； BIOS（基于I/O处理系统）：开机自检外设，并加载相应的软件进行执行； Bootloader：加载
转载
2023-10-27 10:12:06
114阅读
如何找到IntelliJ IDEA中的Java版本
在开始解决这个问题之前，我们首先需要了解整个过程的流程。下面是一个简单的表格展示了查找IntelliJ IDEA中的Java版本的步骤：
| 步骤 | 描述 |
| ------ | --------------------------------
谢谢您的参考，如有疑问，欢迎交流一、 模块简介 1. 概念n个.py文件组成的代码集合就称为模块，用于实现各种复杂的功能模块就是一个文件dir（模块名）：可以查看模块的使用方法 2. 分类自定义模块、内置模块、第三方模块（http://pypi.python.org） 3. 导入模块导入模块其实就是告诉Python解释器去解释那个py文件，Import 
转载
2023-09-26 20:14:25
60阅读
# 如何在Docker中找到Nginx目录
## 概述
本文将向刚入行的开发者介绍如何在Docker容器中找到Nginx的目录。我们将通过一系列步骤来讲解这个过程，并提供相应的代码和解释。
## 步骤概览
下面是实现这个目标的步骤概览：
| 步骤 | 描述 |
| --- | --- |
| 1 | 创建一个Nginx容器 |
| 2 | 进入容器的shell环境 |
| 3 | 查看Ngi
原创
2023-08-25 04:57:47
142阅读
ngrok的配置使用什么是ngrok？为什么要使用ngrok使用准备 什么是ngrok？ngrok 是一个反向代理，通过在公共的端点和本地运行的 Web 服务器之间建立一个安全的通道。为什么要使用ngrok作为一个web开发者，有时我们需要将本地的web网站部署到外网，供给客户体验评价，测试功能等等。通常我们会这么做：找到一台运行于外网的Web服务器；服务器上有网站所需要的环境，否则自行搭建；将
文章目录容器（Container）传统虚拟化与容器的区别Linux 容器技术Linux NamespacesCGroupsLXCdocker 基本概念docker 工作方式docker 容器编排 容器（Container）容器是一种基础工具；泛指任何可以用于容纳其他物品的工具，可以部分或完全封闭，被用于容纳、储存、运输物品；物体可以被放置在容器中，而容器则可以保护内容物；人类使用容器的历史至少有
# MongoDB中的db_host在哪里？
## 引言
在使用MongoDB时，有时候我们需要知道数据库连接的主机地址(db_host)。对于刚入行的开发者来说，可能不太清楚如何找到这个信息。本文将指导你如何在MongoDB中找到db_host，并提供详细的步骤和代码示例。
## 整体流程
下面是在MongoDB中找到db_host的整体流程：
| 步骤 | 描述 |
| --- | --
原创
2023-08-15 19:46:34
214阅读
# 如何找到Anaconda3里面的Python
## 流程概述
为了找到Anaconda3里面的Python，需要按照以下步骤进行操作：
1. 安装Anaconda3
2. 配置Anaconda3环境变量
3. 打开命令行窗口
4. 输入命令找到Anaconda3中的Python可执行文件路径
下面将逐步详细介绍每个步骤以及需要执行的代码和相应的解释。
## 步骤详解
### 1.
原创
2023-10-26 08:55:12
160阅读
sys模块的功能sys是python中较为常用的一个模块，他提供了对python脚本运行时的环境的操作。 sys功能：1 sys.argv #将python脚本运行时的脚本名以及参数作为一个list，并输出。# test_py.py文件
#/usr/bin/python3
import sys
print('the scrip
转载
2023-06-21 10:57:58
53阅读
# Java类的属性存储在哪里？
在Java中，类是对象的蓝图，而对象则是类的实例。每个类可以包含属性（也称为字段）和方法。本文将讨论Java类的属性如何存储，并提供相应的代码示例。
## 属性的定义与存储
Java类中的属性通常定义在类的内部。属性可以是基本数据类型（如int、double等）或引用类型（如String、数组等）。这些属性在内存中存储时，主要分为两个部分：**方法区**和*
生产上的 Linux 服务器磁盘空间不足，后面排查得知是某个应用频繁写 log 导致。于是加了一条自动清理过期日志的 crontab 。具体的排查过程记录如下，都是很基础的命令。一、dfdf -h 命令查看当前磁盘空间的使用情况：# df -h
Filesystem Size Used Avail Use% Mounted on
/dev/vda1 50G 50G 0G 100% /
devtmp
相信对于大多数熟悉Python的人来说，一定都听说并且使用过pip这个工具，但是对它的了解可能还不一定是非常的透彻，今天小编就来为大家介绍10个使用pip的小技巧，相信对大家以后管理和使用Python当中的标准库会有帮助。安装当然在Python 3.4版本之后以及Python 2.7.9版本之后，官网的安装包当中就已经自带了pip，用户直接在安装完Python之后就可以直接使用，要是使用由virt
Session
Session，也称会话状态，Servlet提供了一个HttpSession接口来支持会话状态的维持。Session的发明是为了填补HTTP协议的局限。HTTP协议是如何工作的--用户发出请求，服务器作出响应，这种用户端和服务器端的联系就是离散的，非连续的。HTTP协议不能提供允许服务器跟踪用户请求的功能。在服务器端完成响应用户的请求之后，服务器不能继续与该浏览器继续保持连接。从
简介 HDFS（Hadoop Distributed File System ）Hadoop 分布式文件系统。是根据 google 发 表的论文翻版的。论文为 GFS（Google File System）Google 文件系统。HDFS 有很多特点：① 保存多个副本，且提供容错机制，副本丢失或宕机自动恢复。默认存 3 份。② 运行在廉价的机器上。③ 适合大数据的处理。多大？多小？HDFS 默认会
# 修改Android系统设备名称的步骤
为了帮助你了解如何在Android系统中修改设备名称，我将详细介绍整个过程并提供相应的代码示例。下面是每个步骤的详细说明。
## 步骤一：了解设备名称在Android系统中的位置
在Android系统中，设备名称存储在系统属性（System Property）中，具体位置为`ro.product.model`。我们需要通过修改该属性来改变设备名称。
Java和C++在内存分配上有一些区别，尤其是数组的创建方面，这里来梳理一下这两者的区别。1.JAVA 数组注：必须规定数组的长度，且数组长度终生不变，数组必须先初始化才可以使用，初始化的时候会分配内存；动态初始化和静态初始化不能同时存在。1.1创建一维数组动态初始化：只指定数组的长度，具体数据不指定；此时数组元素的值是缺省值.语法规则：数据类型[] 数组名 = new 数据类型[数组长
对于线上生产环境的HDFS，开启回收站功能是必不可少的。该功能类似于linux系统的回收站设计，HDFS会为每个用户创建一个专属的回收站目录（/user/${user.name}/.Trash），用户删除文件时，实际上是被移动到了回收站目录。用于预防当用户误删HDFS上的数据时，能够及时从回收站恢复这些数据（当然回收站是防不住删库跑路的）。一. 参数介绍<name>fs.trash.i
转载
2023-10-05 21:49:14
63阅读
1.数据库操作1.1选择和创建数据库的语法格式：use 数据库名称如果数据库不存在则自动创建查看有权限查看的所有数据库命令：show dbs或show databases注意：在MongoDB中，集合只有在内容插入后才会创建！就是说，创建集合（数据表）后要再插入一个文档（记录），集合才会真正创建。查看当前正在使用的数据库命令：dbMongoDB中默认的数据库为test，如果你没有选择数据库，集合将
转载
2023-06-21 22:38:23
99阅读
