查看Linux系统中磁盘空间使用情况及大文件明细查询方法一、查看Linux磁盘空间使用情况：df命令df命令用于显示磁盘分区上的可使用的磁盘空间。默认显示单位为KB。可以利用该命令来获取硬盘被占用了多少空间，目前还剩下多少空间等信息。语法：df(选项)(参数)选项：-a或--all：包含全部的文件系统；
--block-size=<区块大小>：以指定的区块大小来显示区块数目；
-h或-
转载
2024-02-29 14:44:18
287阅读
26 集群使用初步 HDFS的设计思路l 设计思想 分而治之：将大文件、大批量文件，分布式存放在大量服务器上，以便于采取分而治之的方式对海量数据进行运算分析； l 在大数据系统中作用：为各类分布式运算框架（如：mapreduce，spark，tez，……）提供数据存储服务 l 重点概念：文件切块，副本存放，元数据 26.
转载
2024-04-17 09:23:05
464阅读
sudo apt-get install eclipse安装后打开eclipse，提示出错An error has occurred. See the log file /home/pengeorge/.eclipse/org.eclipse.platform_3.7.0_155965261/configuration/1342406790169.log. 查看错误日志然后解决 打开log文件
转载
2024-09-29 17:07:22
53阅读
首先接着上一篇，为什么谷歌设计联系人显示的时候姓名和电话不一起显示？ 这里我们先到谷歌官方看联系人的介绍：The Contacts Provider is an Android content provider component. It maintains three types of data about a person, each of w
1.HDFS Shell基本操作总结 1.1 浏览你的HDFS目录 [root@slave1 bin]# hadoop fs -ls1.2 上传数据到HDFS 上传： [root@slave1 bin]# hadoop fs -put ../conf input 检查已上传的数据： [root@slave1 bin]# hadoop fs input1.3 下载HDFS的数据到本地目录 下载： [
转载
2024-03-18 07:20:12
200阅读
目录1 关于文件权限
2 Centos2.1 关于 su 命令
2.2 用户和组
3 HDFS3.1 将root 添加到 HDFS 的默认组中
3.2 HDFS 组和权限
4 Hive4.1 Sentry 服务
4.2 权限设置和使用
1 关于文件权限# 1 Linux 的文件信息
[hive@cdh1 mysql]$ ll | grep test
drwx------ 2 mysql mysql
转载
2024-06-06 10:04:09
250阅读
实例：<?phprequire_once("../config.php"); // under root if(!is_siteadmin()){ global $COURSE, $USER; $queryrole = $DB->get_records('role_assignments',array('userid'=>$USER->id...
原创
2014-01-10 03:38:09
111阅读
# 使用事务id查看进程id的方法
## 概述
在MySQL中，可以通过事务id（transaction id）查看对应的进程id（process id）。这个功能对于排查数据库中的长事务或锁冲突问题非常有用。在本文中，我将教会你如何实现这个功能。
## 流程图
```mermaid
flowchart TD
A[开始] --> B[查询事务id]
B --> C[查询进程i
原创
2024-02-05 05:10:33
363阅读
今天注册功能遇到个问题。验证码不正确，但是我他妈输入的是正确的验证码啊，我本地测试是好的啊，为什么显示不行呢？更蛋疼的是，有的时候是好的，有的时候不行，nmb。跟源码验证码的实现过程def get(self, request, *args, **kwargs):
"""
获取验证码
---
"""
uid = str(uuid
## 通过 Linux 进程 ID 查看 Docker 容器 ID
在使用 Docker 进行容器化部署时，了解容器的相关信息是非常重要的。在某些情况下，我们可能需要通过进程 ID（PID）来查看与该进程相关联的 Docker 容器 ID。本文将介绍如何通过 Linux 进程 ID 查看 Docker 容器 ID，并提供相应的代码示例。
### 什么是 Docker 容器？
Docker 是
原创
2024-02-01 11:21:19
518阅读
五. NameNode工作机制5.1 NameNode&Secondary NameNode工作机制第一阶段：namenode启动第一次启动namenode格式化后，创建fsimage和edits文件。如果不是第一次启动，直接加载编辑日志和镜像文件到内存。客户端对元数据进行增删改的请求namenode记录操作日志，更新滚动日志。namenode在内存中对数据进行增删改查第二阶段：Secon
转载
2024-08-08 13:37:44
79阅读
在设计一种HDFS模式时,首先应该决定文件的位置.标准化的位置会使得团队之间更容易查找和共享数据. 推荐HDFS目录结构实例.目录结构简化了不同组和用户的权限分配/user/{username}只属于特定用户的数据,JAR包和配置文件.通常是用户在试验中使用的非正式数据,不属于业务流程./user下的目录通常只能由所有者进行读取和写入/etlETL(Extract, Transform and
转载
2024-03-19 23:41:56
29阅读
# CDH通过UI查看HBase索引
## 1. 简介
CDH（Cloudera Distribution for Hadoop）是一种大数据解决方案，其中包含了多个组件，包括HBase。HBase是一种分布式的、可扩展的、面向列的NoSQL数据库。通过CDH的UI界面，我们可以方便地查看HBase的索引。
在本文中，我们将介绍CDH通过UI查看HBase索引的步骤，并给出每一步需要执行的代
原创
2023-09-30 03:59:59
109阅读
ps 命令用于查看当前正在运行的进程ps ax : 显示当前系统进程的列表 ps aux : 显示当前系统进程详细列表以及进程用户-e 显示所有进程,环境变量 此参数的效果和指定"A"参数相同。a 显示终端上地所有进程,包括其他用户地进程-A 显示所有程序。c 列出程序时，显示每个程序真正的指令名称，而不包含路径，参数或常驻服务的标示。 e 列出程序时，显示每个程序
转载
2023-12-15 21:04:04
59阅读
# Docker通过容器ID查看容器
在使用Docker进行容器化部署时，我们常常需要查看已创建的容器信息。Docker提供了多种方式来查看容器，其中一种常用的方式是通过容器ID来查看容器的详细信息。本文将介绍如何使用Docker命令通过容器ID来查看容器，并通过代码示例来说明。
## Docker命令介绍
Docker提供了`docker inspect`命令来查看容器的详细信息。该命令可
原创
2023-08-29 13:04:36
765阅读
     OS:openKylin0.7.5x86_64    blog:师万物(https://blog.51cto.com/shiwanwu) id查看用户信息bashsww@sww:iduid=1000(sww)gid=1000(sww)组=1000(sww
原创
2023-01-07 20:18:11
116阅读
点赞
hub.docker.com上可以保存镜像，但是网速相对较慢，在内部环境中搭建一个私有的公共仓库是个更好的方案，今天我们就来实战搭建私有docker仓库吧；环境规划需要两台机器：docker私服仓库的server和使用docker的普通机器，这两个机器都是centos7版本的server，一台机器名为 centos7-1，ip为192.168.6.78的私有仓库服务器，另一台机器名为ce
转载
2024-06-25 22:04:17
136阅读
本文说明如何在 Parallels 虚拟机上安装 CentOS 7 以及对其的一些基本配置，几个常用配置文件的说明和 JDK, Tomcat 和 Mysql 的安装。CentOS 7 基本配置安装 centos 7首先下载镜像文件，我装的是 CentOS-7-x86_64-Minimal-1708.iso。我从网易的镜像下载，下载完后上传了一份到百度云盘：网易镜像地址：http://mirrors
转载
2024-06-04 10:14:32
27阅读
目的本文档可以作为使用Hadoop分布式文件系统用户的起点，无论是将HDFS应用在一个Hadoop集群中还是作为一个单独的分布式文件系统使用。HDFS被设计成可以马上在许多环境中工作起来，那么一些HDFS的运行知识肯定能大大地帮助你对一个集群做配置改进和诊断。概览HDFS是Hadoop应用的主要分布式存储。一个HDFS集群由一个管理文件系统元数据的NameNode，和存储实际数据的一些Datano
转载
2024-03-10 19:43:23
54阅读
由于centos版本不同，开启端口号方式也不一样，centos6是iptables，centos7是firewall。查看防火墙对外开放了哪些端口#iptables -L -ncentos6.0防火墙操作：配置文件：/etc/sysconfig/iptables开启某个端口号有两种方式：一种是命令方式，一种是修改配置文件方式查看防火墙状态：service iptables status 开启防火墙
转载
2024-06-19 06:56:35
113阅读
