目录简介1. 软件环境2. 虚拟机配置2.1 设置网络IP(NAT模式)2.2 关闭防火墙2.3 永久修改设置主机名2.4 配置映射文件2.5 配置ssh免密登录2.6 安装jdk2.7 关闭selinux 安全模块3.环境准备3.1 私有网络软件仓库3.1.1 上传镜像3.1.2 挂载镜像3.1.3 安装http(如果已经安装可以省略，但是需要启动，一b般最小化安装不会安装此服务)3.1.4
转载
2023-11-28 10:53:47
76阅读
安装cdh6.3.2前言一、配置ssh二、安装jdk三、安装mysql四、安装cm4.1 mysql中建库4.2 安装cm五、安装CDH集群5.1 接受条款和协议5.2 集群安装六、安装spark七、其他配置与安装7.1 修改HDFS的权限检查配置7.2 配置NameNode HA7.3 配置Yarn HA 前言 之前有写过cdh5.x的安装过程，但是这次想体验下在cdh6.3.2下操作的体验
转载
2024-01-17 12:16:36
28阅读
1，概述鸿蒙轻量级偏好数据库-Preferences。 轻量级偏好数据库主要提供轻量级Key-Value键值对形式操作，支持少量数据，数据存在在本地文件中，同时也加载在内存中，所以速度快，效率高，属于非关系型数据库，不宜存储大量数据。 运作机制如图： 约束与限制: （1）Key键为String类型，要求非空且大小不超过80个字符。 （2）如果Value值为String类型，可以为空但是长度不超过8
转载
2024-03-29 09:34:21
47阅读
## 如何实现“CDH连接Hive数据库”
### 一、流程概述
在CDH（Cloudera Distribution for Hadoop）环境中，连接Hive数据库需要经过一系列步骤。下面是详细的流程表格：
| 步骤 | 描述 |
| --- | --- |
| 步骤一 | 安装Hive客户端 |
| 步骤二 | 配置Hive连接属性 |
| 步骤三 | 连接Hive数据库 |
###
原创
2023-11-18 13:28:45
193阅读
一旦发现英雄也会落井，投石的人格外勇敢，人群会格外拥挤。
原创
2022-09-21 22:21:13
986阅读
关系模式中的各属性之间的相互依赖，相互制约的联系称为数据依赖。数据依赖一般分为函数依赖，多值依赖，连接依赖，最重要的是函数依赖。 1.函数依赖是关系模式中属性之间的一种逻辑依赖关系。下面是展示的3个关系示例：学生关系：S(SNO,SN,AGE,DEPT); 选课关系：SC(SNO,CNO,SCORE); 系关系：D(DEPT,MN)
转载
2023-09-06 17:29:43
75阅读
# CDH Hive元数据库更换指南
在大数据领域，Hive作为一个非常重要的项目，主要用于数据仓库和分析。CDH（Cloudera Distribution including Apache Hadoop）是一个流行的分布式数据处理框架，其中包括Hive。在生产环境中，可能由于性能、安全或其他原因，需要更换Hive的元数据库。本文将详细介绍在CDH中更换Hive元数据库的步骤。
## 什么是
原创
2024-09-03 04:18:10
168阅读
1、数据库概述数据库库是存储、调用、分析数据的仓库，主要分为关系型数据库管理系统（RDBMS）与非关系型数据库管理系统两类关系数据库是数据库应用的主流关系型数据库以行和列的形式存储数据，这一系列的行和列被称为表，一组表组成数据库。目前主流关系型数据库有Oracle、DB2、Microsoft SQL Server、MySQL等。操作关系型数据库时使用的语言叫结构化查询语句，简称SQL结构化查询语言
转载
2023-08-22 01:15:24
69阅读
一、部署前的准备 1、检查jdk是否安装：参考jdk安装配置文档（jdk7或jdk8，所有节点都要一致）2、兼容性建议：CentOS6.8+CDH5.11.x(x>1)+mysql5.x+jdk1.7u80***CDH5.13以上包含kafka3.0，不支持jdk1.7******CDH不支持ipv6，需提前关闭***二、在线安装 （不推荐，安装慢，失败率高，原因你懂
转载
2024-01-29 11:52:16
87阅读
Oracle数据库表恢复模式 此方式将根据按照表模式备份的数据进行恢复。 A. 恢复备份数据的全部内容 若从本地文件恢复，使用如下命令： imp icdmain/icd fromuser=icdmain touser=icdmain rows=y indexes=n
commit=y buffer=65536 feedback=100000 ignore=n volsize=0
f
转载
2023-11-20 11:53:03
94阅读
步骤5：设置Cloudera Manager数据库Cloudera Manager Server包含一个可以为自己创建和配置数据库的脚本。该脚本可以：创建Cloudera Manager Server数据库配置文件。（MariaDB，MySQL和PostgreSQL）为Cloudera Manager Server创建和配置数据库以供使用。（MariaDB，MySQL和PostgreSQL）为Cl
转载
2023-07-29 19:34:35
193阅读
CDH Hive是一个常用的大数据分析工具，用于对大规模数据进行查询和分析。在使用CDH Hive时，我们经常会遇到需要迁移元数据库的情况。本文将介绍如何迁移CDH Hive的元数据库，并提供示例和详细步骤。
首先，我们来了解一下CDH Hive的元数据库。元数据库是Hive用来存储表、分区、列和其他元数据信息的数据库。元数据库的重要性在于它保存了Hive表的结构和数据信息，方便用户进行查询和分
原创
2024-01-03 11:13:23
215阅读
本章内容为考核部分：20分 请认真学习 还在更新（一）为什么要有数据依赖？李优老师说：若把不相关的数据建立关联，那么可以想象以下例子：学校有10000个学生，三院有3000个学生，若每个学生选课都和校长或系主任名字联系在一起，那么会出现，当校长和系主任换人时，要更改上万次学生信息。最好是只出现一次。数据冗余+更新异常+插入异常+删除异常（二）概念分类 1. 函数依
转载
2023-10-17 07:50:25
55阅读
1.CDH的启动关闭顺序1.1启动顺序第一步:先启动Mysql service mysql start第二步hadoop001再启动Server：/opt/cloudera-manager/cm-5.16.2/etc/init.d/cloudera-scm-server start第三步hadoop001-003再启动Agent:/opt/cloudera-manager/cm-5.16.2/et
转载
2023-12-06 20:16:45
174阅读
1.停止所有服务2.停止Cloudera Management Service服务3.登录CM所在服务器，停止cloudera-s
原创
2023-05-08 14:08:55
607阅读
配置要求如下： Hadoop 2.x 部署 * Local Mode * Distributed Mode * 伪分布式 一台机器，运
转载
2024-02-03 10:14:34
38阅读
首先进入安装主页面 之后点击下面的我同意协议进入勾选界面： 勾选界面这里有3个类型：Typical（典型）、Complete（完全）、Custom（自定义）。如果选择Typical（典型）会默认安装在C盘录屏中，你也可以选择Custom（自定义）安装到指定目录中； 之后进入安装，安装后进入配置界面 可以选择两种配置类型：Detailed Configuration（详细配置）和Standard C
转载
2024-05-31 19:38:24
71阅读
目录Spring自带的数据源(DriverMangerDataSource)数据源配置xml文件：db.properties的配置文件如下：DBCP数据源Maven依赖配置：数据源配置xml文件：属性说明：db.properties的配置文件如下：C3P0数据源Maven依赖配置：数据源配置xml文件：配置属性说明：db.properties的配置文件如下：Spring自带的数据源(DriverM
转载
2024-03-03 14:36:12
143阅读
1、构建 mariadb 数据库服务器 1）装包 mariadb-server、mariadb [root@mar ~]## yum -y install mariadb-server mariadb 2）起服务 mariadb [root@mar ~]# systemctl enable mariadb --now 3）查看数据库状态 [root@mar ~]# systemctl status
转载
2024-03-07 12:54:03
54阅读
文章目录数据库优化一、数据库硬件优化（选型）1.一般数据库选择2.数据库类型3.硬件选型1）CPU选型2）内存选择3）磁盘选择4）存储选择（一般大型企业）5）网络选择4.操作系统优化1）Swap调整2）IO调度策略5.应用端优化二、创建数据库1.创建一个库一个表，并插入100万数据2.查看数据可用性3.进行压力测试三、数据库参数优化1.Max_connections2.back_log3.wai
转载
2023-10-28 14:00:04
23阅读
