core-site.xmlcd /export/servers/hadoop-2.6.0-cdh5.14.0/etc/hadoopvim core-site.xml <property><name>hadoop.proxyuser.root.hosts</name><value>*</value></property><
原创
2022-01-18 16:20:41
150阅读
core-site.xmlcd /export/servers/hadoop-2.6.0-cdh5.14.0/etc/hadoopvim core-site.xml <property><name>hadoop.proxyuser.root.hosts</name><value>*</value></property><property><name>hadoop.proxyuser.root.gr
原创
2021-08-30 10:49:30
187阅读
HDFS集群中机器的角色：两类核心角色： 主节点（1台）：NAME NODE 从节点（N台）：DATA NODEHDFS安装：一、准备N台机器：比如4台 1台namenode 3台datanode准备内容：（主机名，ip，域名映射，防火墙，jdk）主机名：vi /etc/sysconfig/network ip地址：vi /etc/sysconfig/network-scripts/ifcfg
转载
2024-02-10 15:48:54
79阅读
相信大家在看了《Hue的安装,配置,编译》之后,都已经成功把Hue安装好了。 接下来,小菌为大家分享的是如何在Hue上集成HDFS! ...
原创
2021-06-01 14:11:01
345阅读
文章目录一、前置工作二、HDFS集群环境部署1.查看Hadoop安装包目录结构2.修改配置文件，应用自定义设置2.1 配置workers文件2.2 配置hadoop-env.sh文件2.3 配置core-site.xml文件2.4 配置hdfs-site.xml文件3. 准备数据目录4.配置SSH免密登录5.授权6.格式化整个文件系统7.启动8.查看HDFS WEBUI 一、前置工作请确认已经完
相信大家在看了《Hue的安装,配置,编译》之后,都已经成功把Hue安装好了。 接下来,小菌为大家分享的是如何在Hue上集成HDFS! &
原创
2022-04-01 10:28:08
230阅读
背景:因为每次使用hdfs和hive的时候都需要进入hdfs的页面和hive的客户端才能查看并进行操作很麻烦,所以采用hue来集成hdfs和hive,这里先接受hue与hdfs的集成,下次在写hue与hive的集成 HUE的下载地址: https://github.com/cloudera/hue/ ...
转载
2021-07-26 15:28:00
304阅读
点赞
注意:注意修改完HDFS相关配置后，需要把配置scp给集群中每台机器，重启hdfs集群。安装教程看我前面的博客.下面开始集成HDFS教程修改hadoop的配置文件进入hadoop配置文件目录cd /export/servers/hadoop-2.6.0-cdh5.14.0/etc/hadoop/修改core-site.xml配置<!--允许通过httpfs方式访问...
原创
2021-12-29 14:18:53
325阅读
1.Hadoop的相关配置文件的修改修改etc/hadoop/core-site.xml 文件<?xml ver
原创
2023-01-09 17:31:05
136阅读
安装Sentry官网:https://www.cloudera.com/documentation/enterprise/5-11-x/topics/sg_sentry_service_config.html修改hive主目录权限[root@note01 cdh5.16.2]# sudo -u hdfs hdfs dfs -chmod -R 771 /user/hive/warehouse...
原创
2022-02-15 14:36:23
258阅读
安装Sentry官网:https://www.cloudera.com/documentation/enterprise/5-11-x/topics/sg_sentry_service_config.html修改hive主目录权限[root@note01 cdh5.16.2]# sudo -u hdfs hdfs dfs -chmod -R 771 /user/hive/warehouse...
原创
2021-06-03 22:52:56
703阅读
注意:注意修改完HDFS相关配置后，需要把配置scp给集群中每台机器，重启hdfs集群。安装教程看我前面的博客.下面开始集成HDFS教程修改hadoop的配置文件进入hadoop配置文件目录cd /export/servers/hadoop-2.6.0-cdh5.14.0/etc/hadoop/修改core-site.xml配置<!--允许通过httpfs方式访问...
原创
2022-02-16 16:43:02
301阅读
一、说明 本次配置基于上一篇博客《Hadoop完全分布式搭建全过程》做补充，基于完全分布式做高可用搭建。。。。。。二、原理 产生背景：Hadoop 1.0中HDFS和MapReduce在高可用、扩展性等方面存在问题 HDFS存在的问题 NameNode单点故障，难以应用于在线场景 HA NameNode压力过大，
转载
2024-02-23 11:26:04
164阅读
1.hadoop安全机制历史 在Hadoop1.0.0或者CDH3 版本之前， hadoop并不存在安全认证一说。默认集群内所有的节点都是可靠的，值得信赖的。用户与HDFS或者M/R进行交互时并不需要进行验证。导致存在恶意用户伪装成真正的用户或者服务器入侵到hadoop集群上，恶意的提交作业，修改JobTracker状态，篡改HDFS上的数据，伪装成NameN
转载
2024-09-09 17:52:18
114阅读
说明本文用的是gethue/hue image起的docker容器，版本为hue 4.3.0，镜像本身没有kerberos组件，需自行安装。 在用hue连接hive时遇到kerberos认证问题，报错如下： Could not start SASL:Error in sasl_client_start (-1) SASL (-1): generic failure:GSSAPI Error: Un
转载
2023-06-21 10:35:27
537阅读
# 如何配置Hue的Hive服务主机
## 引言
在使用Hue进行大数据开发时，我们经常需要连接Hive服务。为了能够成功连接到Hive服务，我们需要进行一些配置。本文将指导开发者如何配置Hue的Hive服务主机。
## 配置流程
下面是配置Hue的Hive服务主机的步骤概览：
| 步骤 | 操作 |
| ---- | ---- |
| 步骤 1 | 打开Hue配置文件 |
| 步骤 2
原创
2023-12-21 08:19:16
118阅读
安装目录以及各个版本大数据安装版本软件版本备注hadoophadoop-3.3.4hdfs基础sparkspark-3.2.4-bin-hadoop3.2计算框架zookeeperapache-zookeeper-3.5.7-bin分布式服务器hbasehbase-2.5.7-hadoop3列式存储hiveapache-hive-3.1.3-bin数仓元数据创建文件cd /export/serve
转载
2024-09-20 18:03:33
50阅读
qaz ...
转载
2021-10-14 15:24:00
188阅读
2评论
# 使用 Hue 配置 HBase 的完整指南
在大数据生态系统中，HBase 是一个强大的列式存储系统，而 Hue 是一个用户友好的界面，可以帮助我们更容易地与 HBase 进行交互。本文将带你了解如何配置 Hue 并连接到 HBase，确保在整个过程中都能清晰明了。
## 整体流程
在开始之前，让我们先了解一下整个配置的流程。下表总结了每一个步骤：
| 步骤 | 描述
原创
2024-09-20 11:06:36
128阅读
# Hue 配置 MySQL 的实践指南
Hue（Hadoop用户体验）是一个开源工具，它提供了一个友好的Web界面，用于方便地查询Hadoop生态系统中的数据。它不仅支持Apache Hive、Pig等工具，还可以与关系型数据库如MySQL进行集成。在本文中，我们将探讨如何配置Hue以连接MySQL，并提供相应的代码示例及甘特图，以帮助读者更好地理解这个过程。
## 1. 准备工作
在配置
