一直在调研一个轻量级开源的 BI 系统。之前我们生产环境使用的 aliyun 的 QuickBi，也调研了另外一个 airflow 的开源商业智能 superset。不得不承认 QuickBI 正在日益完善变得好用，但是因其重量级，不灵活，支持数据源单一（比如普通版本只支持 自建 MySQL | RDS 阿里云内部的一些组件）superset 有类似问题。不支持 Hive(高级版支持) | Pre
转载
2024-10-23 22:23:37
21阅读
GDH6.0.0安装步骤一、概述CDH，全称Cloudera’s Distribution, including Apache Hadoop。是Hadoop众多分支中对应中的一种，由Cloudera维护，基于稳定版本的Apache Hadoop构建，提供了Hadoop的核心（可扩展存储、分布式计算），最为重要的是提供基于web的用户界面。CDH的优点：版本划分清晰，更新速度快，支持Kerberos
转载
2023-11-30 14:48:13
180阅读
一 docker部署cdh-5.x cloudera/quickstart cloudera/clusterdock 二 docker部署cdh-6.x cdh安装包下载docker拉取centos7镜像 docker pull centos:7.7.1908启动docker container 2.1 设置网桥 docker network create --subnet=172.18.0.0/
转载
2023-10-13 15:36:59
185阅读
# 使用 Docker 部署 CDH（Cloudera Distribution of Hadoop）
随着大数据技术的普及，许多企业选择使用 Hadoop 生态系统来处理和分析大量数据。CDH（Cloudera Distribution of Hadoop）是一个流行的 Hadoop 分发版，方便用户快速构建和部署 Hadoop 环境。本文将介绍如何使用 Docker 部署 CDH，并提供相应
https://www.bbsmax.com/A/n2d9QNb6dD/ cloudera manager(CDH)实践 http://www.aidnoob.com/cdh/cdh5/ CDH5离线安装文档 上面是另外部署cdh的几种方式环境：ContOS6.7 安装docker1.虚拟机安装CentOS6.7 2.安装dockeryum install -y epel-release
yum
转载
2024-01-06 17:13:11
62阅读
一、Docker Compose容器编排 1、Docker Compose概念及作用 Docker Compose 的前身是Fig，它是一个定义及运行多个容器的工具 使用Docker Compose不再需要使用shell脚本来启动容器 通过Docker Compose可以使用YML文件来配置应用程序所需要的的所有服务 Docker Compose非常适合组合使用多个容器进行开发的场景2、YML文件
转载
2024-10-25 10:09:44
70阅读
前面记录了两篇HDFS理论的笔记，对于大数据技术的操作，都是在公司工作中进行的，无法将其展示在自己的博客中。今天自己电脑上搭建一个CDH环境，以便于后面的编码实操，帮助自己做个记录。MAC OS安装Docker下载&安装我使用的是FlashDownLoad这个软件，类似迅雷，但是不会被限速。将下载地址放到下载软件中就行。docker的下载地址: https://download.docke
转载
2023-06-15 14:43:41
170阅读
## Docker 可以部署 JMeter 吗？
### 什么是 Docker？
Docker 是一个开源的软件平台，用于在容器中自动化打包、发布和部署应用程序。它利用容器技术，将应用程序及其所有依赖项打包到一个容器中，从而实现应用程序在不同环境中的快速部署和移植。
### JMeter 是什么？
JMeter 是一个功能强大的压力测试工具，用于测试 Web 应用程序的性能和负载。它可以模
原创
2024-02-23 05:47:14
48阅读
目录1. Docker为什么会出现2. Docker概述 3. Docker优势和特点4. Docker容器与虚拟机区别5. Docker官网和仓库地址6. Docker基本组成1. Docker为什么会出现对于传统的开发运维中，在软件开发/测试结束后，开发仅需要把代码打包，然后告诉运维用了哪些配置和软件环境，让运维进行配置。尽管如此运维也容易出现部署失败的情况。Docker 的出现打破
转载
2024-10-08 11:25:21
27阅读
文/dMei迅雷升级啦！对已不是新手的玩家来说，这无疑是一个好消息，从发现迅雷下载工具开始，我就成为了其忠实的使用者啦。迅雷以前的版本除了可降低死链、支持多节点断点续传、支持各节点自动路由、支持从多节点多服务器同时传送、智能节点分析等特点外，这次又增加了什么新特色呢？废话少说，还是从新浪下载后同我一起来体验一下新惊喜吧！在线自动升级：这个不用我说，相信大家都了解吧，我以前都是用迅雷，所以需要更新一
前言：两个月前的16年11月份完成的配置，使用的solr6.1和zookeeper3.4，刚刚写成blog，目前版本可能有小版本的变化。 本例完成结果为：在docker环境下部署solrcloud集群，同时使用zookeeper集群做配置管理。 一、部署zookeeper集群1、加载images，（两种方式：A下载offical版本zookeeper，B加载导出的t
转载
2023-08-05 21:05:12
237阅读
目的
如果真对一个项目，做高负载，高可用，高性能部署方案。以互联网上一个开源项目为例，一起说说分布式集群运维部署整个过程。
大型项目
如果采用单节点，首选性能会很差，其次因为没有冗余节点，一旦某个节点的宕机，就会出现整个系统的业务停机。所有集群话的方案是必然的， 准备采用5节点的mysql集群，6节点的redis集群，3节点的tomcat集群，2个节点的ng
转载
2024-07-04 15:10:29
59阅读
大家好，我是大澈！本文约1800+字，整篇阅读大约需要3分钟。1. 问题速览最近，推文内容想着从 前端领域 向 前后端领域 转型。出发点呢，为了更多的给大家分享，为了自己也能学到更多知识，更为了可以认识更多的同行朋友，一起交流技术难题与未来！所以，仅针对最近许多问我个人项目部署方面问题的朋友，今天分享一下如何用Docker部署一个SpringBoot后端项目。学习中编写，不足之处朋友们多多指教哈哈
转载
2024-07-30 19:07:11
36阅读
一、前言本次采用的在线安装方式，cdh为6.3.2版本，系统为centos7.4， docker节点可以为任意多个，下文将以3个docker容器为示例进行展示。此方法也可用在docker swarm上，docker容器能够互连，网络互通即可。 二、基础系统镜像制作说明：此步在安装完docker后进行操作，步骤位置放的不对！！！因为dockerhub上提供的centos系统为精简系统，使用
转载
2023-07-19 13:35:14
194阅读
Docker安装hadoop-cdh第1章 环境1.1 操作系统及docker版本Centos7 Docker服务器两台，overlay网络。私有docker registry1.2 安装前准备关掉防火墙和selinux1.3 需要的安装包jdk-8u181-linux-x64.tar.gz mysql-connector-java-5.1.47.tar.gz（去mysql官网下载，不一定非得是这
转载
2023-11-14 09:29:48
152阅读
目录1、安装docker-compose：（1）下载软件：（2）软件上传：（3）软件授权：（4）查看版本：2、编写docker-compose.yml文件：3、操作docker-compose：（1）检查配置文件：（2）构建容器启动：（3）后台构建容器启动：（4）停止容器：（5）启动容器：（6）停止并移除容器：（7）查看容器列表：（8）查看镜像列表：（9）进入到服务中：4、浏览器访问：1、安装do
转载
2024-06-28 19:34:55
32阅读
Docker 搭建hadoop运行环境简介 搭建一个 Hadoop 集群需要起码三台以上的服务器，传统的使用 VMware 多开虚拟机的方式对内存的占用较多，对电脑的配置要求较高，起码要 8 核处理器外加 16 G的运行内存，否则开多个虚拟机再开 IDEA非常容易卡死。 使用 Docker 的话就简单了，不用安装操作系统，直接下载镜像，这个镜像就相当于操作系统，然后基于这个镜像运行多个容器，就相当
转载
2023-09-20 11:57:55
80阅读
1 kylin 简介Apache Kylin是2013年由eBay 在上海的一个中国工程师团队发起的、基于Hadoop大数据平台的开源 OLAP引擎，它采用多维立方体预计算技术，利用空间换时间的方法，把很多分钟级别乃至小时级别的大数据查询速度一下子提升到了亚秒级别，极大地提高了数据分析的效率，填补了业界在这方面的空白。该引擎为超大规模数据集上的交互式大数据分析打开了大门。2 软件下载社
转载
2023-08-09 17:27:09
32阅读
目录1 Hadoop1.1 介绍Hadoop1.2 Hadoop特性优点1.3 hadoop集群中hadoop都需要启动哪些进程，他们的作用分别是什么？1.4 Hadoop主要的配置文件1.5 Hadoop集群重要命令1.6 HDFS的垃圾桶机制1.7 HDFS写数据流程1.8 Hadoop读数据流程1.9 SecondaryNameNode的作用1.10 HDFS的扩容 缩容（面试）1．动态扩容
转载
2024-04-15 21:34:13
45阅读
一定要细心CDH：（Cloudera`s Distribution ,inclluding Apache Hadoop）,是Hadoop众多分支中的一个，由Cloudera维护，基于稳定版本的Apache Hadoop构建，并集成了很多的补丁，稳定Cloudera Manager 则是为了便于在集群中进行 Hadoop 等大数据处理相关的服务安装和监控管理的组件，对集群中主机、Hadoop、Hiv
