软件要求Hadoop: 2.7+, 3.1+ (since v2.5)Hive: 0.13 - 1.2.1+HBase: 1.1+, 2.0 (since v2.5)Spark (可选) 2.3.0+Kafka (可选) 1.0.0+ (since v2.5)JDK: 1.8+ (since v2.5)OS: Linux only, CentOS 6.5+ or Ubuntu 16.0.4+在 H
转载
2024-07-26 15:43:55
62阅读
快速指南以下为快速体验k8s集群的测试、开发环境--allinone部署，国内环境下觉得比官方的minikube方便、简单很多。1.基础系统配置推荐内存2G/硬盘20G以上最小化安装Ubuntu 16.04 server或者CentOS 7 Minimal
配置基础网络、更新源、SSH登陆等2.安装依赖工具Ubuntu 16.04 请执行以下脚本:# 文档中脚本默认均以root用户执行
apt
转载
2024-07-09 16:47:01
55阅读
本文档主要是kylin的搭建以及在搭建过程中遇见大问题。1.环境本文档主要搭建在开发环境。环境是基于CDH6.2 CDH中有hadoop ，spark ,hbase2.下载了解自己的环境就可以有针对的下载需要的版本。现在KYLIN的最新版本支持CDH6.0/6.1 咨询kylin用户，CDH6.2也是支持。所以，我下载的kylin 3.0.1 kylin官网 : http://kylin.apac
转载
2023-12-11 19:57:31
176阅读
Kylin 有很多好的工具类。这篇文档会介绍以下几个工具类：KylinConfigCLI.java，CubeMetaExtractor.java，CubeMetaIngester.java，CubeMigrationCLI.java 和 CubeMigrationCheckCLI.java。在使用这些工具类前，首先要切换到 KYLIN_HOME 目录下。KylinConfigCLI.java
作用
文章目录kylin搭建及使用1、上传解压配置环境变量2、验证环境是否可行（如下图所示为成功）3、启动kylin，最后出现http://...../7070/kylin,且没有报依赖错误为成功，然后就可以去web界面访问了4、访问kylin5.进入后先创建一个project6.导入数据选择table后面的三个按钮中间的那个（数据选择自己所需的）7.创建model（点击+New后，有三个模块，选择N
转载
2023-10-25 21:50:56
958阅读
今天，全球有超过1000+企业都在使用“麒麟”（Apache Kylin）这只神兽，在 Hadoop 生态中，大家对它的认可度和赞誉都很高。Apache Kylin 是运行在 Hadoop 集群之上的应用服务，而 Hadoop 集群的部署又并非易事，那这是否就阻碍了我们探究 Apache Kylin 的步伐呢？答案是否定的，通过借助强大的虚拟技术，在本地就能体验到“麒麟”的魅力，那么接下来就让我们
转载
2024-01-19 00:00:26
82阅读
文章目录Linux系统的安装1、安装一个VMware2、新建一个虚拟机Oracle的安装1、使用root用户登录安装Xmanager2、检查硬件要求3、检查软件要求再去挂载光盘镜像安装软件包4、系统组和用户5、检查内核参数1、共享内存2、 生效该内核参数3、资源限制6、检查需要的目录7、复制安装文件到系统从windows传输文件到linux系统登出root8、开始安装进行安装 Linux系统的安
转载
2024-07-25 19:42:04
152阅读
KylinKylin 大数据OLAP引擎Kylin简介Kylin的应用场景为什么要使用KylinKylin的总体架构小结 Kylin 大数据OLAP引擎Kylin简介Kylin的诞生背景:Kylin-中国团队研发的，是第一个真正由中国人自己主导、从零开始、自主研发、并成为Apache顶级开源项目Hive的性能比较慢，支持SQL灵活查询，特别慢HBase的性能快，原生不支持SQL - phoenix
播客：http://tech.meiyou.com/?p=97官网创建cube: http://kylin.apache.org/cn/docs15/tutorial/create_cube.html Cube执行原理：1、创建Cube:2、编译Cube(Build Cube):定义好Cube之后，Apache Kylin通过MapReduce，将存储在Hive中的事实表和维
转载
2024-05-27 15:46:03
76阅读
目录一、Kylin简介1. 发展历程2. 工作原理3. 基本架构4. 特点二、Kylin安装1. 环境准备2. Kylin3. 启动4. 登录网页三、相关资源 一、Kylin简介Apache Kylin是基于Hadoop大数据平台的一个开源联机分析处理（Online Analytical Processing，OLAP）引擎。它采用多维立方体预计算技术，将大数据的SQL查询速度从之前的分钟乃至小
转载
2023-10-15 11:19:38
157阅读
目录一、Kylin概述二、Kylin机构三、Kylin特点四、安装4.1 Kylin依赖环境4.2 Kylin搭建4.3 Kylin兼容性问题4.4 Kylin启动五、Kylin Cube构建原理5.1 维度和度量5.2 Cube和Cuboid5.3 Cube构建算法六、Kylin Cube构建优化6.1 使用衍生维度（derived dimension）6.2 使用聚合组（Aggreg
转载
2023-11-10 00:19:15
333阅读
一、安装准备1、操作系统 Centos 7.x2、时间问题 集群内所有节点时间一定要同步。
NTP、Chrony 3、用户 创建hadoop组和hadoop用户，并做ssh免密码登录 4、Hadoop HA集群 Hadoop 2.7.3 5、HBase hbase 1.x 6、Hive Hive 1.2.1，使用 mysql 存放元数据 7、准备目录 # mkdir /i
转载
2023-12-19 22:28:18
156阅读
在搭建Kylin的时候，需要确保HDFS、yarn、hive、zookeeper、hbase等部署完毕。1.安装2.进行安装kylin操作1. 进行解压到指定位置 /opt/module2. mv /opt/module/apache-kylin-3.0.1-bin /opt/module/kylin兼容问题解决上面部署完后后，我们进行启动会发现 kylin出现异常报错，我们需要进行需要
转载
2023-08-08 14:01:35
565阅读
MariaDB主从复制MySQL的二进制日志(binglog)会记录所有对数据库进行更改的操作，也就是说只要是会对数据库产生修改的操作都会被记录到二进制日志中去。记录二进制日志的主要目的有两方面：1. 恢复2. 复制 MySQL的复制就是基于二进制日
转载
2024-05-24 08:58:19
30阅读
背景 : 近来公司要做报表，随简单研究一下Kylin。Kylin可谓是我泱泱中华在Apace史上耀眼的一笔。作用: Kylin是强大的OLAP分析引擎，详见官网。 Kylin 1.6 CDH5.10安装 Kylin有两种安装方式：单机及集群。本文以集群为例。单机版Kylin安装起来还是挺简单的，解压即安装。配置 1.环境变量的配置： export HADOOP_USER_NAME=hdfs
转载
2023-12-30 11:41:42
126阅读
本篇博客重点介绍如何使用Kylin来构建大数据分析平台。根据官网介绍，其实部署Kylin非常简单，称为非侵入式安装，也就是不需要去修改已有的Hadoop大数据平台。你只需要根据的环境下载适合的Kylin安装包，选择一个Hadoop节点部署即可，Kylin使用标准的Hadoop API跟各个组件进行通信，不需要对现有的Hadoop安装额外的Agent。最底层是数据来源层，我们可以通过Sqoop等工具
转载
2023-12-27 14:53:49
67阅读
(清空防火墙和禁用selinux)1.在每个数据库中创建用于同步数据库的账号GRANT USAGE ON *.* to root@'%' IDENTIFIED BY'1234';GRANT ALL PRIVILEGES on *.* to root@'%';FLUSH PRIVILEGES;2.cd /usr/share/mysql/cp my-large.cnf /etc/my.cn
原创
2016-07-05 19:16:25
1062阅读
虚拟机CentOS搭建FTP 文章目录虚拟机CentOS搭建FTP一、背景信息二、安装配置vsftpd（1）安装（2）配置本地用户访问FTP服务器。（3）防火墙配置介绍 参考阿里云文档 一、背景信息FTP（File Transfer Protocol）是一种文件传输协议，基于客户端/服务器架构，支持以下两种工作模式：主动模式：客户端向FTP服务器发送端口信息，由服务器主动连接该端口。（不常用）被动
转载
2024-09-22 18:53:14
23阅读
1.安装服务包组：yum -y install mariadb-galera mariadb-galera-server xtrabackup2.修改配置文件vim /etc/my.cnf.d/galera.cnf修改如下参数：wsrep_provider=/usr/lib64/galera/libgalera_smm.so
wsrep_
原创
2014-09-24 16:30:27
653阅读
Scala 安装Scala 语言可以运行在Window、Linux、Unix、 Mac OS X等系统上。Scala是基于java之上，大量使用java的类库和变量，使用 Scala 之前必须先安装 Java（>1.5版本）。Mac OS X 和 Linux 上安装 Scala第一步：Java 设置确保你本地已经安装了 JDK 1.5 以上版本，并且设置了 JAVA_HOME 环境变量及 J
转载
2024-06-25 18:02:41
55阅读
