随着数据量的激增,传统的 OLTP 平台已无法满足用户的分析需求。OLAP 平台应运而生,OLAP 平台通常由 OLAP Engine 与用户操作分析页面组成。本文将会以 Saiku + Kylin 的组合方式讲解多维 OLAP 平台的搭建。Saiku 简介Saiku 是一个用于 OLAP 分析的套件。用户可在浏览器中通过拖拽的方式进行分析。降低了使用者的学习成本。它能够连接多种数据源,如 Mic
传统数据仓库,商业智能的能力,提供交互式的,多维分析能力,并提供在传统数据仓库技术所不能做到的超大规模数据集的快速查询,并使用普通的PC硬件,而无需采购专用的,私有的一体机或者高端存储等原数据量的10+倍)。一般我们要分析的数据可能存储在关系数据库、HDFS上数据、文本文件、excel 等。kylin主要是对hive中的数据进行预计算,利用hadoop的mapreduce框架实现 &nb
转载
2024-05-13 20:56:05
44阅读
如何基于麒麟操作系统(Kylin)部署K8S集群(详细流程文档)一、K8S集群节点准备1.1 主机操作系统说明序号操作系统及版本备注1Kylin V10 SP31.2 主机硬件配置说明需求CPU内存硬盘角色主机名值4C8G100GBmasterk8s-master01值4C8G100GBworker(node)k8s-worker01值4C8G100GBworker(node)k8s-worker
转载
2024-05-03 12:51:07
85阅读
apache kylin2.6搭建并排除1,前景交代部门最近在规划做一套画像系统,底层存储方案定的为apache kyl
转载
2024-06-13 08:58:14
97阅读
1.准备操作系统1.1 系统登录界面 1.2 操作系统版本信息 [root@jdbh ~]# uname -ra
Linux jdbh 2.6.18-238.el5xen #1 SMP Fri Jul 29 05:02:21 EDT 2011 x86_64 x86_64 x86_64 GNU/Linux
[root@jdbh ~]# cat /etc/issue
转载
2024-08-22 14:09:51
353阅读
新安装Ubuntu Kylin 16.04系统,一个软件安装整理清单又重装系统了,我的内心是悲催的。顺便试试ubuntu最新版本 列个清单,省得以后还要再到处搜。新系统下的软件安装 用MarkPad不熟练,排版不好。安装vim sudo apt install vim安装Java环境 安装oracle的java而非openjdk。 将解压好的jdk1.7.0_04文件夹用最高权限复制到/
转载
2024-08-24 06:50:02
67阅读
从开始接触到使用ubuntu有一年半的时间,而使用kylin系统有差不多半年的时间了。现在我的电脑只装了kylin14.04系统,对这个系统确实有所期待,希望能够做的更好一些。 至于这个系统是汉化版的ubuntu还是从ubuntu继承发展的就不多谈了,至少该系统挂了一个中国版的操作系统的名号。首先说一下安装,我是用U盘直接装得,安装文件也是直接从kylin官
转载
2024-08-28 16:12:26
166阅读
准备在Ubuntu Kylin 14.04上安装一套开发环境,有JDK、SVN、Maven、Groovy、Eclipse、MariaDB、MySQL Workbench、Nginx、Redis、Scala、Go、Haproxy、MongoDB等。 一: JDK 1. 下载jdk-8u25-linux-x64.tar.
转载
2024-03-07 15:48:26
161阅读
Linux中telnet的安装与配置
linux下的telnet安装和使用 Telnet服务的配置步骤如下: 一、安装telnet软件包(通常要两个)。 1、 telnet-client (或 telnet),这个软件包提供的是 telnet 客户端程序; 2、是 telnet-server 软件包,这个才是真正的 Telnet serv
转载
2023-08-02 19:59:00
1119阅读
一 安装配置nfs服务1.新建目录mkdir /home/ning/rootfs2.安装nfs服务ning@ENVY:/$ sudo apt install nfs-kernel-server正在读取软件包列表... 完成正在分析软件包的依赖关系树 正在读取
转载
2024-03-12 21:46:55
233阅读
办公电脑从win7换成ubuntu已经有几个月了..环境:ubuntu 14.04kvm 2.0.0需要的各种软件也都安装的差不多了.. 迅雷 qq office vmware 等 这些我常用的软件也都安装上了..我的电脑配置也算可以了(thinkpad E 系列 i5 + 8G内存 )但是vmware这个东西在ubuntu上的表现不是那么让人满意..(其实就是没法用....) 开一台win10系
转载
2024-06-25 20:23:08
30阅读
今天(北京时间2017年4月13日),Ubuntu 发布了17.04正式版本,同时优麒麟团队也很高兴的宣布优麒麟(Ubuntu Kylin)17.04正式版发布(版本代号Zesty Zapus)。此次发布不仅在系统内核、特色应用、合作软件上都有较大更新,最大的变化在于默认搭载全新的轻量级桌面环境—UKUI。UKUI是一款基于MATE的轻量级桌面环境,使用GTK和Qt开发,从开始菜单、控制面板、桌面
转载
2024-03-12 12:11:59
147阅读
Apache Kylin.mdhttp://lxw1234.com/archives/category/kylinhttp://kylin.apache.org/cn/docs/install/index.htmlhttps://www.jianshu.com/p/7fafa9103252Apache Kylin是一个开源的分布式分析引擎,在Hadoop之上提供超大规模数据的SQL查询接口及多维分
转载
2023-10-21 15:43:59
91阅读
Kylin麒麟操作系统源码安装NGINX一、安装编译工具及库文件[root@nginx32 ~]# yum -y install make zlib zlib-devel gcc-c++ libtool openssl openssl-devel gd gd-devel geoip geoip-devel libxml2 libxml2-devel libxslt libxslt-devel二、
关于Kylin的介绍和使用请参考之前的文章 《分布式大数据多维分析(OLAP)引擎Apache Kylin安装配置及使用示例》 Kylin对外提供的是SQL查询接口,基于Kylin构建OLAP多维分析系统,第一种方案是针对业务,定制开发一个前端界面,将界面上用户的选择和操作,翻译成SQL,提交给Kylin查询。另一种方案则是将Kylin与BI工具整合起来,借助BI工具,对Kylin中的Cube进
虚拟机安装不赘述了,使用版本为ubuntukylin-16.04-desktop-amd64(建议使用ubuntu而不是centos)。安装过程很容易,按着顺序依次确定即可,安装完成之后需要进行网络配置,让我们的虚拟机链接上网络。一、配置网络1.打开VMware workstation ,菜单栏选项–>编辑–>虚拟网络编辑器,将VMnet8设置为NAT模式,启动DHCP(DHCP就是用
转载
2024-09-02 11:41:10
423阅读
需求 之前发布、实施软件或者产品的时候,更多的是以脚本+tar压缩包的形式,或者直接集成一个ELF程序来进行发布。 现在想简单的把可执行程序、依赖动态度和资源打到一个rpm包中,通过rpm -ivh方式进行安装。过程 该打包过程只是记录了一下将二进制放入rpm中的过程和注意事项,不涉及预编译、编译和安装等繁琐的过程。&n
转载
2024-10-28 19:17:55
78阅读
目录安装Hadoop 环境Kylin下载Kylin目录结构配置kylin.properties验证检查环境启动/停止Kylinguava.jar版本问题启动 KylinCuratorConnectionLossException错误熟悉使用 Kylin进入web界面创建项目同步hive表Failed to load Hive Table创建Model创建Cube查看cube信息SQLPlanne
背景版本:ubuntu 16.0 因为项目需要后台推送官邮的一个功能,在邮件模板中镶嵌的图片上要推广几个课程名称,做过的雄蝶们应该都知道,用的javaMail+.ft模板的形式,outlook2013不能直接把图片放在html的background属性中,所以尝试过之后,还是妥协了,将html嵌入变量后,又转成图片,再切割成小图,用每个加了链接又拼接到新的html’中来实现一个邮件多个链接跳转的功
转载
2024-01-27 21:51:41
94阅读
一、定义开源的分布式分析引擎提供Hadoop/Spark之上的SQL查询接口多维分析(OLAP)能力及支持超大规模数据亚秒内查询巨大的Hive表二、架构REST Server:REST Server是一套面向应用程序开发的入口点,旨在实现针对Kylin平台的应用开发工作。 此类应用程序可以提供查询、获取结果、触发cube构建任务、获取元数据以及获取用户权限等等。另外可以通过Restful接口实现S
转载
2024-04-30 21:47:29
475阅读