最近做OLAP工作时一直在和kylin打交道，因为kylin相关知识比较多，所以为了加深对kylin的整体理解以及把自己的经验分享给大家，便准备周末写了该文章，正文如下1、kylin概述在讲解kylin之前，先大致说下OLAP和OLTP。OLTP也称联机事务处理，一般指面向传统关系型数据库，实时性要求比较高的事务操作。OLAP也称联机分析处理，一般指面向大数据场景的分析操作。因为二者所应对的数据体
转载
2023-08-21 11:42:58
250阅读
大数据系统应该包含的功能模块，首先是能够从多种数据源获取数据的功能，数据的预处理(例如，清洗，验证等)，存储数据，数据处理、数据分析等(例如做预测分析，生成在线使用建议等等)，最后呈现和可视化的总结、汇总结果。 大数据系统的这些高层次的组件： 1、各种各样的数据源 当今的IT生态系统，需要对各种不同种类来源的数据进行分析。这些来源可能是从在线Web应用程序，批量上传或feed，流媒体直播
转载
2023-08-30 13:18:49
199阅读
商业智能的应用在国外已广为普及，并且开始不断应用大数据和云技术。而国内，商业智能BI工具在这几年才开始慢慢被接受，企业开始有意识地建立一体化数据分析平台，为经营决策提供分析。近几年，商业智能的几大趋势：对于大数据更好的支持，对海量数据块的快速响应，各大商业智能软件基本都支持了hadoop 作为数据库；可视化分析的重要性，也日益明显，比如国内的亿信华辰跟国外的Tableau，QLK， PowerBI
转载
2023-08-27 18:23:50
353阅读
1. 项目简介 大数据技术在体育产业方面也具有重要作用。篮球是众多体育项目中受关注度最高的一项体育运动，NBA更是人们最喜爱的体育联盟之一。对NBA来说，对每位球员的精细分析和数据可视化不仅能帮助球队科学高效地分析球员优劣，为球队排兵布阵提供依据，还能让伟大的运动传奇更具商业价值。
转载
2023-10-13 11:12:29
514阅读
Python是数据处理常用工具，可以处理数量级从几K至几T不等的数据，具有较高的开发效率和可维护性，还具有较强的通用性和跨平台性。Python可用于数据分析，但其单纯依赖Python本身自带的库进行数据分析还是具有一定的局限性的，需要安装第三方扩展库来增强分析和挖掘能力。Python数据分析需要安装的第三方扩展库有：Numpy、Pandas、SciPy、Matplotlib、Scikit-Lear
转载
2023-07-29 23:39:21
134阅读
作者：东哥起飞首发于公众号：Python数据科学对于Pandas运行速度的提升方法，之前已经介绍过很多回了，里面经常提及Dask，很多朋友没接触过可能不太了解，今天就推荐一下这个神器。1、什么是Dask？Pandas和Numpy大家都不陌生了，代码运行后数据都加载到RAM中，如果数据集特别大，我们就会看到内存飙升。但有时要处理的数据并不适合RAM，这时候Dask来了。Dask是开源免费的。它是与其
转载
2023-08-31 21:28:47
112阅读
大数据分析是什么？大数据分析软件有哪些？这是现在这个信息时代每一个企业管理者、经营参与者都需要了解的。今天，小编就来针对性地总结一下，什么是大数据分析，以及2019年主流的商业大数据分析软件。一、大数据分析是什么大数据分析的特点有以下几点：第一，数据体量巨大。从TB级别，跃升到PB级别。第二，数据类型繁多，包括网络日志、视频、图片、地理位置信息等等。第三，价值密度低。以视频为例，连续不间断监控过程
转载
2023-09-18 16:10:59
137阅读
在当下这个快速发展的信息化时代，对于企业经营来讲，掌握一些大数据分析软件工具来支持经营决策也是至关重要的。2019年商业数据分析软件有哪些呢？本文列出了市面上最主要的几款数据分析软件。1.FineBI目前国内数据分析的佼佼者。FineBI是新一代自助式BI工具,企业客户多、服务范围广, 多维OLAP分析是BI工具分析功能的集中体现，凭借FineBI简单流畅的操作、强劲的大数据性能和自助式的分析体验
转载
2023-12-29 23:26:21
0阅读
对于 Pandas 运行速度的提升方法，之前已经介绍过很多回了，里面经常提及 Dask ，很多朋友没接触过可能不太了解，今天就推荐一下这个神器。1、什么是Dask？Pandas 和 Numpy 大家都不陌生了，代码运行后数据都加载到RAM中，如果数据集特别大，我们就会看到内存飙升。但有时要处理的数据并不适合 RAM&n
转载
2024-02-29 19:25:38
54阅读
可视化大数据分析系统有很多，如果系统级都是收费的，如果大家想要了解可视化大数据分析系统，私信我就行。下面聊下5个常用的大数据可视化分析工具。1、FineReportFineReport是一款纯Java编写的、集数据展示(报表)和数据录入(表单)功能于一身的企业级web报表工具、大数据可视化分析工具，只需要简单的拖拽操作便可以设计复杂的中国式报表，搭建数据决策分析系统。 2、Echarts
转载
2023-08-04 13:12:42
187阅读
从SLM (服务生命周期管理) 到SCM (供应链管理) 和ERP (企业资源计划)，再到CRM (客户关系管理)，这些云应用程序产生的数据量非常庞大，并且正以惊人的速度增长。为帮助企业从生成数据中提取出可操作的见解，世界各地的知名技术公司和初创公司都致力于创建业务分析工具和技术，提供无缝分析解决方案。具有强大功能的现代商业分析工具，让数据收集、分析和数据应用变得更为高效，可以帮助企业提高生产效率
转载
2023-06-09 10:28:44
296阅读
业务人员对Excel进行数据收集时，原始数据量动辄几十万上百万条；因数据量大，导致excel打开慢，编辑卡顿，在多指标分析时，需拆分多个excel进行分析，领导查看分析结果时，连带要查看多个报表，体验不好。更棘手的是，excel分析具有时效性，当数据更新后，要重新导数做报表，分析效率低。想要处理超大的数据量，Smartbi一站式数据分析平台来帮你。针对数据量大的问题，小编将以Smartbi为例，为
转载
2023-11-08 18:10:20
194阅读
大数据分析是研究大量的数据的过程中寻找模式，相关性和其他有用的信息，可以帮助企业更好地适应变化，并做出更明智的决策。下面整理了一些大数据分析能用到的工具，助力大家更好的应用大数据技术。
转载
2022-09-28 11:10:20
165阅读
作为一名优秀的数据分析师，既需要不断了解和掌握数据分析方法，同时还需要学习和熟练使用数据分析软件，毕竟借助工具既可以确保数据分析结果的价值，同时也能提升效率，接下来小编带你了解下目前常见的大数据分析软件有哪些：目前常见的大数据分析软件有哪些？1、Hadoop Hadoop是最流行的软件框架之一，它为大数据集提供了低成本的分布式计算的能力。使Hadoop成为功能强大的大数据工具之一的因素是其分布式文
转载
2023-09-14 17:02:41
43阅读
数据分析工作虽然隐藏在业务系统背后，但是具有非常重要的作用，数据分析的结果对决策、对业务发展有着举足轻重的作用。随着大数据技术的发展，数据挖掘、数据探索等专有名词的曝光度越来越高，但是在类似于Hadoop系列的大数据分析系统大行其道之前，数据分析工作已经历了长足的发展，尤其是以BI系统为主的数据分析，已经有了非常成熟和稳定的技术方案和生态系统，对于BI系统来说，大概的架构图如下：可以看到在BI系统
转载
2023-07-12 20:56:14
491阅读
1． 概念、分类数据分析系统的主要功能是从众多外部系统中，采集相关的业务数据，集中存储到系统的数据库中。系统内部对所有的原始数据通过一系列处理转换之后，存储到数据仓库的基础库中；然后，通过业务需要进行一系列的数据转换到相应的数据集市，供其他上层数据应用组件进行专题分析或者展示。根据数据的流转流程，一般会有以下几个模块：数据收集（采集）、数据存储、数据计算、数据分析、数据展示等等。当然也会有在这基础
转载
2023-11-17 22:12:00
106阅读
# 大数据分析软件开发指南
在软件开发的世界里，尤其是大数据分析领域，很多刚入行的小白可能会感到陌生和无从下手。本文将帮助你了解如何实现一个基本的大数据分析软件，特别是开源项目（开元）。我们将通过整套流程，逐步介绍每一个步骤，并提供必要的代码示例及其注释。
## 项目流程
首先，我们需要有一个清晰的项目流程。下面是实现大数据分析软件的基本步骤：
| 步骤 | 描述
原创
2024-10-03 06:10:50
87阅读
# AI大数据分析软件
## 1. 引言
随着大数据时代的到来，越来越多的企业开始关注如何从海量数据中提取有价值的信息。AI大数据分析软件应运而生，它结合了人工智能和大数据分析技术，能够帮助企业快速、准确地分析海量数据，发现潜在的商业机会和问题。本文将介绍AI大数据分析软件的原理、应用场景，并给出一个具体的代码示例。
## 2. 原理介绍
AI大数据分析软件的核心是人工智能算法和大数据分析技术
原创
2023-09-13 09:17:49
675阅读
随着大数据的应用越来越广泛，应用的行业也越来越低，我们每天都可以看到大数据的一些新奇的应用，从而帮助人们从中获取到真正有用的价值。很多组织或者个人都会受到大数据的分析影响，但是大数据是如何帮助人们挖掘出有价值的信息呢？下面就让我们一起来看看九个价值非常高的大数据的应用，这些都是大数据在分析应用上的关键领域：1.理解客户、满足客户服务需求大数据的应用目前在这领域是最广为人知的。重点是如何应用大数据更
转载
2023-11-16 13:40:58
26阅读
大数据，指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 大数据的四大特点： 一、大量 大数据的特征首先就体现为“大”，从先Map3时代，一个小小的MB级别的Map3就可以满足很多人的需求，然而随着时间的推移，存储单位从过去的GB到TB
转载
2023-09-26 22:13:50
169阅读
