1、企业大数据，你到底是什么1.1我们先来看看主流的大数据概念。IBM提出大数据的5V特点：Volume（大量）、Velocity（高速）、Variety（多样）、Value（低价值密度）、Veracity（真实性）。麦肯锡全球研究所给出的定义是：一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四
数据分析和大数据平台是两个紧密相关但又不同的概念。数据分析是一种从数据中提取信息的过程，其基本任务是通过对数据进行收集、清洗、转化和可视化等操作，从中发现有用的信息和趋势，以支持决策和预测。数据分析可以使用各种工具和技术，如统计分析、机器学习、数据挖掘等。大数据平台则是一种基于大数据存储和处理技术的信息系统，旨在处理大量数据并实现数据处理的高效性和扩展性。一般来说，大数据平台需要包括数据采集、存储
原创
2023-06-09 09:52:56
122阅读
摘要：在云栖TechDay24期上，阿里云数据挖掘专家光盐分享阿里云数加平台如何通过工业大数据和云计算的结合应用；来有效提升良品率，降低生产成本，帮助传统制造业企业快速进入工业4.0；该解决方案将适用于设备运维、生产工艺调优、能源管理、环保、行业监管等应用场景。下图主要介绍从工业1.0到工业4.0的相关概念。从工业互联网的直接应用到工业上下游，阿里云都在提供解决方案。阿里云的使命是让云计算技术普惠
转载
2023-07-12 12:42:38
32阅读
一、项目前景和范围1项目简介工业大数据平台是专门面向大型旋转机械、大型工业过程的、可视化的大数据平台，是管理工业过程数据采集、加工和应用环境资源任务的数据系统，提供设备状态数据、过程数据、工艺数据的采集加工处理、数据挖掘、设备建模和工业、用的全生命周期的数据资产管理，帮助工业客户管理数据资产并创造数据商业价值。2可行性分析2.1技术可行性：我们有可靠的技术团队，项目组的几位技术人员均为相关领域的专
转载
2023-07-07 09:29:00
323阅读
一、引言：在大数据建设过程中，通用的建设思路：从数据埋点——数据采集——数据清洗(ETL)——数据服务——数据可视化。整体流程可参考下图： 这篇文章主要想和大家聊聊的是，数据服务平台的建设。二、背景：由于数据加工完成的数据，需要给不同的应用和产品提供服务，包含：数据产品、实时大屏、线上应用、BI自主分析。由于业务场景不同，在根据不同的场景下选择的数据存储也多种多样，图中罗列：Hive、M
转载
2023-07-31 19:19:43
110阅读
稍具规模的互联网企业都会搭建自己的大数据平台。但更多的中小企业和初创公司，自己搭建大数据平台的成本高。拿开源软件搭建自己的大数据平台，对于中小企业来说，无论是人才储备还是服务器成本，都难以承受。别急，还有商业大数据平台供选择。大数据解决方案提供商Hadoop开源产品，关注大数据技术实现和产品功能。但要把Hadoop技术产品在企业真正应用，还有很多事：企业目前技术体系如何与Hadoop集成，具体如何
原创
精选
2022-05-02 23:36:22
2051阅读
某大型集团从0-1建设大数据平台，内含需求分析、数据治理、建模、平台搭建，软硬件配置，测试以及运维等
转载
2022-04-28 21:19:34
144阅读
CDH创建了一个功能先进的系统，可帮助您执行端到端的大数据工作流程。
原创
2023-07-09 10:34:56
1767阅读
AI平台和BigData platform
技术特点高频的知识协同、技术协同，集体智慧的产物
匹配-高配-超配-前置配数字化和信息化数字化转型-数字化工具和数字化体系
硬件基础--运维团队 网络团队
数字化--业务在线，海量数据-数据驱动，关键数据-业务驱动，核心数据-人事驱动
新的业务逻辑和组织管理模式
从技术路线去思考产品形态 --
广义上来说，Hadoop大数据平台也可以看做是新一代的数据仓库系统， 它也具有很多现代数据仓库的特征，也被企业所广泛使用。因为MPP架构的可扩展性，基于MPP的数据仓库系统有时候也被划分到大数据平台类产品。但是数据仓库和Hadoop平台还是有很多显著的不同。针对不同的使用场景其发挥的作用和给用户带来的体验也不经相同。用户可以根据下表简单判断什么场景更适合用什么样的产品。 数据仓库和Had
转载
2023-07-04 14:16:45
42阅读
原文链接：http://click.aliyun.com/m/13927/免费开通大数据服务：https://www.aliyun.com/product/odps介然（李金波），阿里云高级技术专家，现任阿里云大数据数仓解决方案总架构师。8年以上互联网数据仓库经历，对系统架构、数据架构拥有丰富的实战经验，曾经数据魔方、淘宝指数的数据架构设计专家。与阿里云大数据数仓结缘介然之前在一家软件公司给企业客
转载
2017-03-15 10:55:07
1255阅读
本文根据阿里云高级技术专家李金波在首届阿里巴巴在线峰会的《企业大数据平台仓库架构建设思路》的分享整理而成。随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构化、半结构化、非结构化数据的产生，越来越多的企业开始在大数据平台下进行数据处理。分享中，李金波主要从总体思路、模型设计、数加架构、数据治理四个方面介绍了如何利用大数据平台的特性，构建更贴合大数据应用的数据仓库。总体思路随着互联网规模不断的
转载
2021-01-19 22:24:17
137阅读
2评论
本文根据阿里云高级技术专家李金波在首届阿里巴巴在线峰会的《企业大数据平台仓库架构建设思路》的分享整理而成。随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构化、半结构化、非结构化数据的产生，越来越多的企业开始在大数据平台下进行数据处理。分享中，李金波主要从总体思路、模型设计、数加架构、数据治理四个方面介绍了如何利用大数据平台的特性，构建更贴合大数据应用的数据仓库。总体思路随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构化、半结构化、非结构化数据不断地产生。新环境下的数据应用呈现业务变化
原创
2021-06-11 09:26:36
208阅读
随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构化、半结构化、非结构化数据的产生，越来越多的企业开始在大数据平台下进行数据处理。
转载
2021-07-26 16:19:25
113阅读
本文根据阿里云高级技术专家李金波在首届阿里巴巴在线峰会的《企业大数据平台仓库架构建设思路》的分享整理而成。随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构化、半结构化、非结构化数据的产生，越来越多的企业开始在大数据平台下进行数据处理。分享中，李金波主要从总体思路、模型设计、数加架构、数据治理四个方面介绍了如何利用大数据平台的特性，构建更贴合大数据应用的数据仓库。总体思路随着互联网规模不断的
转载
2021-01-19 21:08:55
232阅读
2评论
本文根据阿里云高级技术专家李金波在首届阿里巴巴在线峰会的《企业大数据平台仓库架构建设思路》的分享整理而成。随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构化、半结构化、非结构化数据的产生，越来越多的企业开始在大数据平台下进行数据处理。分享中，李金波主要从总体思路、模型设计、数加架构、数据治理四个方面介绍了如何利用大数据平台的特性，构建更贴合大数据应用的数据仓库。总体思路随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构化、半结构化、非结构化数据不断地产生。新环境下的数据应用呈现业务变化
原创
2021-06-11 09:26:37
162阅读
本文根据阿里云高级技术专家李金波在首届阿里巴巴在线峰会的《企业大数据平台仓库架构建设思路》的分享整理而成。随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构化、半结构化、非结构化数据的产生，越来越多的企业开始在大数据平台下进行数据处理。分享中，李金波主要从总体思路、模型设计、数加架构、数据治理四个方面介绍了如何利用大数据平台的特性，构建更贴合大数据应用的数据仓库。
总体思路
随着互联网
转载
2021-01-09 17:44:00
153阅读
2评论
推荐阅读：不是你需要中台，而是一名合格的架构师（附各大厂中台建设PPT）企业IT技术架构规划方案论数字化转型——转什么，如何转？华为干部与人才发展手册（附PPT）企业10大管理流程图，数字...
转载
2022-04-28 21:08:08
213阅读
本文作者主要从总体思路、模型设计、数据架构、数据治理四个方面介绍了如何利用大数据平台的特性，构建更贴合大数据应用的数据仓库。总体思路随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构...
转载
2021-11-22 17:42:14
2841阅读
工业大数据是什么？工业大数据是指在工业领域中，围绕典型智能制造模式，从客户需求到销售、订单、计划、研发、设计、工艺、制造、采购、供应、库存、发货和交付、售后服务、运维、报废或回收再制造等整个产品全生命周期各个环节所产生的各类数据及相关技术和应用的总称。工业大数据特征？数据容量大：工业数据体量比较大，大量机器设备的高频数据和互联网数据持续涌入，大型工业企业的数据集将达到PB级甚至EB级别。多样：工业
转载
2023-08-08 16:40:29
223阅读
