HetuEngine是华为全栈自主创新的高性能交互式SQL分析及数据虚拟化引擎。
原创
2023-08-17 11:50:11
1860阅读
本文介绍HetuEngine实现On Yarn的原理,通过阅读本文,读者可以了解HetuEngine如何在资源使用方面融入Hadoop生态体系。
原创
2022-01-12 10:10:06
799阅读
点赞
datecommentscategoriestagspermalinktitle 2020/4/12 true 5.36 微内核架构详解 软件架构 微内核架构(Microkernel Architecture),也被称为插件化架构(Plug-in Archite
转载
2023-09-26 14:13:37
87阅读
本篇文章将手把手带你进行资源规划和数据源对接,开启玩转HetuEngine。
原创
2023-08-18 10:33:17
809阅读
点赞
1评论
HetuEngine作为MRS服务中交互式分析&多源统一SQL引擎,亲自全程体验其如何实现多数据源的跨源跨域分析能力。
原创
精选
2022-09-15 10:43:32
473阅读
点赞
摘要:本文介绍HetuEngine实现On Yarn的原理,通过阅读本文,读者可以了解HetuEngine如何在资源使用方面融入Hadoop生态体系。
作者:一颗柠檬。HetuEngine是华为自研高性能分布式SQL查询&数据虚拟化引擎。与大数据生态无缝融合,实现海量数据秒级查询;支持多源异构协同,使能数据湖内一站式SQL融合分析。在整合开源能力的同时,MRS HetuEngine
作者:华为云HetuEngine首席架构师 武文博。(一)背景早在2020年5月华为云全球分析师大会中,华为率先提出“湖仓一体”概念,并落地在华为云FusionInsight智能数据湖解决方案中。其中,HetuEngine河图引擎承担一站式SQL分析引擎角色,使能跨源、跨域的一体化分析落地。基于云原生架构,让“逻辑数据湖”大规模数据融合分析提效50倍,本文将详细阐述HetuEngine在实现一站式
本文将详细阐述HetuEngine在实现一站式SQL分析所面临的挑战、技术架构和案例。
原创
2022-01-06 10:32:07
638阅读
点赞
近日,华为正式宣布开源数据虚拟化引擎 openLooKeng,开源社区官网同步上线。openLooKeng 致力于为大数据用户提供极简的数据分析体验,让用户像使用“数据库”一样使用“大数据”。2019 年 11 月 19 日,华为宣布开源数据虚拟化引擎 HetuEngine(开源版本的 HetuEngine 叫 openHetu),现在,openHetu 正式更名为 openLooKeng,Het
转载
2023-08-10 19:39:56
128阅读
华为MRS云原生数据湖平台的HetuEngine就是一款解决大数据时代跨源跨域问题的数据虚拟化引擎。
原创
2021-11-03 15:04:08
324阅读
点赞
HetuEngine是华为自研高性能分布式SQL查询&数据虚拟化引擎。与大数据生态无缝融合,实现海量数据秒级查询;支持多源异构协同,使能数据湖内一站式SQL融合分析。在整合开源能力的同时,MRS HetuEngine相较于开源社区也做了大量的优化,其中一个重要的特性就是On Yarn。什么是On Yarn?顾名思义,就是将进程运行在Yarn上,由Yarn进行资源的管理和调度。不论是Trin
摘要:本文将详细阐述HetuEngine在实现一站式SQL分析所面临的挑战、技术架构和案例。本文分享自华为云社区《【华为云Stack】【大架光临】第7期:湖仓一体天花板,大数据一站式SQL分析技术实践》,作者:华为云HetuEngine首席架构师 武文博。(一)背景早在2020年5月华为云全球分析师大会中,华为率先提出“湖仓一体”概念,并落地在华为云FusionInsight智能数据湖解决方案中。
摘要:华为开发者大会2021(Cloud)大会期间,华为云FusionInsight MRS云原生数据湖HetuEngine架构师武文博,分享了“跨湖跨仓场景下如何实现海量数据分钟级分析”主题。
原创
2021-05-26 23:02:25
365阅读
华为云FusionInsight MRS HetuEngine持续提升自助用数分析平台的可服务、易运维能力,基于AI技术持续提升对数据分析平台的智能化赋能水平,引领现代数据分析平台向专业化、智能化、易运维、高性能方向演进。
原创
2023-01-13 11:23:06
261阅读
点赞
华为开发者大会2021(Cloud)大会期间,华为云FusionInsight MRS云原生数据湖HetuEngine架构师武文博,分享了“跨湖跨仓场景下如何实现海量数据分钟级分析”主题。 华为开发者大会2021(Cloud)于2021年4月24日-26日在深圳成功举行。本届大会以#每一个开发
转载
2021-04-29 10:35:00
33阅读
文章目录华为文档获取方式、云计算发展背景、坚实基座华为云Stack,政企只能升级首选智能数据湖仓一体,让业务洞见更准,价值兑现更快MRS:一个架构可构建三种数据湖,业务场景更丰富离线数据湖:提供云原生、湖仓一体的企业级数据湖实时数据湖:自研CDL引擎,打通实时数据湖的“最后一公里”逻辑数据湖:通过自研HetuEngine实现数据湖与数仓协同,打破数据“墙”GaussDB(DWS):守护高价值数据
【摘要】 大数据时代的技术特点导致一个企业的数据分散存储在不同组件甚至不同地域的不同组件之中,为企业数据的高效使用带来挑战。数据虚拟化技术使应用在不关心数据源的数据格式及物理存储位置的情况下以一种统一的方式获取和使用整个组织中所有的数据。华为云原生数据湖MRS HetuEngine就是一款优秀的数据虚拟化引擎,并在众多企业的数字化转型过程中落地实践。数据虚拟化是指一种数据管理方式,允许应用在不关心
转载
2024-07-27 10:04:25
30阅读
【摘要】 大数据时代的技术特点导致一个企业的数据分散存储在不同组件甚至不同地域的不同组件之中,为企业数据的高效使用带来挑战。数据虚拟化技术使应用在不关心数据源的数据格式及物理存储位置的情况下以一种统一的方式获取和使用整个组织中所有的数据。华为云原生数据湖MRS HetuEngine就是一款优秀的数据虚拟化引擎,并在众多企业的数字化转型过程中落地实践。数据虚拟化是指一种数据管理方式,允许应用在不关心