蜡笔小新v的博客_Hadoop,Hive,MapReduce,Strom,Spark,Hbase,Yarn,其他大数据,大数据面试通关手册,Flink高级进阶和企业级应用,大数据成神之路

大数据面试提升私教训练营低调报名开启～

2022年大数据面试提升训练营新一期开放报名，限制名额20-25人

大数据

编程语言

人工智能

java

面试

转载 9月前 10000+阅读

报表工具的二次革命

温馨提示：本文大约 9000 字左右，预计阅读时长 10 分钟报表工具是一个历史比较悠久的软件类产品了，已经有 20 年以上的发展历史了，起到了决定性的作用先回顾第一次革命第一次革命发生...

数据库

大数据

编程语言

人工智能

数据分析

转载 10月前 10000+阅读

Doris文章阶段性小总结

试"获取更多惊喜全网最全大数据面试提升手册！

编程语言

大数据

人工智能

面试

python

转载 10月前 10000+阅读

这些数据知识库至少够你用10年

不吃饭则饥，不读书则愚。时刻保持对知识的输入，才能破万“卷”修炼内功最好的办法：学习！学习！学习！小编给大家推荐几个优质的公众号他们都是数据领域的资深作者每一篇推文都值得你点开1数据治理体系推荐理由：1、愿景：构建数据治理体系，数据仓库体系，夯实数字化基础，赋能读者； 2、使命

可视化

编程语言

人工智能

大数据

数据分析

转载 10月前 10000+阅读 1收藏

Apache Doris实时数据分析保姆级使用教程

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜《大数据面试提升私教训

大数据

hadoop

数据库

python

hive

转载 10月前 10000+阅读

美团住宿业务数据治理体系化思考与实践

全网最全大数据面试提升手册！一、序言二、背景介绍三、治理体系化思考3.1 什么是数据治理体系化？3.2 数据治理体系化如何解决目前治理存在的问题？3.3 业务数据管治体系框架如何建设？3.4 体系框架如何落地实施？四、治理体系化实践4.1 标准化4.2 数字化4.3 系统化五、业务数据治理实施流程六、总结与展望一、序言美团住宿数据治理团队通过多年数仓建设及数据治理的经验沉淀，并结合业务

大数据

编程语言

机器学习

人工智能

数据分析

转载 2022-11-16 14:54:40 10000+阅读

阿里大数据之路：数据模型篇大总结

全网最全大数据面试提升手册！第1章大数据领域建模综述1.1 为什么需要数据建模有结构地分类组织和存储是我们面临的

数据仓库

dbcp

webgl

glassfish

dwr

转载 2022-11-01 10:29:29 10000+阅读

一文读懂，硬核 Apache DolphinScheduler3.0 源码解析

全网最全大数据面试提升手册！本文目录DolphinScheduler的设计与策略1.1 分布式设

hashtable

uefi

分布式

glassfish

big data

转载 2022-10-31 09:26:29 10000+阅读

Hive SQL 大厂必考常用窗口函数及相关面试题

全网最全大数据面试提升手册！目录一、窗口函数概述：1.窗口函数的分类2.窗口函

java

大数据

数据分析

数据库

hive

转载 2022-10-24 09:44:42 10000+阅读 1收藏

全球第一！新一代云数仓 SelectDB 登顶 ClickBench

数据库

百度

大数据

java

人工智能

转载 2022-10-22 00:32:56 10000+阅读

Apache Hudi 使用文件聚类功能 (Clustering) 解决小文件过多的问题

全网最全大数据面试提升手册！Hudi测试：批处理后文件据类再接流本文详细阐述了在 “批处理后，流处理之前” 进行文件 Clustering 操作的方法。该方法可以将众多小文件合并成数量极少的大文件，从而防止过多小文件的产生。在批处理结束后进行 Clustering 主要涉及如下几个步骤，它们主要都是通过 spark-submit 命令完成的：制定 Clustering 计划，找到批处理数据

大数据

hadoop

java

spark

hive

转载 2022-10-16 06:52:41 10000+阅读

Flink CDC 2.2.0同步Mysql数据到Hudi数据湖表实践

映射表4.4 在Flink中创建Hudi Sink的映射表4.5 流式...

数据库

mysql

java

大数据

hive

转载 2022-10-15 00:38:34 10000+阅读

硬刚Doris系列」Apache Doris基本使用和数据模型

试"获

数据库

分布式

大数据

mysql

java

转载 2022-10-12 12:50:59 10000+阅读

Apache Iceberg小文件处理和读数流程分析

java

大数据

spark

android

hive

转载 2022-10-05 23:00:18 10000+阅读

为什么大数据平台要回归SQL

先说观点：因为还没找到更好的。接下来说原因，首先来看看大数据平台都在干什么。原因结构化数据计算仍是重中之重大数据平台主要是

算法

数据库

大数据

编程语言

人工智能

转载 2022-10-05 00:10:25 10000+阅读

你不得不知道的Iceberg的配置Configuration

全网最全大数据面试提升手册！Configuration1.table properties1.1 Read properties因为Iceberg在HDFS上的data文件，通

大数据

编程语言

java

人工智能

数据分析

转载 2022-09-24 00:17:08 10000+阅读

你的Flink数据重分区又设置错了？Flink重分区算子详细解析

全网最全大数据面试提升手册！一、背景说明目前Flink包含8个重分区算子，对应8个分区器（7个官方定义及1个自定义），均继承与父类StreamPartitioner。RebalancePartitionerRescalePartitionerKeyGroupStreamPartitionerGlobalPartitionerShufflePartitionerForwardPartiti...

java

spring

spark

android

flink

转载 2022-09-12 09:35:30 10000+阅读

阿里云云原生数据湖体系全面解读

全网最全大数据面试提升手册！阿里云首次发布云原生数据湖体系，基于对象存储OSS、数据湖构建Data Lake Formation和E-MapReduce产品的强强组合，提供存储与计算分离架构下，涵盖湖存储、湖加速、湖管理和湖计算的企业级数据湖解决方案。数据湖总体架构——啊喂！2022年全网...

大数据

人工智能

编程语言

数据分析

python

转载 2022-08-13 00:29:28 10000+阅读

Doris建表注意事项，实时数仓的同学记得收藏

全网最全大数据面试提升手册！基本概念Row & Column一张表包括行（Row）

数据库

大数据

mysql

java

python

转载 2022-08-13 00:29:09 10000+阅读

Datax3.0+DataX-Web打造分布式可视化ETL系统

全网最全大数据面试提升手册！一、DataX 简介DataX 是阿

数据库

大数据

python

linux

mysql

转载 2022-08-06 00:30:59 10000+阅读

Apache Calcite 框架原理入门和生产应用

全网最全大数据面试提升手册！1. 简介 Calcite 是什么？如果

大数据

编程语言

数据库

java

人工智能

转载 2022-08-06 00:30:36 10000+阅读

Flink+Iceberg环境搭建及生产问题处理

全网最全大数据面试提

大数据

hadoop

hive

java

spark

转载 2022-07-30 01:05:41 10000+阅读

一次Spark SQL线上问题排查和定位

全网最全大数据面试提升手册！背景该sql运行在spark版本 3.1

定位

spark

大数据

scala

hive

转载 2022-07-30 01:05:38 10000+阅读

Apache Iceberg核心原理分析文件存储及数据写入流程

C、AVRO。相较于Hudi、Delta与Spark的强耦合，Iceberg可以...

大数据

hive

java

android

spark

转载 2022-07-25 07:09:27 10000+阅读

六月份阶段性大总结之Doris/Clickhouse/Hudi一网打尽

全网最全大数据面试提升手册！这是个阶段性小总结，后面会持续更新。ClickHouse「Clickhouse系列」分布式表&本地表详解「ClickHouse系列」ClickHouse之MergeTree原理「ClickHouse系列」Replication机制详解「ClickHouse系列」ClickHouseSQL基本语法和导入导出实战「Cl

大数据

编程语言

人工智能

java

数据分析

转载 2022-07-25 07:05:45 10000+阅读

Flink+Iceberg搭建实时数据湖实战

全网最全大数据面试提升手册！第一部分：Iceberg 核心功能原理剖析：Apache Iceberg摘自官网：Apache Iceberg is an open table format for huge analytic datasets.可以看到 Founders 对 Iceberg 的定位是面向海量数据分析场景的高效存储格式。海量数据分析的场景，类比于 Hive 是 Hdfs 的封装一

数据库

大数据

hadoop

hive

mysql

转载 2022-07-25 07:04:21 10000+阅读

Apache Doris Compaction优化百科全书

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜全

大数据

分布式

数据库

python

面试

转载 2022-07-21 22:24:15 10000+阅读

Clickhouse在京东的实践之路

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜八股文教给我，你们专心刷题和面试Hi，我是王知无

大数据

编程语言

人工智能

python

java

转载 2022-06-28 09:16:33 10000+阅读

2022版Netty面试题小总结

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜轻戳有惊喜：全网最全大数据面试提升手册！一. 基本概念 1

网络

socket

编程语言

面试

java

转载 2022-06-13 09:50:38 10000+阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

开源基础软件社区	51CTO学堂
51CTO	软考资讯	汽车开发者社区

51CTO博客

9918699

大数据面试提升私教训练营低调报名开启～

报表工具的二次革命

Doris文章阶段性小总结

这些数据知识库至少够你用10年

Apache Doris实时数据分析保姆级使用教程

美团住宿业务数据治理体系化思考与实践

阿里大数据之路：数据模型篇大总结

一文读懂，硬核 Apache DolphinScheduler3.0 源码解析

Hive SQL 大厂必考常用窗口函数及相关面试题

全球第一！新一代云数仓 SelectDB 登顶 ClickBench

Apache Hudi 使用文件聚类功能 (Clustering) 解决小文件过多的问题

Flink CDC 2.2.0同步Mysql数据到Hudi数据湖表实践

硬刚Doris系列」Apache Doris基本使用和数据模型

Apache Iceberg小文件处理和读数流程分析

为什么大数据平台要回归SQL

你不得不知道的Iceberg的配置Configuration

你的Flink数据重分区又设置错了？Flink重分区算子详细解析

推荐优质大数据学习平台

阿里云云原生数据湖体系全面解读

Doris建表注意事项，实时数仓的同学记得收藏

Datax3.0+DataX-Web打造分布式可视化ETL系统

Apache Calcite 框架原理入门和生产应用

Flink+Iceberg环境搭建及生产问题处理

一次Spark SQL线上问题排查和定位

Apache Iceberg核心原理分析文件存储及数据写入流程

六月份阶段性大总结之Doris/Clickhouse/Hudi一网打尽

Flink+Iceberg搭建实时数据湖实战

Apache Doris Compaction优化百科全书

Clickhouse在京东的实践之路

2022版Netty面试题小总结