写入动态分区INSERT { INTO | OVERWRITE } TABLE tablename1 select_statement1 FROM from_statement;对分区表的全面支持，使得用户在读取数据时能够受益于分区剪枝，减少了需要扫描的数据量，从而大幅提升了这些操作的性能。■&nb
转载
2024-07-31 17:44:29
36阅读
文章目录这个笔记的范围流处理并行数据流Timely Stream ProcessingStateful Stream ProcessingFault Tolerance via State Snapshots 通过状态快照实现容错性 这个笔记的范围This training presents an introduction to Apache Flink that includes just e
转载
2024-05-24 08:26:33
28阅读
最近准备用flink对之前项目进行重构，这是一个有挑战（但我很喜欢）的工作。几个月过去了，flink社区比起我做技术调研那阵发生了很多变化（包括blink的版本回推），我这边的版本也由1.4->1.7.2。现在网上有很多大方向的解析（阿里的几次直播），也有大神对框架的深入解析。我准备实际使用中mark一些关键的知识点/api。以窗口是flink一个重要的概念，flink提供了很多种窗口的使用
转载
2024-08-14 16:29:45
0阅读
目录1. 示例程序2. DataSources3. DataStream 转换操作4. Data Sinks5. 迭代6. 执行参数6.1 容错6.2 控制延迟7. Debugging7.1 本地运行环境7.2 集合数据源7.3 迭代器SinkFlink DataStream程序是实现了data streams转换操作（比如过滤、更新状态、定义窗口、聚合等等）的一般程序。data streams最
转载
2024-04-16 16:48:47
600阅读
# Flink 中文文档与 Java 应用
Apache Flink 是一个强大的流处理框架，它提供了低延迟、高吞吐量的数据流处理能力，广泛应用于实时数据处理和批处理。Flink 的 API 支持多种编程语言，其中 Java 是最常用的选择之一。接下来，我们将探讨如何使用 Java 开发 Flink 应用，以及一些重要的设计模式和最佳实践。
## Flink 的基本概念
Flink 的核心概
一、flink简介1、基本概念介绍 flink是一个流数据与批数据一体化处理的模型，既可以处理有界数据流，也可以处理无界数据流， flink更擅长流数据处理，而spark更加擅长批处理；flink是一个分层的模型，不同层解决不同的问题Spark 和 Flink 这两个主流框架中选择一个来进行实时流处理，更加推荐使用 Flink，主要的原因有： Flink 的延迟是毫秒级别，而 Spark
转载
2023-10-09 21:49:08
1310阅读
介绍apache fulme是一个分布式的高可用的框架，可以从不同的数据源大量的操作日志数据，能高效的收集，聚合，移动日志数据集中到存储中。apahce fulme不仅仅是日志聚合功能，还能自定义数据源，用于传输大量的事件数据，网络流量数据，社交媒体数据，邮件数据以及其他数据Apache Flume 目前有两种主版本： 0.9.x 和 1.x。其中 0.9.x 是历史版本，称之为 Flume OG
转载
2023-12-26 10:51:24
251阅读
配置文件目录conf/ # apache配置conf配置文件目录
├── extra # 额外的apache配置文件目录 如：httpd-vhost.conf
│ ├── httpd-autoindex.conf # 配置目录列表的辅配置文件
│ ├── http
转载
2023-07-26 23:15:36
28阅读
原文链接： https://ci.apache.org/projects/flink/flink-docs-release-1.7/tutorials/datastream_api.html#top 文章目录Setting up a Maven ProjectWriting a Flink ProgramBonus Exercise: Running on a Cluster and Writin
转载
2024-05-07 10:33:54
423阅读
Apache Spark 2.2.0 中文文档 - 快速入门 | ApacheCN使用 Spark Shell 进行交互式分析基础Dataset 上的更多操作缓存独立的应用快速跳转本教程提供了如何使用 Spark 的快速入门介绍。首先通过运行 Spark 交互式的 shell（在 Python 或 Scala 中）来介绍 API, 然后展示如何
转载
2018-01-10 09:48:00
646阅读
2评论
http://man.chinaunix.net/newsoft/Apache2.2_chinese_manual/
原创
2012-12-07 13:29:21
380阅读
Flink入门及实战-上：http://edu.51cto.com/sd/07245Flink入门及实战-下：http://edu.51cto.com/sd/5845e下载启动flink 查看代码运行例子下一步下载启动flinkflink可以在Linux, Mac OS X, 和Windows平台上运行。为了运行flink，只需要安装JAVA7.x(或者更高版本)。wind
转载
2024-04-28 16:09:36
52阅读
随着对spark的业务更深入，对spark的了解也越多，然而目前还处于知道的越多，不知道的更多阶段，当然这也是成长最快的阶段。这篇文章用作总结最近收集及理解的spark相关概念及其关系。名词driver driver物理层面是指输入提交spark命令的启动程序，逻辑层面是负责调度spark运行流程包括向master申请资源，拆解任务，代码层面就是sparkcontext。workerworker
转载
2023-07-11 20:57:37
265阅读
ApacheCN（Apache中文网）- 关于我们 : http://www.apache.wiki/pages/viewpage.action?pageId=2887249 ApacheCN（Apache中文网）- Apache Spark 2.0.2 中文文档 : http://www.apache.wiki/pages/viewpage.action
原创
2023-06-16 00:34:21
108阅读
pyecharts1.0+绘图环境内容第一个简单的柱状图绘制多种数据的表格添加图像工具中文帮助文档的使用 环境内容python==3.6+jupyter==1.0.0+pyecharts=1.0+【说明】：pyecharts的v0.5和v1.0版本的语法有很大差别，代码不能通用。我的代码都是在jupyter notebook上运行的，所以如果是在pycharm或者vscode运行代码时把bar.
转载
2024-07-22 13:17:30
234阅读
一、Redis 基础： 1、通用命令： keys [pattern]： keys * #遍历所有key；keys he* #以'he'开头的key； keys he[a-e]* #以‘he’开头第三个字母是a-e之间； keys ph? #'?'代码一位，以ph开头且字母是三位的key dbsize：计算key的总
转载
2023-08-04 14:43:08
2333阅读
本章原文讲了许多字体的使用技巧，但就是没有讲如何使用中文，因此，意义不大，再说，如果不支持中文，前面的也就白翻译了，因此，根据原文讲到的一些知识，我摸索出汉字的使用方法，自己写了本章内容，应该算是“原创”了吧^_^(哎呀！谁拿鸡蛋扔我……)。 Windows中一般都是使用TrueType字体，每个中文版Windows操作系统均默认安装了宋体、仿宋、黑体和楷体四种字体，你还可以安装其他第三方字体，如
转载
2023-12-21 06:41:57
98阅读
什么是 Android?
Android 是一个专门针对移动设备的软件集，它包括一个操作系统，中间件和一些重要的应用程序。Beta版的 Android SDK 提供了在Android平台上使用Java语言进行Android应用开发必须的工具和API接口。
特性
应用程序框架 支持组件的重用与替换
Dalvik 虚拟机 专为移动设备优化
集成的浏览
转载
2023-12-11 22:25:24
70阅读
2019年12月10日09:54:28 介绍 先决条件本教程假定RabbitMQ 已在标准端口（5672）的本地主机上安装并运行。如果您使用其他主机，端口或凭据，则连接设置需要进行调整。在哪里获得帮助如果您在阅读本教程时遇到困难，可以 通过邮件列表与我们联系。RabbitMQ是消息代理：它接受并转发消息。您可以将其视为邮局：将要发布的邮件放在邮箱中时，可以确
转载
2023-08-03 20:55:16
547阅读
Sails.js中文文档 http://sailsdoc.swift.ren/ Sails.js是一个Web框架，可以于轻松构建自定义，企业级Node.js Apps。它在设计上类似于像Ruby on Rails的MVC架构的框架，但支持更加现代化， 面向数据风格的Web应用开发。它特别适合于开发实
原创
2021-07-20 09:55:29
1446阅读
