恩创软件技术的博客_技术使用

Spring Cloud的微服务网关（Zuul）构建

一、为何要使用微服务网关每个微服务都有各自的网络访问地址，客户端如APP完成一个业务流程（如下订单）需请求多个微服务接口才能完成，对系统使用与可维护性不强问题体现在：1. 需要每个微服务独立认证，显然认证复杂。2. 系统业务不是一成不变，随着系统迭代变化重新划分微服务，如：将一个比较复杂微服务拆分成多个，或是将比较简单与同类的业务合并成一个，此时，客户端请求微服务，不但需修改请求的新微服务接口，客

微服务

spring

原创 2022-01-21 14:12:30 491 阅读

Flink编写实时任务WordCount 示例

准备工作1、创建 Maven 工程，在pom.xml 文件引入Flink 相关依赖包。<dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-java</artifactId> <version>1.10.1</v

flink

apache

大数据

原创 2022-01-21 14:08:29 1006 阅读

Flink 流处理WordCount 示例

Windows 开启端口监听Windows默认不支持 nc 端口监听，通过下载netcat 并配置netcat下载地址：netcat 1.11 for Win32/Win64下载后，解压目录下除了.txt 文件，复制到C:\Windows\System32目录下，然后打开cmd窗口使用使用命令：nc -lp 8888即可开启监听 8888 端口号。如下图：编写代码pub

实时计算

大数据

原创 2022-01-21 14:07:46 1215 阅读

vue 前端项目启动报错提示 Cannot find module ‘node-sass‘ 解决

Module build failed: Error: Cannot find module 'node-sass' 报错解决1、先安装cnpm，从淘宝镜像那下载，执行命令：npm install -g cnpm --registry=https://registry.npm.taobao.org2、cnpm下载成功后，在工程根目录下执行命令：cnpm install node-sass

报错解决

作用域

原创 2022-01-21 14:06:47 5774 阅读

Flink从集合读取模拟传感器数据-示例

1、创建传感器实体类static class SensorReading{ // 传感器 id private String sensorId; // 时间戳 private Long timeStamp; // 温度 private Double temperature; public

大数据

原创 2022-01-21 14:02:33 731 阅读

Flink从kafka消息队列读取数据-示例

1、示例环境zookeeper-3.4.9kafka_2.11Java_1.8(java 8/11)Flink1.10KafKa安装启动可参考文章 Windows10搭建Kafka开发环境2、创建一个Topic名为“test20201217”的主题kafka-topics.bat --create --zookeeper localhost:2181 --replic

flink

kafka

apache

大数据

原创 2022-01-21 14:01:49 867 阅读

Flink常用算子之map、filter和flatMap使用方法示例

本文将对Flink Transformation中map、filter和flatMap算子进行介绍，并结合例子展示具体使用方法。一、map算子map算子可以用来做一些清洗工作,根据具体的业务,map算子使用自定义的map函数进行处理，具体的转换是：输入一个DataStream元素对应输出一个DataStream元素。示例如下：功能描述：从外部文件读取，温度传感器样例数据，转换成温度传感

flink

大数据

原创 2022-01-21 14:00:58 5035 阅读 1收藏

Flink计算支持的数据类型

Flink处理数据介绍Flink流应用程序处理是以数据对象表示的事件流。在Flink内部，处理数据对象，通过被序列化和反序列化进行网络传送，从状态后端、检查点和保存点读取它们。为了有效地做到这一点，Flink需要明确知道应用程序所处理的数据类型。Flink使用类型信息的概念来表示数据类型，并为每个数据类型生成特定的序列化器、反序列化器和比较器。Flink还具有一个类型提取系统，该系统分析函数的输

flink

java

大数据

原创 2022-01-21 13:59:50 289 阅读

Flink实现UDF函数之FilterFunction、MapFunction函数

Flink暴露了所有udf函数的接口，实现方式为接口或者抽象类。实现MapFunction接口示例：实现温度传感器实例转换成（传感器Id-温度）字符串描述。自定义MapFunction类public class CustomMapFunction implements MapFunction<SensorReading,String> { @Override p

ide

flink

原创 2022-01-21 13:59:03 571 阅读

Flink使用函数之监控传感器温度上升提醒

使用函数ProcessFunction介绍Flink的ProcessFunction 函数是低阶流处理算子，可以访问流应用程序所有（非循环）基本构建块：事件 (数据流元素)状态 (容错和一致性)定时器 (事件时间和处理时间)DataStream API提供了ProcessFunction转换算子,可以访问时间戳、注册定时事件。输出特定的一些事件。ProcessFunction 是一种提供对 Key

流处理

flink

原创 2022-01-21 13:58:24 385 阅读

Flink算子使用方法及实例之Split 、Select、Union

本文将对Flink Transformation中Split 、Select、Union算子进行介绍，并结合例子展示具体使用方法一、Split算子根据某些特征把一个 DataStream 拆分成两个或者多个 DataStream示例如下：功能描述：将传感器温度数据分成低温、高温（以 30 度为界）两条流SplitStream<SensorReading> splitString =

大数据

原创 2022-01-21 13:55:45 794 阅读

Flink算子使用方法及实例之keyBy、aggregation、reduce

本文将对Flink Transformation中keyBy、reduce算子进行介绍，并结合例子展示具体使用方法一、keyBy算子keyBy算子根据事件的某种属性或数据的某个字段做为Key进行分组，相同Key的元素被分到了一起，进行后续算子统一处理。示例如下：功能描述：根据传感器id进行分组SingleOutputStreamOperator<SensorReading> aggS

大数据

原创 2022-01-21 13:55:06 2466 阅读

基于Spring Cloud架构微服务平台技术点

技术选型Spring应用快速开发脚手架（SpringBoot）微服务架构解决方案（SpringCloud）注册中心和配置中心（Nacos）限流/熔断/降级（Sentine）微服务网关（SpringCloud Gateway）微服务监控（SpringBoot Admin）持久层ORM框架（MyBatis）MyBatis Dynamic SQLMybatis动态sqlPageHelperMyBatis

spring

微服务

持久层

原创 2022-01-21 13:53:37 236 阅读

Flink 中的时间窗口（Window）

Window 介绍streaming 流式计算是一种被设计用于处理无限数据集的数据处理引擎，而无限数据集是指一种不断增长的本质上无限的数据集，而 window 是一种切割无限数据为有限块进行处理的手段。Window 是无限数据流处理的核心，Window 将一个无限的 stream拆分成有限大小的”buckets”桶，我们可以在这些桶上做计算操作。Window 类型Window 可以分成

滑动窗口

数据

窗口大小

大数据

原创 2022-01-21 13:52:49 1223 阅读

Flink实战之会话窗口（Session Window）WindowsAPI使用示例

介绍Fink的时间窗口（Window）可以分成两类：1、CountWindow：按照指定的数据条数生成一个 Window，与时间无关。2、TimeWindow：按照时间生成 Window。TimeWindow，可以根据窗口实现原理的不同分成三类：滚动窗口（TumblingWindow）、滑动窗口（Sliding Window）和会话窗口（Session Window）。本文介绍会话窗口

时间间隔

数据

flink

大数据

原创 2022-01-21 13:51:58 1164 阅读

微服务（SpringCloud ）实战之Sentinel 整合 Gateway实现网关限流

介绍Sentinel是阿里开源的一个框架具有熔断、限流功能，是分布式系统的流量防卫兵。Sentinel 以流量为切入点，从流量控制、熔断降级、系统负载保护等多个维度保护服务的稳定性。来源于Sentinel Github主页介绍Sentinel 具有以下特征:1、丰富的应用场景：Sentinel 承接了阿里巴巴近 10 年的双十一大促流量的核心场景，例如秒杀（即突发流量控制在系统容量可以

限流

ide

微服务

原创 2022-01-21 13:51:10 440 阅读

Flink实战之滚动窗口、滑动窗口WindowsAPI使用示例

介绍Fink的时间窗口（Window）可以分成两类：1、CountWindow：按照指定的数据条数生成一个 Window，与时间无关。2、TimeWindow：按照时间生成 Window。TimeWindow，可以根据窗口实现原理的不同分成三类：滚动窗口（TumblingWindow）、滑动窗口（Sliding Window）和会话窗口（Session Window）。本文介绍滚动窗口

数据

滑动窗口

flink

大数据

原创 2022-01-21 13:50:13 1271 阅读

java外卖餐饮小程序带后台源码springboot ssm 框架+mysql+redis架构

java外卖餐饮小程序带后台源码springboot ssm 框架+mysql+redis架构，用于学习或二开使用。

spring

小程序

redis

原创 2022-01-21 13:49:26 419 阅读

Flink实战之CountWindow的滚动窗口、滑动窗口WindowsAPI使用示例

介绍Fink的窗口（Window）可以分成两类：1、CountWindow：按照指定的数据条数生成一个 Window，与时间无关。2、TimeWindow：按照时间生成 Window。TimeWindow，可以根据窗口实现原理的不同分成三类：滚动窗口（TumblingWindow）、滑动窗口（Sliding Window）和会话窗口（Session Window）。本文介绍CountW

数据

flink

滑动窗口

原创 2022-01-21 13:48:31 1692 阅读

Spring Cloud Alibaba组件：Sentinel实现接口限流示例

简介Sentinel的官方标题是：分布式系统的流量防卫兵。Sentinel 以流量为切入点，从流量控制、熔断降级、系统负载保护等多个维度保护服务的稳定性。Sentinel 分为两个部分：微服务客户端整合：每个微服务客户端引入sentinel相应的依赖并进行简单的配置即可快速地接入Sentinel功能，每个微服务客户端能将监控信息上报给sentinel-dashboard（控制台）展示以

微服务

限流

spring

原创 2022-01-21 13:46:41 516 阅读

基础环境构建之kafka环境搭建

一、搭建环境操作系统：centos7.2二、准备安装软件安装软件：jdk-8u181-linux-x64.gz、kafka_2.11-2.1.0.tgz、zookeeper-3.4.5.tar.gz三、开始安装1、使用 SecureCRTP 登录centos7.2 系统，创建工作目录mkdir ysn2、使用WinSCP，登录centos7.2 系统，将jdk-8u181-linux-x64.gz

kafka

zookeeper

java

原创 2022-01-21 12:08:37 347 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

产品开发、创业、学习心得

Spring Cloud的微服务网关（Zuul）构建

Flink编写实时任务WordCount 示例

Flink 流处理WordCount 示例

vue 前端项目启动报错提示 Cannot find module ‘node-sass‘ 解决

Flink从集合读取模拟传感器数据-示例

Flink从kafka消息队列读取数据-示例

Flink常用算子之map、filter和flatMap使用方法示例

Flink计算支持的数据类型

Flink实现UDF函数之FilterFunction、MapFunction函数

Flink使用函数之监控传感器温度上升提醒

Flink算子使用方法及实例之Split 、Select、Union

Flink算子使用方法及实例之keyBy、aggregation、reduce

基于Spring Cloud架构微服务平台技术点

Flink 中的时间窗口（Window）

Flink实战之会话窗口（Session Window）WindowsAPI使用示例

微服务（SpringCloud ）实战之Sentinel 整合 Gateway实现网关限流

Flink实战之滚动窗口、滑动窗口WindowsAPI使用示例

java外卖餐饮小程序带后台源码springboot ssm 框架+mysql+redis架构

Flink实战之CountWindow的滚动窗口、滑动窗口WindowsAPI使用示例

Spring Cloud Alibaba组件：Sentinel实现接口限流示例

基础环境构建之kafka环境搭建