介绍 Apache Flink 是一个开源的、统一的流处理和批处理框架。与这些框架中的任何一个一样，开始使用它可能是一个挑战。即使有一个很好的入门或一个伟大的（和免费的）实践培训，也总是有关于如何开始、如何调试问题或如何在 IDE 中启动项目的问题。在本文中，我总结了自从开始使用 Flink 以来我一直在写的一些笔记。如果 Flink 对你来说是新的东西，那么它很容易遵循。如果你已经是一个有经验
转载
2024-06-02 17:08:30
221阅读
摘要：本文整理自京东搜索推荐算法工程师张颖、刘露在 Flink Forward Asia 2021 的分享。主要内容包括：背景京东搜索推荐机器学习现状基于 Alink 实现在线学习Tensorflow on Flink 应用规划一、背景搜索和推荐是互联网应用的两个核心入口，大多数流量都来自于搜索和推荐这两个场景。京东零售按站点，分为主站、京喜、海外站以及一些垂直领域站点。对于搜索业务来讲，每个站点
可能会有一些截图中会有错误提示，是因为本地的包一直包下载有问题，截完图已经下载好了。创建包结构 创建一个基础信息类所有输出到mysql数据库中的自定义MR任务的自定义key均需要实现该抽象类 代码内容，主要是实现org.apache.hadoop.io.WritableComparable类，其它不需要写 创建平台信息类 创建全局配置常数类
转载
2024-03-25 20:41:23
382阅读
去年 11 月的 Flink Forward Asia 2019（以下简称 FFA） 上 Flink 社区提出了未来发展的几个主要方向，其中之一就是拥抱 AI [1]。实际上，近年来 AI 持续火热，各种计算框架、模型和算法层出不穷，从某种角度上来说，这个赛道已经有些拥挤了。在这种情况下， Flink 将怎样拥抱 AI，又会为用户带来什么新的价值？Flink AI 的优劣势分别在哪里？本文将通过对
我们在文章里分析了flink提交single job到yarn集群上的代码，flink在1.5版本后对整个框架的deploy方式重构了全新的流程（参考https://cwiki.apache.org/confluence/pages/viewpage.action?pageId=65147077），本文基于flink1.6.1版本源码分析一下新模式在yarn的整个流程。 一 初始化客户端
IntelliJ IDEA 2021.3 现已发布，这是 2021 年的最后一个版本。此版本提供了一些新的功能和质量改进，以提升用户体验。具体更新内容如下：关键更新支持远程开发。此功能允许软件工程师连接到运行 IDE 后端的远程计算机，并像在本地机器上一样处理位于该端的项目。查看诊断和修复 IDE 问题的新的、更快的方法。Smart Step Into action 现在适用于
对于熟悉Maven操作的读者来说，可以象上一节讲的那样，先在命令行用Maven命令快速生成Flink基本程序框架，然后导入到IDE中进一步开发。如果读者更熟悉IDE（例如，IntelliJ IDEA）的话，那么可以直接在IntelliJ IDEA中开发Maven程序。通过结合使用IntelliJ IDEA集成开发工具和Maven项目构建工具，我们可以方便快速地开发Flink项目。一、在Intell
转载
2024-05-08 12:17:37
430阅读
前言安装插件配置插件选择版本添加配置文件在项目中应用checkstyle插件具体使用前言当我们想给flink贡献自己的代码的时候，就需要把代码下载下来，然后导入自己的IDE，其中有一个很重要的环节就是对代码规范的检查，也就是flink的checkstyle，如果我们只是靠在用maven编译的时候的出错信息来对flink进行调试，那么就太费事了，所以我们可以利用flink的checks
转载
2024-06-22 21:53:07
191阅读
一.
IDEA开发环境1.pom文件设置 <properties>
<maven.compiler.source>1.8</maven.compiler.source>
<maven.compiler.target>1.8</maven.compiler.target>
<enc
转载
2024-04-23 14:39:10
138阅读
Flink（五）Flink开发IDEA环境搭建与测试（2）用IDEA开发实时程序--流式处理数据案例--WordcountStreaming（1）Scala代码import org.apache.flink.api.java.utils.ParameterTool
import org.apache.flink.streaming.api.scala.StreamExecutionEnvironm
转载
2024-03-23 21:12:31
58阅读
注意：安装插件后要重新启动IDEA才会生效 1、Free Mybatis plugin 功能：平时dao层找对应的xml时候需要很麻烦地去找（从xml找dao层对应方法也很麻烦），有了这个插件就不用了。 使用步骤： 2、GsonFormat 功能：可以将json格式的字符串自动转换成java类 使用 ...
转载
2021-08-17 18:01:00
10000+阅读
2评论
一、前言IDEA 全称 IntelliJ IDEA，是java编程语言开发的集成环境。IntelliJ在业界被公认为最好的java开发工具。不是我说的喔，百度百科说的… IDEA 如此好用，插件库也是很强大的，俗话说：“工欲善其事必先利其器”，不安排几个插件都不好意思说你开发工具用的是 IDEA ，接下来将介绍插件的安装方式。二、IDEA 插件安装在使用插件之前，你需要了解 IDEA 的插件安装方
转载
2023-11-04 14:45:33
73阅读
IDEA是常用的IDE，我们编写的flink任务代码如果能直接在IDEA运行，会给学习和开发带来很大便利，例如改完代码立即运行不用部署、断点、单步调试等；环境信息电脑：2019版13寸MacBook Pro，2.3 GHz 四核Intel Core i5，8 GB 2133 MHz LPDDR3操作系统：macOS Catalina 10.15.3JDK：1.8.0_211Maven：3.6.0I
转载
2024-05-11 20:56:54
190阅读
该文章主要是针对eclipse或idea中使用到的插件进行安装使用，这里重点是在idea中的安装使用。在IntelliJ IDEA的安装讲解中我们其实已经知道，IntelliJ IDEA本身很多功能也都是通过插件的方式来实现的，是是IntelliJ IDEA本身就是它自己的插件平台最大的开发者而已，开发了很多优秀的插件。IDEA插件安装IDEA的插件安装非常简单，对于很多插件来说，只要你知道插件的
转载
2023-06-26 14:31:25
800阅读
愿将黄鹤翅,一借飞云空。——孟郊《上包祭酒》当我们开发一款插件时，当其中的某些功能依赖其他插件时，就需要我们在插件中做额外的处理。 以下我们以依赖git插件为例子，做一个获取当前项目git用户名和当前分支的demo。引入插件1、插件id我们可以去idea插件市场找到自己需要依赖的插件，在插件首页可以找到插件ID。这里我们用的是idea自带的git插件为例子，其id为Git4Idea。2、在我们的编
转载
2023-11-11 23:54:16
408阅读
今天发现了一个IDEA整合LeetCode的插件，有了这个插件，可以在IDEA本地编辑代码并且运行提交，还能关联自己的账号，简直实用之极。看网上介绍的都不太详细，我来写个清楚点的。插件如图： 一：下载插件点击File->Setting->Plugins： 搜索leetcode下载就行了。如果你的搜不到，可以尝试重新打开Setting重新搜，还没有的话，可
转载
2023-12-24 10:48:59
136阅读
1.2020年前的intellij idea安装的插件所在目录默认在:C:\Users\Administrator\.IntelliJIdea2019.3\config\plugins 1.2020年前的intellij idea安装的插件所在目录默认在:C:\Users\admin\AppData\Roaming\JetBrains\IntelliJIdea20
转载
2023-06-09 13:20:07
909阅读
前言相信大多数人都经历过和同伴交接的时候看到他定义的一个个n,m,i而感到头大，看到他定义的变量而感到崩溃，看到他定义的方法而感到无奈，心累，无从下手。
但是不要急，idea中有一个插件可以帮助我们使我们的代码变得比较规范化。没错，就是阿里插件，如果你已经在用了，那么恭喜你，如果还没有，或者不知道怎么用，那就继续往下看看吧！安装教程1、下载idea，如果没有下载的话这里提供一个网址:htt
转载
2023-10-23 09:07:20
135阅读
欲善事先利器——IDEA插件篇工欲善其事，必先利其器，好鞋踢好球是非常合乎逻辑的事情。——《长江七号》同样的开场白，不一样的酒，不一样的故事。上篇《欲善事先利器——系统篇》已经推荐了一些个人常用的效率系统软件。觉得有帮助的，有共鸣的Rock一下。我们继续新篇——IDEA插件篇。用Eclipse的请原谅，本人已经好几年没用过Eclipse了，给不了你好的建议。以下插件插件直接在IDEA插件管理里面搜
转载
2024-02-21 20:08:14
265阅读
一、查看插件在IntelliJ IDEA中打开系统设置窗口并找到Plugins插件列表，如图 在插件列表上方可以看到Marketplace 与Installed两个选项，其中Marketplace代表未安装的插件列表，Installed代表已安装的插件列表。二、插件的安装 如果列表中插件的右侧带有Install按钮，则证明插件还没
转载
2023-07-25 10:56:24
895阅读
点赞
