Spark系列文章 java实现Pi、WordCount任务程序部署到yarnApache Spark 部署Spark下载上传，解压运行spark-shell配置Spark使用yarn做资源管理让我们先把yarn可调度的资源范围调大一些配置yarn对节点内存的管理范围配置spark与yarn的连接运行一个example检测配置的情况java实现Spark程序引入依赖码代码：写一遍Pijava实现
转载
2024-10-12 12:18:37
30阅读
jenkins pipeline 总体介绍 pipeline 是一套运行于jenkins上的工作流框架，将原本独立运行于单个或者多个节点的任务连接起来，实现单个任务难以完成的复杂流程编排与可视化。 pipeline 是jenkins2.X 最核心的特性， 帮助jenkins 实现从CI 到 CD与
原创
2021-07-27 16:51:59
1593阅读
点赞
1评论
为了计算，“流”操作组成了一个流管道。一个流管道包括数据源、中间操作和终端操作。数据源可以是数组、集合、I/O通道和生成函数。而中间操作则是像过滤filter 或者map这种将一个流转换为另一个流的操作。那终端操作呢，就是产生一个结果或者别的副作用（转为集合或者统计成一个数字）。流是惰性的，源数据的计算只在终端操作启动时操作，流只在需要时消费。 下面我们就聊聊“流”管道的那些事 在遍历集合的时候，
转载
2024-04-08 15:38:53
62阅读
1、创建管道使用管道可以用来连接一个进程的输出和另一个进程的输入，管道是内核中的一个单向的数据通道，管道有一个读取端和一个写入端。pipe系统调用：pipe()：创建管道，result=pipe(int array[2])，调用pipe来创建管道并将两端连接到两个文件描述符，array[1]为写数据端的文件描述符，array[0]为读数据端的文件描述符，管道的内部实现隐藏在内核中，进程只能看见两个
pipeline 简介 pipeline 基本语法 agent post stages/stage/steps environment options parameters tool when scripts triggers 共享库 pipeline basic steps 插件用法 git pl ...
转载
2021-04-23 17:26:00
3022阅读
点赞
2评论
流水线总体语法 指定node部分 stages阶段 post定义 paramters参数 trigger触发器 tool 语法 input 语法 when 语法 parallel 语法 sharelibary共享库使用 1.jenkins先安装sharelibary插件 2.共享库项目有自己特定的目
原创
2023-08-18 11:50:44
101阅读
一、流水线语法 参考文档： k8s发布 GitlabCI/CD 1.1 流水线参数列表 Keyword Description script 运行的Shell命令或脚本。 image 使用docker映像。 services 使用docker服务映像。 before_script 在作业运行前运行脚 ...
转载
2021-08-07 18:57:00
410阅读
2评论
1 认识Pipeline1.1 Pipeline是什么？Pipeline是Jenkins的核心功能，提供一组可扩展的工具。通过Pipeline 的DSL语法可以完成从简单到复杂的交付流水线实现。jenkins的Pipeline是通过Jenkinsfile（文本文件）来实现的。这个文件可以定义Jenkins的执行步骤，例如检出代码。1.2 JenkinsfileJenkinsfile使用两种语法进行
原创
精选
2024-07-30 08:53:58
494阅读
一、引言 Jenkins 2.0的到来，pipline进入了视野，jenkins2.0的核心特性. 也是最适合持续交付的feature。 简单的来说，就是把Jenkins1.
转载
2022-12-27 22:03:27
298阅读
pipeline 是一套运行于jenkins上的工作流框架，将原本独立运行于单个或者多个节点的任务连接起来，实现单个任务难以完成的复杂流程编排与可视化。pipeline 是jenkins2.X 最核心的特性， 帮助jenkins 实现从CI 到 CD与 DevOps的转变pipeline 提供一组可扩展的工具， 通过 pipeline domain specific language syntax
转载
2018-09-28 23:04:00
230阅读
2评论
pipeline 语法实例一 Maven 编译 java 工程 /*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/* #!groovy timestamps { group_id = ".jenkins...
原创
2022-03-09 15:49:44
98阅读
点赞
1评论
pipeline 语法实例二 Node 前端 We b页面， npm 是 JavaScript 的包管理工具。 /*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*...
原创
2022-03-09 15:58:55
228阅读
pipeline 语法实例三 按代码块优化脚本实例 /*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/*/* 1、源码分享如下： pipe...
原创
2022-03-09 16:00:27
263阅读
坐标Maven坐标主要组成 groupId：定义当前Maven项目隶属项目 artifactId：定义实际项目中的一个模块 version：定义当前项目的当前版本 packaging：定义该项目的打包方式 Maven为什么使用坐标？ Maven世界拥有大量构建，我们需要找一个用来唯一标识一个构建的统一规范，拥有了统一规范，就可以把查找工作交给机器依赖管理依赖范围 传递性依赖 依赖范围s
转载
2024-09-12 04:15:10
19阅读
一、引言 Jenkins 2.0的到来，pipline进入了视野，jenkins2.0的核心特性. 也是最适合持续交付的feature。 简单的来说，就是把Jenkins1.0版本中，Project中的相关配置信息，如SVN/Git的配置，Parameter的配置等都变成Code，即Pipeline as Code。 随着pipeline交付流水线在团队中的推广，使用pipeline脚本的j
转载
2024-05-15 20:35:42
289阅读
Jenkins为您提供了两种开发Pipeline的方式：脚本式和声明式。 脚本式流水线（也称为“传统”流水线）基于Groovy作为其特定于域的语言。 而声明式流水线提供了简化且更友好的语法，并带有用于...
原创
精选
2023-11-13 11:02:03
242阅读
Jenkins为您提供了两种开发Pipeline的方式：脚本式和声明式。 脚本式流水线（也称为“传统”流水线）基于Groovy作为其特定于域
原创
精选
2023-06-12 16:25:33
226阅读
一、引言 Jenkins 2.0的到来，pipline进入了视野，jenkins2.0的核心特性. 也是最适合持续交付的feature。 简单的来说，就是把Jenkins1.0版本中，Project中的相关配置信息，如SVN/Git的配置，Parameter的配置等都变成Code，即Pipeline as Code。 随着pipeline交付流水线在团队中的推广，使用pipeline脚本的j
转载
2019-08-11 23:57:58
1295阅读
Jenkins为您提供了两种开发Pipeline的方式：脚本式和声明式。 脚本式流水线（也称为“传统”流水线）基于Groovy作为其特定于域的语言。 而声明式流水线提供了简化且更友好的语法，并带有用于
原创
2023-06-12 15:17:38
141阅读
Jenkins为您提供了两种开发Pipeline的方式：脚本式和声明式。 脚本式流水线（也
原创
2023-06-12 16:24:56
95阅读
