## 用K8S部署大数据框架Hadoop和Scala
欢迎来到这篇关于如何在Kubernetes（K8S）上部署大数据框架Hadoop和Scala的教程。本教程适合那些想要学习如何在容器化环境下管理和部署大数据框架的开发者。在本教程中，我们将分步骤介绍如何配置和部署Hadoop和Scala，同时利用K8S的弹性和自动化管理特性。
### 步骤概览
在下面的表格中，我们列出了本教程的大致步骤，
原创
2024-05-30 09:59:42
61阅读
一、函数 ### 函数 ~~~ 函数体中最后一句为返回值的话，可以将return 去掉； ~~~ 如果一个函数体只有一句代码，大括号可以去掉； ~~~ 如果一个函数没有返回值，其返回类型为Unit , 并且 “=” 号可以去掉，这样的函数被称为过程； ~~~ 可以不声明函数的返回类型，返回类型可通过
原创
2022-04-13 16:41:11
38阅读
hadoop+spark+scala环境--单实例版
原创
2019-04-03 18:00:51
969阅读
-------------------------------------------------
原创
2022-07-14 09:43:44
50阅读
一、懒值 ### 懒值 ~~~ 当 val 被声明为lazy时(var不能声明为lazy)， ~~~ 它的初始化将被推迟，直到首次对此取值，适用于初始化开销较大的场景。 ### 编程示例 ~~~ 先打印OK!，才报错 ~~~ # 语句立刻执行，发现文件不存在，报错 val file1 = scala
原创
2022-04-13 16:41:10
155阅读
一、scala官网地址 ### Scala资源地址 ~~~ Scala官网：https://www.scala-lang.org/ ~~~ 下载Scala：Windows下安装Scala ~~~ 配置IDEA开发环境：REPL 二、windows下环境配置说明 ### 下载scala版本包 ~~~
原创
2022-04-25 11:07:54
66阅读
一、基础语法 ### 基础语法规则： ~~~ # 区分大小写 ~~~ Scala语言对大小写敏感； ~~~ # 类名 ~~~ 对于所有的类名的第一个字母要大写。 ~~~ 如果需要使用几个单词来构成一个类名，每个单词的第一个字母要大写；比如:ListDemo ~~~ # 方法名 ~~~ 所有方法名的第
原创
2022-04-25 11:08:10
62阅读
一、文件操作 ### 导入scala.io.Source后，可引用Source中的方法读取文本文件的内容 ~~~ 如果要将文件内容转数组，直接调用toArray。 import scala.io.{BufferedSource, Source} object FileDemo { def main(
原创
2022-04-13 16:41:10
78阅读
一、Scala基础 ### Scala语言概况：Scala语言起源 ~~~ 马丁·奥德斯基（Martin Odersky）是编
原创
2022-04-25 11:07:10
65阅读
一、for 表达式 ### for表达式 ~~~ Scala中，for循环语法结构：for (i <- 表达式 / 集合)，让变量 i遍历<-右边的表达式/集合的所有值。 ~~~ Scala为for循环提供了很多的特性，这些特性被称之为 for守卫式 或 for推导式。 ### 编程示例 ~~~ #
原创
2022-04-13 16:41:11
48阅读
一、输入和输出 ### 输入输出说明 ~~~ 通过readLine 从控制台读取一行输入。 ~~~ 如果要读取数字、Boolean或者字符， ~~~ 可以用readInt、readDouble、readByte、readShort、readLong、readFloat、readBoolean或者re
原创
2022-04-25 11:05:20
190阅读
一、类层次结构 ## 类层次结构 ~~~ # Scala中，所有的类，包括值类型和引用类型，都最终继承自一个统一的根类型Any。 ~~~ # Scala中定义了以下三个底层类： ~~~ Any是所有类型共同的根类型，Any是AnyRef和AnyVal的超类 ~~~ AnyRef是所有引用类型的超类
原创
2022-04-25 11:05:41
47阅读
一、if 表达式 ### if表达式 ~~~ Scala中 if 表达式有返回值。 ~~~ 如果if 和 else 的返回值类型不一样，那么就返回两个返回值类型公共的父类。 ### 编程示例 ~~~ # if 语句有返回值 val x = 10 val s = if (x > 0) 1 else -
原创
2022-04-13 16:41:11
102阅读
一、对象相等性 ### Java 中可以 == 来比较基本类型和引用类型： ~~~ 对基本类型而言，比较的是值的相等性 ~~~ 对引用类型而言，比较的是引用相等性，即两个变量是否指向JVM堆上的同个对象 ### Scala中，要比较两个基础类型的对象是否相等，可以使用 == 或 !=； 1 == 1
原创
2022-04-25 11:02:10
83阅读
一、操作符 ### 操作符 ~~~ Scala的算术操作符、位操作符与 Java中的效果一样的。 ~~~ 需要特别注意一点：Scala中的操作符都是方法 ~~~ 书写时推荐使用：a + b 、1 to 10这种代码风格。 ~~~ Scala 没有提供 ++、-- 操作符，但是可以使用+=、-= ##
原创
2022-04-25 11:08:02
79阅读
Databricks官方是这样描述Databricks优势的：像Databricks这样的云平台提供了一套集成的、主机托管的解决方案，消除了企业采用Spark和确保大数据项目成功所面临的这三大障碍。我们为你提供了全面管理和调优的Spark集群，开发Spark的一群专家在大力支持。我们的平台为你提供了一种互动式工作区域，以便探查、可视化、合作和发布。如果你已准备好进入生产环境，只要点击一下鼠标即可启
转载
2023-01-02 13:46:45
187阅读
Databricks官方是这样描述Databricks优势的： 像Databricks这样的云平台提供了一套集成的、主机托管的解决方案，消除了企业采用Spark和确保大数据项目成功所面临的这三大障碍。我们为你提供了全面管理和调优的Spark集群，开发Spark的一群专家在大力支持。我们的平台为你提供了一种互动式工作区域，以便探查、可视化、合作和发布。如果你已准备好进入生产环境，只要点
原创
2019-05-21 15:17:05
2084阅读
点赞
Hadoop/spark安装实战（系列篇5） scala安装1/scala 解压缩 [root@localhost setup_tools]# tar -zxvf scala-2.10.4.tgz2将文件移到/usr/local mv scala-2.10.4 /usr/lo
原创
2015-09-12 22:08:40
77阅读
一、while 表达式 ### while表达式 ~~~ Scala提供了与 Java 类似的while和do...while循环。 ~~~ while语句的本身没有任何返回值类型，即while语句的返回结果是Unit类型的 () 。 ~~~ Scala内置控制结构特地去掉了 break 和 con
原创
2022-04-13 16:41:11
49阅读
一、常用类型与字面量 数据类型 描述 Byte 8位有符号补码整数。数值区间为 -128 到 127 Short 16位有符号补码整数。数值区间为 -32768 到 32767 Int 32位有符号补码整数。数值区间为 -2147483648 到 2147483647 Long 64位有符号补码整数
原创
2022-04-25 11:06:21
86阅读
