val str="a aa aaa b a bb c"
val middData=List(("a",1),("a",12),("b",3),("c",1),("b",1))
/*
* wordcount
*/
str.split(" ").groupBy(x=
原创
2014-10-22 16:20:07
1191阅读
Scala实现wordCount功能——单机版1.细节语法如下：map是操作 是把数组/集合中的每一条拿出来进行操作，究竟如何操作，关键在于map中的参数（参数是函数）reduce -> 调用 reduceLeft 是从左往右加fold(初始值)(自定义的函数) -> 调用2.代码如下：object Test{ def main( args:Arr...
原创
2021-07-08 14:24:31
396阅读
实现统计List("a b c d","a d e a","a b d e") 方法1： 方法2：
原创
2022-01-16 13:34:36
84阅读
Scala实现wordCount功能——单机版1.细节语法如下：map是操作 是把数组/集合中的每一条拿出来进行操作，究竟如何操作，关键在于map中的参数（参数是函数）reduce -> 调用 reduceLeft 是从左往右加fold(初始值)(自定义的函数) -> 调用2.代码如下：object Test{ def main( args:Arr...
原创
2022-01-28 14:21:52
467阅读
scala RDD算子 文章目录 map mapPartitions mapPartitionsWithindex flatmap glom groupby filter
转载
2021-10-04 14:10:59
60阅读
实现思路分析代码实现package com.zxl.chapter10/** * 使用scala集合实现WordCount */object Scala09_WordCount { def main(args: Array[String]): Unit = { val list: List[(String, Int)] = List(("Hello Scala Wo...
原创
2021-07-05 16:25:36
301阅读
实现思路分析代码实现package com.zxl.chapter10/** * 使用scala集合实现WordCount */object Scala09_WordCount { def main(args: Array[String]): Unit = { val list: List[(String, Int)] = List(("Hello Scala Wo...
原创
2022-01-19 15:52:48
235阅读
object MapDemo {
def main(args: Array[String]): Unit = {
//构建
val map = mutable.Map[String, Int]("abc" -> 123, ("xyz", 789))
//取值
if (map.contains("abc")) {
val v1 =
转载
2020-04-19 14:50:00
81阅读
面向函数编程 wordcount练习 package scala import scala.io.{BufferedSource, Source} object Demo11WordCount { def main(args: Array[String]): Unit = { //1.读取文件 va ...
转载
2021-07-15 22:27:00
61阅读
2评论
1.项目结构2.单词文档（data/words）Kobe James Jordan PualKobe Kobe James Jordan JordanKobe James JordanKobe Pual Pual3.导入Spar
原创
2022-07-01 17:30:39
101阅读
安装首先去官网下载Spark。注意Spark和Hadoop之间版本对应关系，我自己装的Hadoop 2.7.5版本，按照下面方式下载即可。 下载完成后，解压安装包至路径/usr/localtar -zxf ./spark-2.3.0-bin-hadoop2.7.tgz -C /usr/local/
cd /usr/local
sudo mv ./spark-2.3.0-bin-hadoop/ .
本篇作为scala快速入门系列的第三十九篇博客，为大家带来的是关于如何用Actor实现WordCount的内容。文章目录WordCount案例案例介绍思路分析实现思路步骤1 | 获取文件列表步骤2 | 创建WordCountActor步骤3 | 启
原创
2022-04-01 11:57:59
201阅读
本篇作为scala快速入门系列的第三十九篇博客，为大家带来的是关于如何用Actor实现WordCount的内容。文章目录WordCount案例案例介绍思路分析实现思路步骤1 | 获取文件列表步骤2 | 创建WordCountActor步骤3 | 启动Actor /发送/接收任务信息步骤4 | 消息统...
原创
2021-06-01 14:41:44
192阅读
数组 1、定长数组和变长数组 2、遍历数组 1.增强for循环 2.好用的until会生成脚标，0 until 10 包含0不包含10 3.数组转换 yield关键字将原始的数组进行转换会产生一个新的数组，原始的数组不变 4、数组常用算法 在Scala中，数组上的某些方法对数组进行相应的操作非常方便
原创
2021-06-04 23:45:30
230阅读
spark解析aa.txt 1、aa.txt 2、pom.xml <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.11</artifactId> <version>2.1.1</version> <e
原创
2022-10-23 01:21:18
116阅读
1 package chapter07 2 3 object Test14_HighLevelFunction_Map { 4 def main(args: Array
原创
2022-09-05 15:59:19
277阅读
