上也有一些有趣的讨论。
转载 2016-01-06 10:25:00
84阅读
2评论
这里的端口号需要注意,最好不要配置8080,因为我们环境里已经存在一个tomcat占用着8
原创 精选 2023-04-25 16:11:22
275阅读
# 理解 IdeaIC 中的 Spring Boot 在现代 Java 开发中,Spring Boot 已经成为一个不可或缺的框架。然而,许多初学者在使用 IntelliJ IDEA Community Edition(IdeaIC)时可能会感到困惑:为什么在这个轻量级的 IDE 中缺少了 Spring Boot 的支持?本文将对此进行探讨,并提供一些解决方案。 ## 什么是 Spring B
原创 11月前
99阅读
?本文主要讲述了,Java开发工具IDEA的学生申请免费使用的步骤,以及IDEA的一些基本设置和快捷键以及模板的使用。 文章目录?1.IDEA?1.IDEA的简介?2.IDEA的下载?3.学生免费使用?4.IDEA的使用技巧和快捷键 ?1.IDEA?1.IDEA的简介?IDEA全称Intellij IDEA?在业界被公认为最好的Java开发工具?除了支持Java开发,还支持HTMl,CSS,PHP
转载 4月前
17阅读
Intellij idea 编译报错:Error : java 不支持发行版本5(error: release version 5 not supported)问题:在 IntelliJ IDEA 中创建一个Maven项目时,出现以下错误并且无法构建它。我设法解决了错误并进行到可以构建的地步,因此我将介绍如何处理它。环境方法 – 如何处理“错误:java:错误:不支持发布版本 5” – 如何处理“
转载 2024-09-20 16:54:19
28阅读
经过了小一天的时间最终把Spark安装好了 我的机器配置是windows7。8G。内存,双核的 安装的软件列表为: Ubuntu 14.04.1 LTS (GNU/Linux 3.13.0-32-generic x86_64) vmware Hadoop: 2.6.0 Spark: 1.4.0 jd
转载 2017-05-22 20:57:00
74阅读
2评论
SPARK_MASTER_HOST=sparkmaster.smartmap.comSPARK_MASTER_PORT=7077SPARK_WORKER_CORES=1SPARK_WORKER_MEMORY=1024MSPARK_MASTER_WEBUI_PORT=8080SPARK_CONF_DIR=/app/spark/spark-2.3.0-bin-hadoop2.7/conf JAVA_...
转载 2018-07-05 22:58:00
36阅读
2评论
环境:CentOS 6.4, Hadoop 1.1.2, JDK 1.7, Spark 0.7.2, Scala 2.9.3折腾了几天,终于把Spark 集群安装成功了
转载 2022-09-05 15:04:30
132阅读
Spark是一个基于内存计算的大数据处理框架,具有快速、易用、通用等特点。在Kubernetes(K8S)上安装Spark可以更好地管理集群资源,提高计算效率。下面我将为您详细介绍如何在K8S上安装Spark。 **整体流程:** | 步骤 | 操作 | | ---- | ------------- | | 1 | 安装K8S集群 | | 2 | 下载配置Sp
原创 2024-05-08 10:31:13
92阅读
下载spark1.0.0的 spark-1.0.0-bin-hadoop1版本 解压到目录在conf/spark-evn.sh下添加44export446export HADOOP_CONF_DIR=/usr/
原创 2023-07-11 00:01:11
22阅读
一、Spark安装官网地址:http://spark.apache.org/文档地址:http://spark.apache.org/docs/latest/下载地址:http://spark.apache.org/downloads.htm下载Spark安装包下载地址:https://archive.apache.org/dist/spark/安装步骤:1、下载软件解压缩,移动到指定位置cd /
1、spark概述1、什么是spark基于内存的计算引擎,它的计算速度非常快。但是spark仅仅只涉及到数据的计算,没有涉及到数据的存储。2、为什么学习spark比mapreduce计算速度快很多。3、spark特点1、速度快比mapreduce在内存中快100x,在磁盘中快10x1、由于mapreduce每次job的中间结果数据都会落地到磁盘中,而spark每次中间结果数据可以不落地(可以保存在
转载 2024-07-23 21:19:08
12阅读
第八章 Spark安装及配置一、Spark简介官方文档:http://spark.apache.org/ Lightning-fast cluster computing:快如闪电的集群计算。Apache Spark™ is a unified analytics engine for large-scale data processing:大规模快速通用的计算引擎。 1、速度
转载 2024-09-02 16:48:19
123阅读
Spark安装及介绍 *以下内容由《Spark快速大数据分析》整理所得。读书笔记的第一部分是记录如何安装Spark?同时,简单介绍下Spark。一、Spark安装二、Spark介绍   一、Spark安装如果是在个人电脑上学习Spark,建议先建个虚拟机,教程可参考1. 安装虚拟机,Hadoop和Hive。在下载Spark
转载 2023-06-05 11:05:42
176阅读
使用 安装包:scala-2.10.3.tgzspark-0.9.0-incubating-bin-hadoop2.tgzhadoop-2.3.0-cdh5.0.0.tar.gzjdk1.7.0_45下载地址:http://mirror.bit.edu.cn/apache/spark/spark-0.9.0-incubating/spark-0.9.0-incubating-bin-hadoop2
原创 2015-09-08 14:21:53
530阅读
下载scala-2.10.6包解压到指定目录http://downloads.typesafe.com/scala/2.11.4/scala-2.11.4.tgz#SCALA VARIABLES START export SCALA_HOME=/usr/local/scala-2.10.6 export PATH=$PATH:$SCALA_HOME/bin
转载 精选 2016-01-13 19:53:33
673阅读
wget -c http://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-2.4.4/spark-2.4.4-bin-hadoop2.7.tgz
原创 2021-08-04 10:37:46
226阅读
 
转载 2019-07-30 10:47:00
93阅读
2评论
安装Spark 1、解压 2、修改配置文件 修改 .bashrc 追加内容 #SPARKexport SPARK_HOME=/opt/spark-2.1.1-bin-hadoop2.7export PATH=$SPARK_HOME/bin:$SPARK_HOME/sbin:$PATH spark-e
原创 2022-05-17 20:49:14
126阅读
# Spark安装指南 ## 概述 本文将为你详细介绍如何安装和配置Apache Spark,帮助你快速入门。 ## 整体流程 下表概括了安装和配置Spark的整体流程: | 步骤 | 描述 | |------|------| | 步骤一:安装Java | 安装Java JDK,确保Java环境正确配置 | | 步骤二:下载Spark | 下载Spark安装包 | | 步骤三:解压Spark
原创 2023-12-08 05:53:30
34阅读
  • 1
  • 2
  • 3
  • 4
  • 5