文章目录Spark 基础一、Spark的介绍1.定义2.Spark VS MapReduce3.Spark内置模块二、安装Spark1.Spark相关地址2.重要角色2.1 Driver/Driver Program（驱动器）2.2 Executor（执行器）2.3 Spark的提交流程3. Standalone模式（伪分布式）4. Spark On Yarn模式4.1Yarn与Standalo
转载
2023-08-30 22:13:04
78阅读
启动命令行：spark-shell
启动spark：sbin/start-all.sh -> start-master.sh -> start-slaves.shspark提交任务的过程bin/spark-submit --class cn.itcast.spark.WordCount --master spark://server:7077 --executor-memory
Spark参数详解spark-shellspark-shell是Spark自带的交互式Shell程序，方便用户进行交互式编程， 用户可以在该命令行下可以用scala编写spark程序示例spark-shell可以携带参数spark-shell --master local[N] 数字N表示在本地模拟N个线程来运行当前任务spark-shell --master local[*] *表示使用当前机器
转载
2023-08-21 22:03:43
223阅读
一•Linux系统设置与基本操作（一）图形界面与命令行界面（1）图形界面：能够借助鼠标完成系统设置和程序使用等相关操作。（2）命令行界面：字符界面，没有图形程序，鼠标操作被弱化，通过命令行方式提供各项管理操作。（3）图形环境中的伪终端：需要运行在图形化界面中，并不是真正的纯字符终端，可以通过命令行方式执行各种管理操作。二Linux基本命令：（一）命令格式:命令选项参数（1）命令字：命令的名称。（2
原创
2018-11-09 22:09:00
1313阅读
基本命令：ls 命令作用：查看当前目录下有哪些文件语法：ls 目录，如果不加目录查看当前目录参数：-l 显示详细信息 系统里面的快捷方式#ll=ls -l-a显示隐藏文件 -d 查看目录(不查看里面的内容)-h 增强可读性例：[root@xuegod163 ~]# ls-l /etc/passwd
-rw-r--r-- 1&nb
原创
2015-10-26 15:20:54
480阅读
点赞
**压缩和归档打包:即归档，类似于旅游之前收拾行李压缩：为了减少占用磁盘空间，可以做备份，在网络上传输是节省网络带宽。打包压缩软件windows：winrar360压缩好压7zipwinzipLinux：压缩格式：gz，bz2，xz，zip，Z压缩算法不同，导致压缩比不同压缩软件gzipbzipxzzip既能打包又能压缩的软件：tar****一、zip：压缩后的文件一般以.zip结尾，可以压缩目录
原创
2018-05-02 22:17:48
508阅读
点赞
我们继续说一些基本命令
任何命令在自己正常执行结束之前，都不会释放命令提示符
#startx -- :1 可以启动第二个图形界面
所有的目录路径都起源于根目录
文件名严格区分大小写
路径的表示方法/(根)/(分隔符）
目录的路径：相对路径：相对于当前路径（./)的路径
绝对路径：在根路径下的路径
../:表示当前目录的辅目录
文件名以.号开始就表示隐藏文件
FH
原创
2011-11-13 07:27:29
610阅读
awk：awk工作流程是这样的：读入有'\n'换行符分割的一条记录，然后将记录按指定的域分隔符划分域，填充域，$0则表示所有域,$1表示第一个域,$n表示第n个域。默认域分隔符是"空白键" 或 "[tab]键awk工作流程是这样的：先执行BEGING，然后读取文件，读入有/n换行符分割的一条记录，然后将记录按指定的域分隔符划分域，填充域，$0则表示所有域,$1表示第一个域,$n表示第n个域,随后开
原创
2015-05-24 22:19:38
510阅读
df 显示磁盘容量大小df -h 以G容量显示磁盘的大小du 计算目录下文件占用磁盘大小head 显示文件前十行的内容如：head 20 /etc/service----显示文件的前20行内容tail 显示文件最后行的内容tail -f /var/log/message 监视日志文件的作用su 用户名 从root切换到普通用户时候不需要输入密码，但是从普通用户切换到root必须输入密码su -用户
原创
2016-08-21 17:02:57
664阅读
1， 检查系统是否已经安装了mysql或查看已经安装了何种版本
rpm –qa | grep mysql
或：rpm –q mysql
2， 查看当前mysql的状态：/etc/init.d/mysqld status
3， 开启mysql：/etc/init.d/mysqld start
4， 设置密码：# mysqladmin –u r
转载
精选
2008-12-05 15:57:32
483阅读
Linux基本命令
bash简介 当用户进入Linux环境时，系统将自动启动相应的shell。shell是一种命令行解释程序，负责用户和操作系统的沟通。在提示符下输入的每个命令都先由shell解释，然后传给Linux内核执行。通过shell，可以启动、挂起、停止，甚至编写程序。bash是Bourne Again shell的缩写，其作者是Brain Fox和Chet Ramey，是向下兼容的，并
原创
2009-03-20 14:17:20
532阅读
文章转自：http://www.xiaokuang.net/?p=128
第一招 mysql服务的启动和停止net stop mysqlnet start mysql
第二招 登陆mysql语法如下： mysql -u用户名 -p用户密码键入命令mysql -uroot -p， 回车后提示你输入密码，输入12345，然后回车即可进入到mysql中了，mysql的提示符是：mys
转载
精选
2010-04-20 14:13:12
519阅读
第一招、mysql服务的启动和停止
net stop mysql
net start mysql
第二招、登陆mysql
语法如下： mysql -u用户名 -p用户密码
键入命令mysql -uroot -p， 回车后提示你输入密码，输入12345，然后回车即可进入到mysql中了，mysql的提示符是：
mysql>
注意，如果是连接到另外的机器上，则需要加入一个参数-h机
转载
精选
2010-05-13 13:07:49
480阅读
2评论
ROUTEROS基本命令
/sy reset &nb
转载
2010-06-02 04:26:13
562阅读
cd 改变目录位置
pwd 显示当前的目录
：什么都不做，传回真值0 ：>test.txt 创建一个新文件
. 在现行的shell环境中执行shell程序
source 在现行的shell环境中执行shell程序（和上面.功能一样）
alias 显示设定程序别名 设定：alias cp='cp -f'
unalias 取
翻译
精选
2010-07-12 15:31:52
505阅读
1.
vim
#在命令行中输入vim,进入vim编辑器
2.
i
#按一下i键,下端显示 --INSERT--
#插入命令,在vim中可能任意字符都有作用
3.
Esc
#退出i(插入)命令进行其它命令使用
4.
:r filename
#读入一个文件内容,并写入到当前编辑器中
5.
:w newfilename
#将该编辑器中的内容写入到一个新文件中
6.
:w
转载
2010-08-27 16:14:57
207阅读
