最近在学习大数据,需要用到hadoop,记录一下在centos7系统下搭建的步骤,与碰到的问题对于hadoop环境的搭建与安装首先需要明白自己要做什么(初学者不要一股脑的照着网上的教程敲敲敲,事后却不知道自己在做什么),这是我总结的一些步骤:安装java,配置java环境变量解压hadoop,配置hadoop环境变量修改ssh通讯,修改为免密码登录修改Hadoop配置文件启动hadoop,访问Na
转载
2024-04-01 08:24:42
41阅读
Hadoop入门系列(三) Centos7的基本配置前言准备这些基本配置是每台虚拟机刚下完都要检查的,不仅仅是为了安装hadoop而做准备,用于其他方面也一样1.VMware Tools的安装VMware Tools的安装配置2. 共享文件夹虚拟机>设置选项下的共享文件夹,改成总是启用,并添加一个文件夹完成后就可以了,下面我们在虚拟机中找到它就在mmt当中 如果消失了就用这个命令sudo v
转载
2024-03-25 16:14:16
90阅读
centos7下hadoop环境搭建实验目的:为5台主机搭建hadoop平台,为之后hbase做准备。实验步骤:0x01硬件条件:5台centos7主机,IP地址:x.x.x.46~50。机器的名称分别为lk,node1,node2,node3,node4。 实验条件默认使用root账户,有需要切回普通用户的情况我会提到。0x02材料准备hadoop安装包 官网下载地址:http://www.
转载
2024-05-14 16:37:53
45阅读
一、 Linux环境准备准备4台服务器,通过VMware安装centos7(此文不讲VMware安装Linux) 1台(server01)用来安装namenode和resourceManager,3台(server02,server03,server04)datanode给4台服务器新增hadoop用户 使用xshell客户连接服务器,compose bar可以同时向所有会话服务器执行相同命令us
转载
2024-04-19 17:12:03
42阅读
一、 MySQL 5.7 主要特性:原生支持 Systemd更好的性能:对于多核 CPU 、固态硬盘、锁有着更好的优化更好的 InnoDB 存储引擎更为健壮的复制功能:复制带来了数据完全不丢失的方案,传统金融客户也可以选择使用MySQL 数据库。注: mysql-5.6.3 已经支持了多线程的主从复制新增 sys 库:以后这会是 DBA
转载
2024-08-23 20:37:12
113阅读
Linux Centos7官方下载地址Linux : CentOS-7-x86_64-DVD 官方下载地址:http://isoredirect.centos.org/centos/7/isos/x86_64/安装Linux Centos7按照下面两个步骤:创建空的虚拟机。指定Centos7安装包路径,安装Centos7。创建空的虚拟机1、创建新的虚拟机。 2、选择自定义安装,点击下一步。 3、点
转载
2024-03-07 13:13:55
231阅读
centons下ftp通过虚拟用户来管理网站
一、ftp基础操作1.1、查看是否安装了vsftp方法一:rpm -qa | grep vsftp 方法二:whereis vsftpd 1.2、安装vsftp方法:yum install -y vsftpd/yum install vsftpd使用上述两个中的其中
转载
2024-02-08 15:26:33
70阅读
计算机基本概念:1、计算机硬件组成:2、计算机系统结构:3、操作系统的功能:硬件驱动、进程管理、内存管理、网络管理、安全管理、文件管理等。4、OS通用目的的软件程序:用户<-->应用软件<-->操作系统<-->硬件。linux起源:1、1991年Linus Torvalds 发布Linux创建开放源码,类Unix 的内核,在GPL下发布,(下载地址:www.ke
文章目录前言1.创建虚拟机2.选择操作系统和版本3.自定义虚拟机名称和安装位置4.选择处理器数量和内核数量5.选择内存大小6.选择网络类型7.选择I/O控制器类型8.选择磁盘类型9.选择创建新的磁盘10.指定磁盘容量和分配方式11.指定磁盘文件名称12.自定义硬件,选择安装光盘13.正式开始安装14.选择安装Centos715.选择语言16.调整时间,时区17.选择预安装的软件18.配置分区19
转载
2023-07-14 17:12:42
276阅读
前言经过上一篇文章,发现机器网卡找不到,不能上网,对于一个服务器怎么能不上网呢,于是查找了很多资料也踩了很多坑,终于解决了。下面就是解决方法:本人用的是Intel nuc 8i5bek型号的机器,是19年新出的机器,所以较老的系统是没有集成驱动的,因此需要下载去intel 官网下载linux系统对应的网卡源码,进行编译、安装,通过网上的 lspci | grep -i ethernet 命令并看不
转载
2023-10-13 06:41:08
314阅读
前言GCC(GNU Compiler Collection,GNU编译器合集)是linux以及其他类UNIX平台上进行开源项目,软件开发等必不可少的工具链组成之一。(其他的还有clang以及llvm等编译器)对于程序员以及系统管理员而言,经常需要从软件的源码进行手动编译安装,不论是configure脚本,还是make工具,最终都需要调用gcc(或者其它编译器)来进行实际的编译工作。另外,各种软件也
转载
2024-05-04 13:23:07
3544阅读
目录第一步、安装CentOS7第二步、下载Oracle 11g第三步、在终端,创建oracle用户,oracle使用目录授权1、创建用户:useradd oracle2、修改/设置密码:passwd oracle3、由于使用/data目录,我使用root授权4、必备类库,选择yum安装5、swap分区可用为0,可以使用创建swap分区,也可以创建swap文件(本文选择创建swap文件)第四步、配置
转载
2024-08-19 12:40:12
182阅读
mysql-5.7.9 64位 RPM集合包在Linux系统中的安装过程。因为我用的64位的CentOS7所以我下的是64位的集合包,如果你用的32位的Linux系统请下载32位的集合包。这里我只讲安装,不解释命令的使用方法,因为都是些比较常用的基本命令,不懂的,可以去网上找资料,或者下个Linux常用命令手册。在安装前我们可以先添加一个名为mysql的用户组:groupadd mysql。再添加
转载
2024-08-14 11:34:34
84阅读
最近妹子要学习linux,于是决定在win7上装个centos耍耍,整体流程记录如下:工具1.笔记本win7旗舰64位 2.U盘一只(根据centos系统大小决定,当然越大越好洛) 3.软碟通,EasyBCD 4.centos系统镜像(网上随便down个iso镜像)方法一、磁盘分割已经有现成教程了,直接上连接http://jingyan.baidu.com/article/a17d52853
转载
2024-08-23 12:49:45
263阅读
Centos6.3安装KVM
一、安装kvm
1 在安装CentOS6.3时可以选择安装好kvm
2 如果未安装好kvm,请按照下列方式安装
[创建本地yum源]
挂载iso文件
mount -o loop -t iso9660 CentOS-6.3-x86_64-bin-DVD1.iso /mnt
设置本地yum源
在/etc/yum.repos.d/创建 “任意文件名.repo"
转载
2024-08-02 09:10:58
64阅读
1.Apache安装# yum install httpd (centos之下,Apache的名字叫httpd,和Apache的主程序 httpd.exe 同名)2.打开并测试Apache(1)先确保,云服务器的80端口,是允许外网访问的。(2)开启Apache服务# service httpd start (centos之下,Apache的名字叫httpd,和Apache的主程序
转载
2024-05-11 13:35:49
436阅读
本文主要思路参考了的方法,但个人在配置过程中遇到过很多的问题,最终配置成功并在此总结。 本伪分布式是在vmware上建立的,centos版本为7.7,java版本是自带的openjdk1.8.0,hadoop版本为3.2.1 安装流程:
建立主机
配置主机host名和ip
建立分机
转载
2024-01-11 00:26:52
53阅读
目录(一)新建一个虚拟机(二)配置网络(三)安装vim工具(四)设置ssh免密登录(五)设置时间同步(六)修改主机名1.方法一2.方法二(七)给主机文件添加IP名称映射(八)安装JDK8(九)安装Hadoop1.打开Xftp,连接虚拟机,在/opt目录下新建两个文件夹2.将Hadoop压缩包传输到install文件夹中3.解压文件到指定目录4.更改/opt/soft/目录下hadoop的文件名5.
转载
2023-12-29 23:53:39
65阅读
1.点击“文件“—“新建虚拟机”—“下一步”2.虚拟机硬件兼容性:默认—然后点击”下一步“3.安装客户机操作系统:点击”稍后安装操作系统“—”下一步4.选择客户机操作系统:点击”linux(L)"—点击“CentOS7 64位”(要选择对应的版本我这里下载的镜像是64位的)—点击“下一步”5.命名虚拟机—虚拟机名称:CentOS 7 (名称可以自取)位置最好不要放在C盘,个人推荐D盘6.处理器配置
转载
2023-12-16 13:44:01
69阅读
由CentOS社区提供的服务器操作系统CentOS 8已经于2021年底停止维护,CentOS 7也将于2024年6月30日停止维护,这意味着用户将无法继续获得官方升级和补丁,一旦发现新的安全漏洞,很容易被恶意攻击者利用,大量服务器上承载的用户关键业务系统将面临严重的安全隐患,数据安全性将无法得到保障。应对CentOS停服 麒麟信安可为用户提供完善的CentOS 迁移解决方案麒麟信安作为国产操作系
转载
2024-09-02 11:40:47
39阅读