用yum安装的nginx的日志默认安装在路径：/var/log/nginxnginx配置文件：/etc/nginx/nginx.conf （总配置文件）/etc/nginx/conf.d/default.conf （网站级别的配置文件）如果要使用nginx默认配置的日志格式，并改变日志的存储位置，可以在/etc/nginx/conf.d/default.conf 的server中直接添加日志文件的
转载
2024-03-07 18:00:51
20阅读
WhatNginx是一款轻量级的Web服务器、反向代理服务器，由于它的内存占用少，启动极快，高并发能力强，在互联网项目中广泛应用。 反向代理当我们在外网访问百度的时候，其实会进行一个转发，代理到内网去，这就是所谓的反向代理，即反向代理“代理”的是服务器端，而且这一个过程对于客户端而言是透明的。 服务器根据客户端的请求，从其关联的一组或多组后端服务器（如Web服务器）上获取资源，
转载
2024-10-26 21:53:01
22阅读
今天早上一来，我进行重启Nginx 发现不能重启了，但是一些Nginx的代理还是可以用的我就懵了，我用命令去查看进程发现master 进程没有了，只有worker了。然后打算重启也启动不起来了，提示我端口被占用了。nginx: [emerg] bind() to 0.0.0.0:21633 failed (98: Address already in use)
nginx: [emerg] bin
前言环境：Centos7.9 、FastDFS_v5.07.tar.gz 前两篇我们讲了FastDFS的安装与3个配置文件，现在我们就来启动一下FastDFS，并安装nginx，结合nginx来访问下载Storage server里的图片数据等。Tracker server和Storage server的启动现在我们就来启动Tracker server和Storage server，首先先启动Tr
转载
2024-04-05 08:16:05
116阅读
目录安装fastDFS:源码安装方式1.在/home/yz/下mkdir fastDFS f放入以下文件并解压：2.安装fastDFS依赖包：3.安装FastDFS4.配置跟踪服务器tracker5.配置存储服务器storage6.启动tracker和storage7.测试是否安装成功安装fastdfs-nginx-module：nginx操作fastdfs的工具1.安装nginx以及驱动模块2.
# Spark没有Master节点
## 简介
Apache Spark是一种快速、通用的集群计算系统，可以处理大规模数据。Spark的优势在于其分布式计算模型，可以将计算任务分解为多个任务，并在集群中的多个节点上并行执行。然而，有时候我们可能会遇到一个问题，即Spark找不到Master节点。本文将介绍这个问题的原因以及可能的解决方法。
## 问题原因
在Spark中，Master节点是
原创
2023-08-12 10:41:55
218阅读
一、概述 发布：发布者将MSG post到某一特定通道上，channel将信息缓存 在说明发布流程之前有必要说明下channel和msg的数据结构。 二、数据结构 2.1 MSG 发布时，模块先将消息转化为ngx_http_push_stream_msg_t的数据结构进行存
准备工作192.168.16.128192.168.16.129两台虚拟机。安装好Nginx安装Nginx更新yum源文件：rpm -ivh http://nginx.org/packages/centos/7/noarch/RPMS/nginx-release-centos-7-0.el7.ngx.noarch.rpm
wget -O /etc/yum.repos.d/CentOS-Base.r
转载
2024-04-11 09:09:12
37阅读
# 解读HBase Master节点的作用及影响
在HBase中，Master节点是整个集群的控制中心，负责调度和管理RegionServer节点，协调数据的读写操作，并监控集群的运行状态。如果HBase Master节点失效，将会影响整个集群的正常运行。本文将针对HBase Master节点没有的情况进行分析，并给出一些解决方法。
## HBase Master节点的作用
HBase是一个
原创
2024-03-26 05:50:22
69阅读
# 如何在没有 Master 的情况下实现 Spark on YARN
在大数据处理的世界中，Apache Spark 是一个流行的框架，它能够有效地处理大量数据。当我们将 Spark 运行在 YARN（Yet Another Resource Negotiator）之上时，许多用户可能会遇到没有 Master 的情况。这篇文章将指导你如何在此环境下运行 Spark 应用。
## 流程概述
Hbase入门1.概述HBase–HadoopDatabase，是一个高可靠性、高性能、面向列、可伸缩、实时读写的分布式数据库,利用HadoopHDFS作为其文件存储系统,利用HadoopMapReduce来处理HBase中的海量数据,利用Zookeeper作为其分布式协同服务,主要用来存储非结构化和半结构化的松散数据(列存NoSQL数据库) 2.HBase体系架构 client • 包含访问
多进程你可能很熟悉，也许有一套自己的使用习惯和方法。这东西没有什么权威建议，书上只是给出了基本知识点，至于具体怎么去用，因人而异。nginx在多进程设计方面有很多值得学习和借鉴的东西，我认为是一套比较好的实现方案。你也许认为这东西很简单，是老生常谈的东西了，但是我这里要提醒你一下，俗话道酒是陈的香，越经典的东西越值得去琢磨，不要对自己太自信。善于思考的家伙总是会在一些老的技术上给你许多新鲜
今天发现用google浏览器访问nginx服务器时，部分文件请求无法正常加载，导致页面显示不正常。查看nginx错误日志，出现了大量这样的数据：
[plain]
view plain
copy
1. 2015/04/22 13:31:59 [alert] 13175#0: worker process 2703 exited on si
转载
2024-10-25 11:15:55
71阅读
在主节点机器上执行命令/opt/modules/app/hadoop-2.7.4/sbin/start-all.sh（相当于执行/opt/modules/app/hadoop-2.5.0/sbin/start-dfs.sh和/opt/modules/app/hadoop-2.5.0/sbin/start-yarn.sh）然后jps发现没有namenode，查看logs日志发现namenode没有格
原创
2018-08-15 19:51:00
10000+阅读
点赞
# HBase中的Master和NameNode
HBase是一个开源的非关系型数据库，基于Hadoop构建，用于存储大数据。而在HBase架构中，Master节点和RegionServer节点是核心组件。然而，许多人可能会对HBase Master和Hadoop的NameNode之间的关系产生误解。本文将详细探讨这个主题，解释为何HBase Master与NameNode是不同的角色，并包含代
# Spark 只有 Master 没有 Worker 的理解与应用
Apache Spark 是一个广泛使用的开源集群计算框架，适用于大规模数据处理。它的架构设计通常是由一个主节点（Master）和多个工作节点（Worker）组成。主节点负责调度、资源管理以及与用户的交互，而工作节点则负责实际的任务执行。然而，在某些特定的场景下，我们会遇到“Spark 只有 Master 没有 Worker”
原创
2024-09-10 03:43:59
122阅读
文章目录1. 问题：fail,noaddr2. cluster nodes节点信息解读2.1 每个字段的含义2.2 flags字段各标记含义3. redis集群fail,noaddr问题解决4. cluster指令5. 相关文章(1) redis集群搭建(2) 华为云两台机器内网互联(3) /etc/rc.d/init.d 详解|程序开机自启(4) Redis5.0+ Redis集群水平扩容|节
转载
2024-09-09 00:13:00
35阅读
负载均衡是为了解决某台服务器压力大而产生。下面针对这种问题引出LVS的使用：LVS需要基础设备：一台负载均衡服务器，两台真实服务器（A,B） 就像我们去访问淘宝网站，一致输入都是www.taobao.com进入网站，为了应对大量用户同时访问该网站，淘宝的服务器肯定不可能是一台，而是若干台，但是输入网址后他都能够进入该网站中的某台服务器，那么我们的负载均衡服务
执行configure脚本将生成临时文件。编译后执行"./nginx -V"可以查看版本号和配置参数，正如help选项所示" -V : show version and configure options then exit"。直接"./nginx"启动结果报错:“nginx: [emerg] unknown directive “gzip” in /usr/local/nginx/conf/ng
转载
2024-07-10 20:35:06
25阅读
文章目录Nginx进程模型解析Worker的抢占机制Nginx的事件处理机制小结 Nginx进程模型解析nginx包含了两种进程：worker进程：主进程master进程：工作进程通过下面的命令可以看出：[root@localhost html]# ps -ef|grep nginx
root 4443 1 0 07:10 ? 00:00:00 nginx:
