序言一次面试中，我提到自己用过pm2，面试接着问：「那你知道pm2父子进程通信方式吗」。我大概听说pm2有cluster模式，但不清楚父子进程如何通信。面试结束后把NodeJS的多进程重新整理了一下。对于前端开发同学，一定很清楚js是单线程非阻塞的，这决定了NodeJS能够支持高性能的服务的开发。 JavaScript的单线程非阻塞特性让NodeJS适合IO密集型应用，因为JavaScript在访
转载
2024-02-18 12:24:49
373阅读
前言前文介绍过用Python写爬虫，但是当任务多的时候就比较慢， 这是由于Python自带的http库urllib2发起的http请求是阻塞式的，这意味着如果采用单线程模型，那么整个进程的大部分时间都阻塞在等待服务端把数据传输过来的过程中。所以我们这次尝试用node.js去做这个爬虫。为什么选择node.jsnode.js是一款基于google的V8引擎开发javascript运行环境。在高性能的
转载
2023-08-09 13:14:05
227阅读
# Node.js与MySQL的分布式架构探索
在现代分布式系统中，Node.js和MySQL是两个非常流行的技术选择。Node.js以其非阻塞I/O和高并发能力闻名，而MySQL则以其稳定性和丰富的功能受到了广泛使用。将这两个技术结合起来构建分布式系统，可以有效提高系统的性能和可扩展性。本文将探讨如何用Node.js和MySQL构建一个基本的分布式架构，并用代码示例来说明实现过程。
## 分
为什么选择node中间层文章节选自【探索】NodeJS中间层搭建现用的开发模式适用场景以后端的为主的MVC模式 在实现一些同步展现的业务效率很高 但是遇到异步同步结合的页面 在与后端沟通就会显得相对麻烦一些ajax为主的spa型开发模式 比较适合开发app类型的场景 但是只是适合做app 因为seo问题不好解决 对于很多类型的系统 这种开发方式也过重前后端分离从职责上划分 node实现了前后端分离
转载
2024-07-15 22:18:01
47阅读
前言昨天有小伙伴问 express 项目该如何部署。于是整理了这篇文章，主要介绍如何部署一个基于 node.js 开发的应用，比如使用 express.js 或者 koa.js 框架开发的服务端项目， 供有需要的朋友们参考。本文包含几个部分：线程和进程node.js 实现多进程的方案云服务器安装 Node.js 环境使用 PM2 管理 Node.js 项目使用 Nginx 实现接口服务的代理转发进
转载
2024-07-30 16:54:46
319阅读
在现代微服务架构中，使用 Node.js 与 MySQL 的组合来构建分布式系统越来越普遍。然而，如何在这种系统中实现分布式锁，以确保不同服务之间的资源访问安全，是一个关键问题。本文将详细介绍如何解决“Node.js MySQL分布式锁”问题的整个过程。
## 背景定位
在我们的业务场景中，某电商平台需要处理用户下单时对库存的并发访问。当多个用户同时尝试购买同一商品时，系统必须确保每个用户都只
# Node.js 和 Redis 实现分布式锁的完整指南
在分布式系统中，多个进程可能会同时访问共享资源，这可能会引发数据不一致的情况。为了解决这个问题，分布式锁（Distributed Lock）应运而生。我们将在本文中探讨如何使用 Node.js 和 Redis 实现一个简单的分布式锁机制。
## 什么是分布式锁？
分布式锁是一种用于控制对分布式系统中共享资源访问的机制。它确保在任一时
原创
2024-09-14 04:53:19
100阅读
分布式锁出应用场景有很多，比如库存扣减什么的，不再多说。我第一次接触这个是做数据同步服务。同步服务可能有多个实例，使用node.js开发，多个同步服务竟争为多个客户数据进行同步。 在实现分布式锁的时候，有两个特别重要的点要注意：1. 具有失效机制，防止死锁（加锁的实例不排除中途释放）2. 高可用高性能的锁获取与释放 下面直接上代码：...
enum Loc
转载
2023-11-14 09:11:38
152阅读
一、Express 简介 Express 时基于 Node.js 平台，快速、开放、极简的 Web 开发框架。Express 是基于内置的 http 模块进一步封装出来的，能够极大的提高开发效率。使用 Express 可以方便快速的创建 Web 网站服务器或 API 接口的服务器。其中，Web 服务器是专门对外提供 Web 网页资源的服务器；A
转载
2024-05-15 14:11:49
260阅读
1. 为什么要使用分布式架构构建一个现代的大型网站，往往有着大量的访问，伴随之就是系统的压力非常之高，响应速度非常之慢。一些初期的解决办法包括设置静态页面缓存、数据缓存等虽然可以解燃眉之急，但最终仍要走向分布式架构，包括分布式缓存、分布式webserver、分布的数据库、文件系统等等。本文中，主要介绍分布式webserver。2. 分布式服务器要解决哪些问题分布式webserver的构建并不是单纯
转载
2024-08-19 14:46:09
12阅读
为什么要做分布式 Jmeter 本身的局限性 一台压力机的 Jmeter 默认最大支持 1000 左右的并发用户数（线程数），再大的话，容易造成卡顿、无响应等情况，这是受限于 Jmeter 其本身的机制和硬件配置（内存、CPU等） 由于 Jmeter 是 Java 应用，对 CPU 和内存的消耗较大 ...
转载
2021-09-27 18:35:00
401阅读
2评论
# 实现3 nodejs分布式架构指南
## 简介
在这篇文章中，我将向你介绍如何实现一个基于Node.js的3节点分布式架构。这个架构可以帮助你实现高可用性和负载均衡，提高系统的稳定性和性能。
## 流程概述
首先，让我们看看整个实现过程的步骤：
| 步骤 | 操作 |
| --- | --- |
| 1 | 配置3台服务器，每台安装Node.js和pm2 |
| 2 | 创建一个主Nod
原创
2024-06-01 06:15:45
69阅读
全分布式redis集群搭建：单节点多实例1 删除2.8 bin目录及文件: # cd /opt/sxt/redis # rm -fr bin2 ftp 上传redis-cluster 目录到根目录 2 redis-cluster目录下解压redis 3.0 : # tar xf redis.....gz3 redis目录下make命令编译拷贝bin至 /opt/sxt/redis/下
转载
2023-06-13 12:47:45
124阅读
#下载最新的redis5.0
wget http://download.redis.io/releases/redis-5.0.3.tar.gz
tar -zxvf redis-5.0.3.tar.gz
cd redis-5.0.3
make
make install /usr/local/src/redis/redis-cluster
cd /usr/local/src/redis/redis
转载
2023-05-25 15:12:06
75阅读
目的：解决单机session不能共享问题，插入查询数据库时间效率问题，实现分布式缓存。准备材料：redis redis 下载之后安装部署： 解压压缩包，第一步点击run.bat如下图 第二步会出现如下图，有端口号的界面标示启动成功。 第三步如果发生产时候需要改掉端口号，防止被攻击，在redis.conf配置文件里面修改 第四步点击安装客户端 安装好后按如下操作 好了以上就将redis安装部署完成了
转载
2023-08-15 19:01:40
10阅读
Hive是为提供简单的数据操作而设计的下一代分布式数据仓库。它提供了简单的类似SQL的语法的HiveQL语言进行数据查询。同时，HiveQL语言能力不足时，它也能允许使用传统的map/reduce进行复杂数据分析。 Hive是搭建在Hadoop平台之上的。Hive并不是一个真正的数据库，它的元数据需要存储在其他数据库中(例如mysql)。。Hadoop平台提供了HDFS分布式存储系统和map/re
转载
2023-10-18 18:06:02
97阅读
Dubbo是阿里巴巴开源项目的一个分布式服务框架。可以提供高性能和透明化的RPC远程调用方案 Dubbo核心功能1.远程通讯:Remoting2.服务框架：Cluster 提供基于接口方法的透明远程过程调用，包括多协议支持，以及软负载均衡，失败容错，地址路由，动态配置等集群支持。3.服务注册中心：Registry 基于注册中心目录服务，使服务消费者能动态查找服务提供者
转载
2024-05-01 22:33:19
50阅读
spiderman基于scrapy-redis的通用分布式爬虫框架github 项目地址 spiderman目录效果图采集效果爬虫元数据分布式爬虫运行单机爬虫运行kafka实时采集监控示例介绍功能原理说明快速开始下载安装如何开发一个新爬虫如何进行补爬如何扩展分布式爬虫如何管理爬虫元数据如何配合kafka做实时采集监控其它注意事项hive环境问题demo采集效果爬虫元数据cluster模式stand
转载
2024-03-06 22:01:02
56阅读
在软件定义的世界里，企业通过Web应用和移动应用程序来提供大部分的服务，而Node.js迅速成为时下最为流行的一个平台之一，就和它可以搭建 响应速度快、易于扩展的web应用和移动应用很很大关系，并凭借这点成为了新的主流。作为大规模使用Node.js 的云计算服务提供商，UCloud积累了丰富的使用经验。本文为UCloud 公司高级工程师文天乐在深JS大会上发表的演讲内容，主要介绍了UCloud内部
转载
2023-12-16 23:03:29
96阅读
一.介绍redis分布式锁主要用到redis的setIfAbsent设置key，它的特点是：如果key已经存在，则返回false，可表示未获取到锁，否则返回true，表示获取到锁；二.如何用Redis实现分布式锁Redis分布式锁的基本流程并不难理解，但要想写得尽善尽美，也并不是那么容易。在这里，我们需要先了解分布式锁实现的三个核心要素：1.加锁最简单的方法是使用setnx命令。key是锁的唯一标
转载
2023-09-03 13:15:59
144阅读
