一，Seata Server - TC全局事务协调器Seata AT 事务原理 《分布式事务（三）Seata分布式事务框架-AT模式介绍》，介绍了 AT 事务的三个角色：TC（事务协调器）、TM（事务管理器）和RM（资源管理器），其中 TM 和 RM 是嵌入在业务应用中的，而 TC 则是一个独立服务。 Seata Server 就是 TC，直接从官方仓库下载启动即可，下载地址：二，Seata Se
Presto因其优秀的查询速度被我们所熟知，它本身基于MPP架构，可以快速的对Hive数据进行查询，同时支持扩展Connector，目前对Mysql、MongoDB、Cassandra、Hive等等一系列的数据库都提供了Connector进行支持。是我们常用的SQL on Hadoop的解决方案。那么我们今天就来看一下，当我们选择Presto作为我们的查询引擎之后，我们需要考虑的问题。Presto
转载
2024-01-05 14:45:22
107阅读
web访问上1 首页生成静态html 一般我们写程序的时候，用户访问页面都是执行.do访问到后台返回响应的jsp，但像首页那种访问量大的页面，可以5分钟等做一次静态化，访问的时候直接返回响应的html页。2 图片服务器和页面服务器分离 不分离的话，html，jsp加载是按顺序加载，分离就可以同步加载，现在像微博的图片加载都是阿里给做的服务吧。3 web服务器的负载均衡 可以再多个tomcat
1、指定需要返回的字段[GOOD]: SELECT time,user,host FROM tbl[BAD]: SELECT * FROM tbl 2、合理设置分区字段当过滤条件作用在分区字段上面时，可以减少数据扫描的范围，有效提升查询性能。这个需要结合OLAP业务进行考虑，将常规过滤字段设置成分区字段，例如：订单时间（适用于时间范围的统计分析）、租户id（适用于多租户平台中各个租户的统
目录基本介绍配置指令limit_conn_zonelimit_conn其他limit_ratelimit_rate_afterlimit_req_zonelimit_req基本介绍在我们进行系统开发设计中，要考虑服务器流量异常，负载过大等问题。对于大流量恶意的攻击访问，会带来带宽的浪费，服务器压力，影响业务，往往考虑对同一个ip的连接数，并发数进行限制。nginx可以通过limit_conn_zo
介绍 Presto是一个开源的分布式SQL查询引擎，适用于交互式分析查询，数据量支持GB到PB字节。Presto的设计和编写完全是为了解决像Facebook这样规模的商业数据仓库的交互式分析和处理速度的问题。Presto支持在线数据查询，包括Hive, Cassandra, Mysql关系数据库以及专有数
转载
2024-07-19 14:46:17
121阅读
1. 配置Presto在安装目录中创建一个etc目录。 在这个etc目录中放入以下配置信息：节点属性：每个节点的环境配置信息JVM 配置：JVM的命令行选项配置属性：Presto server的配置信息Catalog属性：configuration forConnectors（数据源）的配置信息 2. Node Propertiesvi node.properties node
转载
2024-04-29 16:01:10
123阅读
并发是指在一个时间段内有多个进程在执行。 并行指的是在同一时刻有多个进程在同时执行。 如果是在只有一个CPU的情况下，是无法实现并行的，因为同一时刻只能有一个进程被调度执行，如果此时同时要执行其他进程则必须上下文切换，这种只能称之为并发，而如
转载
2024-10-22 09:39:04
40阅读
并发的基本概念并发的概念： 指网站在同一时间访问的人数，人数越大，瞬间带宽要求更高。服务器并发量分为： 1.业务并发用户数；2.最大并发访问数；3.系统用户数；4.同时在线用户数； 估算业务并发量的公式： C=nL/T C^=C+3×(C的平方根) 其中：C是平均的业务并发用户数、n是login session的数量、L是login session的平均长度、T是指考察的时间段长度
转载
2024-05-07 17:50:41
58阅读
并发冲突是一个比较常见的问题，无论是elasticSearch还是类似于mysql的数据库都存在并发冲突的问题。 并发冲突出现的场景：例如当前售卖苹果，由于是圣诞节，苹果按个来买。当前有100个苹果。当用户1过来购买苹果1个时，用户2同时过来购买1个苹果，用户1对应的线程从es中取出数据为100，用户2对应的线程从es中取出的数据也为100。当用户1的线程执行完成之后苹果的个数减1,变成99.此时
转载
2024-03-18 13:59:16
84阅读
1 nginx配置优化提高并发量 worker_processes 2; 这个按照CPU的核数来决定 2 worker_connections 65535; 这个一般设置65535即可 每个进程允许的最多连接数， 理论上每台nginx 服务器的最大连接数为worker_processes*worke
转载
2019-11-16 13:17:00
662阅读
2评论
presto启动时默认配置文件目录在安装目录下的etc下 每个节点的配置 在etc下创建node.properties文件，配置如下： node.environment=production node.id=ffffffff-ffff-ffff-ffff-ffffffffffff node.data ...
前言良好的掌握内存配置有利于对于presto进行更好的配置和调优Presto的内存池在Presto引擎中，有两种类型的内存分配:user和system。User memory是和输入的数据强相关的。（例如，聚合的内存使用与其成正比）。system memory 是执行的副产品（比如表扫描和写入缓冲区），并且不一定与查询输入聚合等操作有很强的相关性。内存的分配直接来自于presto的worker的m
转载
2024-06-12 14:25:08
124阅读
说明： 本次使用的安装包为 presto-server-0.196.tar.gz 大小(461M) 《官网》可下载的最新版本 presto-server-0.266.tar.gz 大小(1.1G) ? 我使用的是乞丐版 （1核2G） 的腾讯云服务器，故安装体积较小的版本进行测试。1.Presto安装配置1.1 安装安装是一如既往的简单：tar -zxvf presto-server-0.196.t
转载
2024-08-09 17:54:31
93阅读
Presto单体/集群搭建方法一、所需环境1、Mac OS系统或Linux2、jdk8以上yum install java-1.8.0-openjdk #centos系统3、MySQL/Hive数据源环境使用windows下的对应mysql数据库即可，开启数据库远程访问use mysql;
select host from user; #查看是否允许远程登录
update user set hos
转载
2024-04-20 11:34:37
229阅读
一、官网教程https://prestodb.io/docs/current/installation.html二、环境准备Presto需要：Linux Java8_64JDK自行安装，不用多说了三、单节点部署1.presto下载下载安装包：https://prestodb.io/download.html时间：2020-08-03，最新版本0.238.2，大小：800M左
转载
2024-03-22 14:53:09
409阅读
上篇讲述gateway的部署和使用，gateway统一管理和转发了HTTP请求，在互联网中大型项目一定存在复杂的业务关系，尤其在商城类软件中如淘宝、PDD等商城，尤其在秒杀场景中，并发量可以到达千万级别，此时数据库就会显得很无力。 以Mysql为例，
转载
2024-04-12 13:49:09
57阅读
QPSQPS：全名 Queries Per Second，意思是“每秒查询率”，是一台服务器每秒能够响应的查询次数，是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。 简单的说，QPS = req/sec = 请求数/秒。它代表的是服务器的机器的性能最大吞吐能力。 服务器的 QPS 一般我们可以使用 http_load 来测试，统计处 web 服务器的吞吐量和负载TPSTPS 即 Tr
转载
2024-01-30 22:22:01
169阅读
#nginx.conf
#运行用户
user www-data;
#启动进程,通常设置成和cpu的数量相等
worker_processes 1;
#全局错误日志及PID文件
error_log /var/log/nginx/error.log;
pid /var/run/nginx.pid;
#工作模式及
# 如何配置redis的并发量
## 一、流程图
```mermaid
pie
title 配置redis的并发量
"了解需求" : 20
"查找文档" : 30
"配置redis" : 50
```
## 二、具体步骤
| 步骤 | 操作 |
| ---- | ---- |
| 1 | 了解需求，明确需要配置redis的并发量 |
| 2 | 查找redi
原创
2024-03-21 07:25:40
46阅读
