本文以 SQL 查询为基础，在关系模型的执行方案下讨论了分布式/并行 OLAP 任务执行的基本模型和经典方案，并且涵盖了一些最新研究（如动态调整技术）的介绍。主要策略：Data Locality、Working Stealing、Delay Stealing、慢任务异地重试等。 万变不离其宗，这些策略与分布式系统中的任务并行策略本质上很像，例如通过数据分区来支持分布式、任务调
什么是PostgreSQL？ 以 加州大学 伯克利分校计算机系开发的 POSTGRES，
是一个功能强大的开源对象关系数据库管理系统(ORDBMS)
。PostgreSQL(也称为Post-gress-Q-L)由PostgreSQL全球开发集团(全球志愿者团队)开发。 它不受任何公司或其他私人实体控制。 它是开源的，其源代码是免费提供的。PostgreSQL是
Docker 镜像的操作1. 拉取镜像2 查看本地镜像3 搜索镜像4 删除本地镜像5 镜像的导入和导出6 创建镜像6.1 已有镜像的容器创建6.2 基于本地模板导入7 导出和导入镜像 1. 拉取镜像# 从docker hub中央仓库拉取镜像到本地
docker pull 镜像名称[:tag]
镜像名称： 这个是仓库地址；url的地址一样
tag： 这个才是镜像，如果不指定那么就是latest
转载
2024-09-15 14:33:53
46阅读
在 PL/SQL 程序中，对于处理多行记录的事务经常使用游标来实现。
§4.1 游标概念
为了处理 SQL 语句，ORACLE 必须分配一片叫上下文( context area )的区域来处理所必需的信息，其中包括要处理的行的数目，一个指向语句被分析以后的表示形式的指针以及查询的活动集(active set)。
游标是一个指向上下文的句柄
开始之前的一段废话：放假回家了也就没有写博客了，家里没有网，偶尔也只能用手机上一上，看一看是否有新的评论和回复，是否有和我研究相关的博文和动态。今天是三月一号，学校的校园网帐号解封了，于是便把寒假部分的工作内容总结一下，在此也和大家一起分享我的心得，希望对各位读者能有所帮助。本文的例子是我帮一位兄弟做的，算起还是我的学长，只不过不同学校，具体的要求如下：http://bbs.esrichina-b
并发的基本概念并发的概念： 指网站在同一时间访问的人数，人数越大，瞬间带宽要求更高。服务器并发量分为： 1.业务并发用户数；2.最大并发访问数；3.系统用户数；4.同时在线用户数； 估算业务并发量的公式： C=nL/T C^=C+3×(C的平方根) 其中：C是平均的业务并发用户数、n是login session的数量、L是login session的平均长度、T是指考察的时间段长度
转载
2024-05-07 17:50:41
58阅读
并发冲突是一个比较常见的问题，无论是elasticSearch还是类似于mysql的数据库都存在并发冲突的问题。 并发冲突出现的场景：例如当前售卖苹果，由于是圣诞节，苹果按个来买。当前有100个苹果。当用户1过来购买苹果1个时，用户2同时过来购买1个苹果，用户1对应的线程从es中取出数据为100，用户2对应的线程从es中取出的数据也为100。当用户1的线程执行完成之后苹果的个数减1,变成99.此时
转载
2024-03-18 13:59:16
84阅读
我国信息安全等级保护制度分为以下五个主要的工作环节：信息系统定级、信息系统备案、安全建设整改、安全等级测评和安全监督检查。信息系统定级。信息系统定级按照自主定级、专家评审、主管部分审批、公安机关审核的流程进行。信息系统运营使用单位按照《管理办法》和《信息系统安全等级保护定级指南》(GB/T22240-2008)，以下简称《定级指南》。自主确定信息系统的安全保护等级。为保证信息系统定级准确，可以组织
上篇讲述gateway的部署和使用，gateway统一管理和转发了HTTP请求，在互联网中大型项目一定存在复杂的业务关系，尤其在商城类软件中如淘宝、PDD等商城，尤其在秒杀场景中，并发量可以到达千万级别，此时数据库就会显得很无力。 以Mysql为例，
转载
2024-04-12 13:49:09
57阅读
QPSQPS：全名 Queries Per Second，意思是“每秒查询率”，是一台服务器每秒能够响应的查询次数，是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。 简单的说，QPS = req/sec = 请求数/秒。它代表的是服务器的机器的性能最大吞吐能力。 服务器的 QPS 一般我们可以使用 http_load 来测试，统计处 web 服务器的吞吐量和负载TPSTPS 即 Tr
转载
2024-01-30 22:22:01
169阅读
Nginx报错Nginx服务器访问量非常高，在Nginx的错误日志中不停的输出如下错误信息。
2021-06-17 02:53:49 [alert] 13576#0: accept() failed (24: Too many open files)2021-06-17 02:53:49 [alert] 13576#0: accept() failed (24: Too many open fi
原创
2021-07-30 15:13:17
826阅读
分布式缓存技术-redis缓存的用途高性能：redis是基于内存进行操作的，性能较高，前端发送请求后，后端会查询数据库，中间加入redis后可以将数据先存在redis中，下次读取的时候会直接读取redis的数据性能就会提高高并发：mysql的数据库每秒查询率（QPS）是2000，redis的上限就比较大，单点下系统吞吐量（TPS）是8W/S ，每秒查询率（QPS）是10W ，redis集群情况下根
转载
2023-06-14 17:11:08
7284阅读
1、并发和多线程 并发的作用在于充分利用资源（多处理器or多核），在有限的资源下进行多任务的处理。 并发的概念表现在编程上，则为多线程编程，常见的实例：java web中的servlet就是采用的多线程机制。 线程作为轻量进程，本身不具有资源，而进程才是拥有资源的主体。2、为什么使用多线程 多线程建立在操作系统的产生之后，在此之前，机器或者说处理器处理程序时，只能按照单个的执行流程进行，即
转载
2024-04-09 22:31:30
45阅读
redis集群原理 redis是单线程，但是一般的作为缓存使用的话，redis足够了，因为它的读写速度太快了。 官方的一个简单测试：测试完成了50个并发执行100000个请求。设置和获取的值是一个256字节字符串。结果:读的速度是110000次/s,写的速度是81000次/s 在这么快的读写速度下，对于一般程序来说足够用了，但是对于访问量特别大的网站来说，还是稍有不足。那么，如何提升red
转载
2024-02-17 21:18:38
81阅读
大家好，今天为大家分享一次 ES 的填坑经验。主要是关于集群恢复过程中，分片恢复并发数调整过大导致集群 hang 住的问题。一、场景描述废话不多说，先来描述场景。某日，腾讯云某 ES 集群，15个节点，2700+ 索引，15000+ 分片，数十 TB 数据。由于机器故障，某个节点被重启，此时集群有大量的 unassigned 分片，集群处于 yellow 状态。为了加快集群恢复的速度，调整分片恢复
转载
2024-05-11 12:37:28
82阅读
在当今信息技术发展的浪潮中，自动化运维成为了企业提高效率的重要手段之一。在众多自动化运维工具中，Ansible作为一种简单易用、高效便捷的配置管理和部署工具备受推崇。而在Ansible中，一个关键的概念就是“并发量”。本文将详细探讨Ansible并发量的重要性以及如何正确配置并行任务。
Ansible是一种基于SSH协议实现的自动化工具，它通过在远程主机上执行命令、发布模块来实现配置管理、应用部
原创
2024-02-04 14:35:23
91阅读
服务器就会和浏览者
的浏览器建立链接，每个链接表示一个并发。当页面包含很多图片，图片并不是一个一个显示的，服务器会产生出多个链接同时发送文字和图片以提高浏览速度。如果页面中的图片越多那么服务器的并发链接数量就越多。当图片或页面被服务发送后服务器就关闭链接用于和其他请求者建立链接。每次并发几乎是瞬间完成一般在几个毫秒和几十毫秒之间。
10个并发连接大约可支持20-50人同时在线。
一
转载
2024-07-18 14:14:08
27阅读
先说我们最熟悉的【并发量】：就是同时访问同一服务器的链接数。也可以说是：系统同时处理的request数量 QPS：Queries Per Second（字面意思为：查询每秒）官方解释为：每秒查询率：是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。可以理解为：每秒处理的request 数量通常QPS作用：表达和衡量当前系统的负载。形容当前系统的运行状态时，例如可以说
转载
2024-07-09 12:22:46
237阅读
文章目录QPSTPS并发数吐吞量RT计算1：QPS、RT、并发数计算PVUVDAUMAU计算2：峰值QPS和机器计算 QPSQPS Queries Per Second 是每秒查询率 ,是一台服务器每秒能够相应的查询次数，是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准, 即每秒的响应请求数，也即是最大吞吐能力。TPSTPS Transactions Per Second 也就是事务
PL/SQL是基于Oracle的一个主流应用程序编程语言，它的主要特点是将SQL语句与过程化程序开发语言相结合，以实现更为复杂的商业逻辑。本文主要就其中多进程通信进行讨论。
显然，多进程技术是用来提高应用的并发性，进而提高整个系统的执行效率，那么如何在PL/SQL中实现多进程的通信呢？其实，PL/SQL其设计的初衷主要是增强SQL语句的功能，
