文章目录 什么是pipeLine 为什么使用pipeLine ? 为什么RedisCluster无法使用pipeline? 如何基于JedisCluster扩展pipeline？ 性能对比（提升10倍以上）： 本文中的代码来自我正在写的分布式缓存框架（主要解决缓存使用中的各种痛点：缓存穿透\redis-cluster pipeline\注解使用等等）。后续内部推广使用后、成熟后会开源回馈大家。什
转载
2024-09-23 10:56:11
59阅读
Redis 是一个 key-value 内存存储系统，并且支持丰富的数据结构，包括:stringlisthash tableset(集合)zset(有序集合)其体量很小，但却支持丰富的数据结构和相应的操作方式，是一个非常好的工具。然而像很多工具一样，Redis 也有一些坑，我也是被坑过一段时间的……当然，这里就不对 Redis 的数据结构及操作做过多说明了，可能的话单独再写一篇文章，不过考虑网上
转载
2024-09-29 10:25:41
69阅读
# Redis SET 与 GET 的性能影响分析
Redis 是一个高性能的键值数据库，广泛应用于缓存、实时数据处理等场景。在使用 Redis 的过程中，用户经常会碰到 `SET` 和 `GET` 操作的性能问题。那么，`SET` 操作的慢是否会影响到 `GET` 操作呢？
## 1. 理解 SET 和 GET 操作
在 Redis 中，`SET` 和 `GET` 是最常用的两个命令。`S
原创
2024-10-01 07:54:22
61阅读
性能调优的多样性1 SQL优化
union all可以改成两次连续的insert插入可以提高mapreduce性能，
但是在之后的版本hive自身做了优化，该方法则并不能再提高性能
2 数据块大小
减少map数量，提高网络传输压力有时候可以提高性能
3 不同的数据格式
SequenceFile
Parquet
ORC4 表设计
如分区，分桶，同时分区分桶优化案例干预SQl运行方式
1 引擎执行
转载
2024-02-01 21:03:56
240阅读
主要分析了 Redis Scan 命令基本使用和具体实现，包括 Count 参数与 Scan 总耗时的关系，以及核心的逆二进制迭代算法分析。1. 概述由于 Redis 是单线程在处理用户的命令，而 Keys 命令会一次性遍历所有 Key，于是在 命令执行过程中，无法执行其他命令。这就导致如果 Redis 中的 key 比较多，那么 Keys 命令执行时间就会比较长，从而阻塞 Redis。所以很多教
转载
2024-04-19 11:36:41
220阅读
单线程的。因此在使用一些时间复杂度为O(N)的命令时要非常谨慎。可能一不小心就会阻塞进程，导致Redis出现卡顿。 有时，我们需要针对符合条件的一部分命令进行操作，比如删除以test_开头的key。那么怎么获取到这些key呢？在Redis2.8版本之前，我们可以使用keys命令按照正则匹配得到我们需要的key。但是这个命令有两个缺点：没有limit，我们只能一次性获取所有符合条件的key，如果结
转载
2023-06-16 19:00:09
405阅读
作者介绍邹鹏，现任职于腾讯云数据库团队，负责腾讯云数据库MySQL中间件研发，多年的数据库、网络安全研发经验，对云计算平台的网络、计算、存储、安全有着深入的了解，在MySQL的高可用、高可靠、中间件方面有丰富的经验。 目录：什么是慢日志？什么情况下产生慢日志？慢日志相关参数慢日志输出内容慢日志分析工具慢日志的清理与备份 一、什么是慢日志？ MySQL的慢查询日志是MySQL提供的一种日志记录，它用
Redis之Set类型原理和应用场景(八)原理分析Set 类型的底层数据结构是由哈希表或整数集合实现的：如果集合中的元素都是整数且元素个数小于 512 （默认值，set-maxintset-entries配置）个，Redis 会使用整数集合作为 Set 类型的底层数据结构；如果集合中的元素不满足上面条件，则 Redis 使用哈希表作为 Set 类型的底层数据结构。哈希表在前面hash类型已经讲过了
转载
2023-07-28 10:11:39
175阅读
Set操作，Set集合就是不允许重复的列表
1、 sadd(name,values)
# name对应的集合中添加元素
2、scard(name)
# 获取name对应的集合中元素个数
3、sdiff(keys, *args)
# 在第一个name对应的集合中且不在其他name对应的集合的元素集合
4、sdiffstore(dest, keys, *args)
# 获取第
转载
2023-06-28 16:18:02
155阅读
1. string字符串类型Redis的String能表达3种值的类型:字符串、整数、浮点数， 常见操作命令如下表:命令名称命令格式命令描述setset key value赋值getget key取值getsetgetset key value取值并赋值setnxsetnx key value当value不存在时采用赋值，set key value NX PX 3000 原子操作，px 设置毫秒数
转载
2023-07-08 17:23:45
149阅读
之前介绍了Jedis的基本操作，连接池的支持，以及和Spring的整合。接下来的内容，继续Jedis的最为常见的操作。主要包括常用的列表(list)、集合(set)、有序集合(sorted set)、哈希表(hash)等数据结构，以及其他特性支持。. 使用list：可以使用列表模拟队列(queue)、堆栈(stack)，并且支持双向的操作(L或者R)。1. 右边入队：jedis.rpush("us
转载
2023-05-25 15:48:34
174阅读
文章目录一、`SET`1. 选项2. 返回值二、`GETSET`
一、SET
1. 选项名称描述EX seconds以秒的格式设置过期时间PX milliseconds以毫秒的格式设置过期时间EXAT timestamp-seconds以秒的格式设置key过期的Unix时间PXAT timestamp-milliseconds以毫秒的格式设置过期时间NX只有当key不存在时才进行设置XX
转载
2023-06-13 10:50:59
176阅读
一、Redis之Set简介1. Set是String类型的无序集合（元素成员唯一）。2. Set是通过hash表实现的，添加、删除、查找的复杂度都是O(1)。3. 每个集合最大成员数为232-1（40多亿）个。 二、Redis之Set命令行操作Sadd：将一个或多个元素加入集合，已经存在集合中的元素则忽略。若集合不存在则先创建，若key不是集合类型则返回错误。Smembers：返回集合中
转载
2023-08-25 10:50:42
284阅读
集合对象一个集合对象最多可以存储 232-1 个元素，并且元素不重复。编码方式集合对象的编码方式为：intset、hashtable。当同时满足如下两个条件时，编码方式为 intset；否则使用 hashtable。集合对象中的所有元素都是整数。集合对象中元素的数量 <= 512 个。（set-max-intset-entries）intsetintset 编码方式的集合对象的底层使用整数集
转载
2023-07-28 08:01:52
144阅读
整数集合intset用于有序、无重复地保存多个整数值，根据集合中元素的值自动选择使用整数类型来保存元素，例如：如果intset中绝对值最大的整数可以用int32_t来保存，那么整个intset中所有元素都使用int32_t来保存。 如果当前intset所使用的类型不能保存一个即将加入到该intset的新元素时候，需要对intset进行升级，比如新元素的类型是int64_t，而当前intset的类
转载
2024-06-11 21:31:37
43阅读
Redis 集合（Set）< 1>说明Redis set 对外提供的功能与list雷士，是一个列表的功能，特殊之处在于set是一个可以自动排重的，当你需要纯出一个列数据，又不希望出现重复数据时，set是一个很好的选择。并且set提供了判断某个成员是否在一个set集合内部的重要接口，这个也是list所不能提供的。Redis 的set 是string类型的无需集合，他底层其实是一个valu
转载
2023-09-06 22:56:27
70阅读
redis基本数据类型 redis一共分为5中基本数据类型：String,Hash,List,Set,ZSet 第一种StringString类型是包含很多种类型的特殊类型，并且是二进制安全的。比如序列化的对象进行储存，比如一张图片进行二进制储存，比如一个简单的字符串数值等等。 set和get方法：设置值set name realValue 取值 get n
转载
2023-08-30 13:35:44
410阅读
SortedSetSortedSet 和 Set 类型极为相似，它们都是字符串的集合，都不允许重复的成员出现在一个 Set 中。它们之间的主要差别是 SortedSet 中的每一个成员都会有一个分数 (score) 与之关联，Redis 正是通过分数来为集合中的成员进行从小到大的排序。然而需要额外指出的是，尽管 SortedSet 中的成员必须是唯一的，但是分数 (score) 却是可以重复的。在
转载
2023-11-25 11:24:42
35阅读
String set(String key, String value, String nxxx, String expx, long time);该方法是： 存储数据到缓存中，并制定过期时间和当Key存在时是否覆盖。 nxxx： 只能取NX或者XX，如果取NX，则只有当key不存在是才进行set，如果取XX，则只有当key已经存在时才进行set expx： 只能取EX或者PX，代表数据过期时间的
转载
2023-07-09 23:04:37
153阅读
使用redis操作set集合的学习，希望有所帮助public static void main(String[] args) {
Jedis jedis = new Jedis("localhost", 6379);
//测试jedis连接
//System.out.println(jedis.ping());
//操作s
转载
2023-06-13 23:37:42
229阅读
