作者：老顾一、前言有时候我们需要知道线上Redis使用情况，尤其需要知道一些前缀的key值，那我们怎么去查看呢？而且通常情况下Redis里的数据都是海量的，那么我们访问Redis中的海量数据时，如何避免事故产生？今天就通过我们实际的一次生产事故，给大家分享一下！二、事故产生因为我们的用户token缓存是采用了【user_token:userid】格式的key，保存用户的token的值。我们运维为了
转载
2023-08-26 14:14:11
114阅读
目录大数据之kafka第一章 kafka概述1.1 定义1.2 消息队列1.2.1 传统消息队列的应用场景1.2.2 消息队列的两种模式1.3 kafka基础架构1.3.1 Broker1.3.2 Topic1.3.3 partition1.3.4 Leader1.3.5 Follower1.3.6 replication第二章 kafka快速入门2.1 安装部署2.1.1 集群规划2.1.2 j
转载
2024-04-08 21:55:32
51阅读
redis维基百科 Redis是一个使用ANSI C编写的开源、支持网络、基于内存、可选持久性的键值对存储数据库(非关系型数据库)。redis的特性 ① 远程: 分为客户端,服务端.可以分别部署到不同的机器上,通多自定义协议进行传输交互,平时说的redis通常指的是redis的服务端 ② 基于内存: 所有数据结构存在内存中,所有操作非常高效 ③ 非关系型数据库: 本质是数据库,存储数据,区别于my
转载
2023-09-19 23:19:21
71阅读
1.Redis常见使用场景数据高并发的读写，海量数据的读写，对扩展性要求高的数据2.Redis为什么是单线程，速度为什么快因为cpu不是redis的瓶颈，Redis的瓶颈最有可能是机器内存或者是网络带宽。既然单线程容易实现，而且cpu也不会成为瓶颈，就采用单线程。速度原因：纯内存操作；单线程操作，避免了频繁的上下文切换；采用了非阻塞I/O多路复用机制。3.缓存击穿、缓存雪崩、缓存预热、缓存更新、缓
转载
2023-08-11 10:06:49
104阅读
一、常用命令1、rpush key item [item…]说明：向list类型的key的右侧中添加一个或者多个item，返回list的长度2、lpush key item [item]说明：向list类型的key的左侧添加一个或者多个item，返回list的长度3、lindex key index说明:返回列表中下标的值。index超过列表长度返回(nil)4、lrange key [start
转载
2023-08-15 13:30:58
301阅读
Redis简介Redis（全称：Remote Dictionary Server 远程字典服务）是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。从2010年3月15日起，Redis的开发工作由VMware主持。从2013年5月开始，Redis的开发由Pivotal赞助。Redis 是完全开源免费的，遵守BSD协议，是一
转载
2024-01-01 10:46:00
80阅读
1 什么是大 key Redis 中有常见的几种数据结构，每种结构对大 key 的定义不同，比如： value 是 String 类型时，size 超过 10KB 为大 key； value 是 ZSET、Hash、List、Set等集合类型时，它的成员数量超过 1 万个为大 key。 2大 key 有什么影响 我们都知道，Redis 的一个典型特征就是：核心工作线程是单线程。 单线程中请求任务的
转载
2023-05-26 17:41:41
114阅读
# 如何在 MySQL 中增加字段
## 一、流程
| 步骤 | 操作 |
| ------ | --------- |
| 1 | 连接数据库 |
| 2 | 选择数据库 |
| 3 | 修改表结构 |
## 二、操作步骤与代码
### 步骤1：连接数据库
首先，我们需要连接到 MySQL 数据库。可以使用以下代码：
```sql
-- 连接到
原创
2024-06-05 06:22:31
29阅读
在信息技术迅猛发展的今天，软件行业作为国家经济发展的重要支柱，对于专业人才的需求也日益增长。为了适应这一趋势，并提升软件从业人员的整体素质，我国设立了软件水平考试（简称软考），以标准化的方式评估从业者的专业技能。近年来，随着大数据技术的兴起，软考中也逐渐融入了大数据相关的知识点，其中“大数据行程卡”便是这一背景下的一个缩影。
大数据行程卡，顾名思义，是运用大数据技术分析和处理行程信息的一种应用方
原创
2024-04-28 10:48:15
95阅读
1.从redis缓存中获取的为map集合Map<String, String> m = null;
try {
m = RedisUtil.getIns().hashGetAll(kdid);
} catch (Exception e) {
e.printStackTrace();
}
List sublist = new ArrayList();
for (String key :
转载
2023-05-25 15:38:08
820阅读
Redis（上）前言一、Redis为什么快二、BIO、NIO、AIO三、Redis数据类型3.1 key3.2 String3.3 List3.3.1 Redis List的特点3.3.2 相关操作3.4 Set3.5 Hash3.5.1 数据结构3.5.2 相关操作3.6 Zset总结 前言Redis是基于内存的开源的key-value存储系统，本文主要介绍有关Redis的基本概念以及数据类型
转载
2023-08-01 19:49:10
68阅读
redis 查询优化原理spring 封装了redis的接口，使得我们在项目中操作redis 异常的简单方便，甚至不用考虑何时释放redis连接。通常只需要两个步骤，注入 redisTemplate选择操作的数据类型 增、删、改、查，等等应有尽有如此简单方便，redis 在项目开发中已经是不可或缺的存在。要知道redis是单线程的，每个命令都是原子性的，单个命令读写起来速度很快，但是多个redis
转载
2023-09-18 22:49:29
86阅读
概述Remote Dictionary Server(Redis) 是一个由 Salvatore Sanfilippo写的 key-value存储系统，是跨平台的非关系型数据库，也属于一种nosql数据库，通常被称为数据结构服务器。Redis 是一个开源的使用 ANSI C 语言编写、遵守 BSD 协议、支持网络、可基于内存、分布式、可选持久性的键值对(Key-Value)存储数据库，
转载
2023-09-26 12:24:20
119阅读
redis 5大数据类型第一部分之基础redis介绍Redis是一个开源的key-value存储系统。 支持的value类型包括string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)和hash（哈希类型）。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作，而且这些操作都是原子性的。 在此基础上，Redis支持
转载
2023-08-18 22:47:41
116阅读
缓存穿透，缓存击穿，缓存雪崩，我们也需要有所掌握，并且需要知道怎么解决。1. 缓存穿透 缓存穿透是指前端请求到达后端服务器后，先从Redis缓存中查询，没有查询到结果，然后查询数据库，数据库查询不到数据则不进行数据缓存。流程图示如下 这种在代码逻辑上会先查询Redis，再查数据库。逻辑上Redi
转载
2023-06-13 15:29:57
209阅读
1. 大数越界问题概述大数越界：在程序运算的过程中，变量可能超出 int32 甚至 int64 的取值范围。解决方法：循环取余。快速幂取余二分取余1.1 循环取余循环取余是最为简单的一种。就是在每次操作时，就对边界进行取余操作，确保结果res，是在边界内的。把指数操作转换成一次次的乘法，每次相乘就取以此余数，使得数值不超过范围例如： 1.2 快速幂
转载
2024-01-22 15:21:13
238阅读
hadoop是什么？Hadoop就是为大数据应运而生、Hadoop 框架是用 Java 编写的、Hadoop是Apache下的子项目、Hadoop是分布式系统基础架构，它主要是用于大数据的处理、Hadoop可以看成是一个平台或者生态系统。Hadoop生态系统包含哪些组件？有分布式存储HDFS，有并行计算 MapReduce，有NoSQL数裾库的HBase,有数据仓库工具 Hive, 有 Pig 工
转载
2023-09-06 20:43:14
63阅读
大数据性能测试的目的1.大数据组件的性能回归，在版本升级的时候，进行新旧版本的性能比对。2.在新版本/新的生产环境发布之后获取性能基线，建立可度量的参考标准，为其他测试场景或者调优过程提供对比参考。3.在众多的发行版本中进行测试比对，为PoC测试提供参考数据。4.支持POC测试，得出结论，到时候可以根据业务模型和需求，或者根据客户需求选择不同的方案。5.在客户方进行性能测试，达到客户要求的性能标准
转载
2023-12-15 08:49:39
36阅读
1、Redis概述 Redis是一个开源，先进的key-value存储，并用于构建高性能，可扩展的应用程序的完美解决方案。 Redis的三个主要特点： Redis数据库完全在内存中，使用磁盘仅用于持久性。 相比许多键值数据存储，Redis拥有一套较为丰富的数据类型。String，Li ...
转载
2021-08-11 11:00:00
207阅读
2评论
# 大数据中的 Redis
随着大数据技术的快速发展，如何高效处理和存储海量数据成为了企业面临的重要挑战。作为一个高性能的键值存储数据库，Redis 在大数据环境中正逐渐展现出其强大的优势。本文将探讨大数据背景下 Redis 的应用，以及如何在代码中实现基本操作。
## Redis 的优势
1. **高性能**：Redis 是一个内存数据库，访问速度极快，适合需要高并发的场景。
2. **丰
