上一篇讲到了MongoDB的基本操作增删查改，对于查询来说，必须按照我们的查询要求去集合中，并将查找到的结果返回，在这个过程中其实是对整个集合中每个文档进行了扫描，如果满足我们的要求就添加到结果集中最后返回。对于小集合来说，这个过程没什么，但是集合中数据很大的时候，进行表扫描是一个非常恐怖的事情，于是有了索引一说，索引是用来加速查询
转载
2024-07-05 19:18:39
153阅读
# 如何实现Redis设置缓存失效命令
## 概述
在使用Redis进行缓存操作时，设置缓存失效命令是非常重要的一步。在本文中，我将教会你如何实现这一步骤。首先，我们来看一下整个过程的流程：
```mermaid
pie
title 缓存失效命令设置流程
"连接Redis" : 20
"设置缓存" : 30
"设置失效时间" : 30
"获取缓存" :
原创
2024-03-30 05:04:58
28阅读
一、redis的内存管理一般来说，稍微有点规模的软件，都会自己搞一块内存管理，原因很简单，统一管理内存，适应自己的场景。其实按大牛们的话，这未必是最优选择，实在是小看了写库的那群大牛们。不过说归说，人家写也不会给你报备，想写自然就写了。Redis就听从了大牛的看法，使用了底层更好的内存分配库，根据情况使用tmalloc,jemalloc 以及glibc中的 malloc（pmalloc）。 一般来
转载
2023-07-07 17:11:13
24阅读
## MongoDB索引失效的原因及解决方法
在使用MongoDB进行数据查询时，为了提高查询性能，我们通常会创建索引。然而，有时候我们发现即使有索引，查询仍然很慢，这可能是由于索引失效导致的。接下来我们将探讨MongoDB索引失效的原因及解决方法。
### 索引失效的原因
1. **数据量过大**
当数据量过大时，即使有索引，MongoDB也可能需要扫描大量数据才能找到匹配的结果。这会导
原创
2024-02-29 04:41:22
572阅读
目录1、_id索引：2、单键索引：3、多建索引：4、复合索引：5、过期索引：6、全文索引：7、地理位置索引：（1）2D索引：（2）2Dsphere索引： 1、_id索引：是绝大多数集合默认建立的索引，对于每个插入的数据，MongoDB都会自动生成一条唯一的_id字段 。2、单键索引：单键索引是最普通的索引，与_id索引不同，单键索引不会自动创建。单键索引的值为一个单一的值，如字符串，数字
转载
2023-09-23 15:52:17
152阅读
项目背景 预想中的项目是在MongoDB上建立一个类Disqus的评论系统（虽然Disqus使用的是Postgres，但是不影响我们讨论）。这里储存的评论可能是上万条，但是我们先从简单的4条谈起。每条评论都拥有时间戳（timestamp）、匿名（发送）与否（anonymous）以及质量评价（rating）这三个属性： 1. { timestamp: 1, anonymous: false, ra
转载
2024-07-30 13:37:35
45阅读
我们收到了很多关于索引的问题。这一部分解答了其中的一小部分。有几点要记住。 第一,MongoDB索引和MySQL索引非常相似并且对于MySQL的索引优化有很多也适用于MongoDB。 第二，更重要的是，这些索引的建议对你的应用提高也是有限的。对于应用的最佳索引策略应该基于很多的重要因素。包含了你期望查询的类型，数据读取与写入的比率，甚至于你服务器的空闲内存。意思就是
转载
2024-06-06 13:26:29
65阅读
项目原因，最近在对MongoDB进行数据存储优化 原有问题：日志数据量比较大，存到一张表，需要手工定时删除数据，且删除数据时间按天算数据会定时打包到HDFS，查询时间很慢，需要优化机器内存占用过大，副本集主节点内存占用超过90%，其他节点超过80% 解决方法：对日志进行按天写表，定时删除历史表对日志表增加TTL索引，定时删除过期数据一次创建自动增加索引，索引查询 &n
转载
2024-04-25 12:40:37
97阅读
安装好后的CentOS 7想安装个nginx学习下，发现不识别wget命令wget http://nginx.org/download/nginx-1.12.2.tar.gz原因是安装CentOS系统的时候安装的最小配置，默认没有安装wget， 只需要yum -y install wget即可。
原创
2021-07-28 09:57:19
1045阅读
今天一个同事突然问我索引为什么失效。说实在的，失效的原因有多种： 但是如果是同样的sql如果在之前能够使用到索引，那么现在使用不到索引，以下几种主要情况:1. 随着表的增长，where条件出来的数据太多，大于15%，使得索引失效（会导致CBO计算走索引花费大于走全表）2. 统计信息失效 需要重新搜集统计信息3. 索引本身失效&
转载
2023-09-21 13:47:30
293阅读
今天dba反映一个关于mangodb的慢查询c#mongodb实现了一个工单的查询，映射到mongodb中是这样；
{ $query: { _id: { $exists: true } }, $orderby: { ProcessStatus: 1, CreateTime: -1 } } 集合大概有37个属性+1个集合属性，数据规模在10万级别;客服反映查询集满； 解决方案
转载
2023-06-10 20:39:11
423阅读
一、背景二、MongoDB执行计划2.1 queryPlanner信息2.2 executionStats信息2.3 allPlansExecution信息三、云上用户建索引常见问题及优化方法3.1 等值类查询常见问题及优化方法 3.1.1 同一类查询创建多个索引问题 3.1.2 多字段等值查询组合索引顺序
转载
2024-03-11 17:32:32
69阅读
mongodb学习记录(四)索引属性为索引指定索引名：语法：db.[collection].ensureIndex({key1:1|-1,key2:1|-1},{name:"name"})
例子：在csbn表中创建一个名为“normal_index”的索引
db.csbn.ensureIndex({name:1,age:1},{name:"normal_index"})创建唯一(uniqu
转载
2024-03-22 07:08:47
52阅读
一、操作步骤①准备一个mongodb安装包②在安装目录下创建文件夹、修改配置项③安装、卸载windows服务④导入(还原)、导出(备份)数据(单集合、整个库)⑤创建索引⑥设置数据自动失效⑦DDL语句⑧mongodb可视化工具-Robomongo⑨ mongodb主从配置、加入连接权限 二、详细步骤1、准备一个mongodb安装包mongodb-win32-x86_64-200
转载
2024-06-29 20:13:09
105阅读
什么时候没用1.有or必全有索引;
2.复合索引未用左列字段;
3.like以%开头;
4.需要类型转换;
5.where中索引列有运算;
6.where中索引列使用了函数;
7.如果mysql觉得全表扫描更快时（数据少）;什么时没必要用1.唯一性差;
2.频繁更新的字段不用（更新索引消耗）;
3.where中不用的字段;
4.索引使用<>时，效果一般;详述（转）索引并不是时时都会生效
转载
2023-09-07 06:18:47
0阅读
# 快速入门：如何实现SparkSQL语句生效命令
作为一名经验丰富的开发者，我经常被问到如何让SparkSQL语句生效。今天，我将通过这篇文章，向刚入行的小白们介绍实现SparkSQL语句生效的整个流程。
## 流程概览
首先，让我们通过一个表格来概览整个流程：
| 步骤 | 描述 |
| --- | --- |
| 1 | 安装Spark环境 |
| 2 | 启动Spark Shell
原创
2024-07-20 11:11:16
33阅读
索引可以用来优化查询，而且在某些特定类型的查询中，索引是必不可少的。为集合选择合适的索引是提高性能的关键。先来mock数据 for (i = 0; i < 1000000; i++) {
db.users.insert({
"i": i,
"username": "user" + i,
"age": Math.floor(Math.r
转载
2024-06-27 21:50:29
20阅读
在Linux系统中，通过编辑hosts文件可以实现DNS解析、控制网络访问和加速网页访问等功能。在配置完hosts文件后，我们需要让修改生效，即让系统重新加载hosts文件并使新的配置生效。下面我们来详细介绍如何让Linux hosts生效命令。
在Linux系统中，有多种方法可以使hosts文件生效，下面列举了几种常用的方法：
1. 使用命令行重启网络服务
在终端中输入如下命令，即可重启网
原创
2024-05-27 10:28:11
2085阅读
# 如何解决“nvm yarn 无效命令”问题
## 概述
在开发过程中，使用nvm（Node Version Manager）切换Node.js版本是非常常见的操作。而当我们使用yarn作为包管理工具时，有时候会出现“nvm yarn 无效命令”的情况，这可能是由于nvm的Node.js版本切换导致yarn路径找不到而引起的。下面将介绍如何解决这个问题。
## 流程
首先，我们来看一下解决这
原创
2024-04-07 04:21:01
60阅读
# MySQL配置生效命令
MySQL是一种流行的开源关系数据库管理系统，被广泛应用于Web开发中。在使用MySQL时，我们经常需要对其进行配置，以确保数据库系统能够正常运行并满足我们的需求。但是，配置完毕后，我们也需要确保配置生效，否则可能会出现一些问题。本文将介绍如何通过一些命令来确保MySQL配置生效。
## 配置MySQL
在对MySQL进行配置之前，我们需要先了解一些基本的配置项。
原创
2024-03-12 06:43:36
94阅读
