如何查看mongodb日志

原创

mob649e8154f2e5 2023-08-12 09:51:13 ©著作权

文章标签 慢查询复制集日志文件 文章分类 MongoDB 数据库

©著作权归作者所有：来自51CTO博客作者mob649e8154f2e5的原创作品，请联系作者获取转载授权，否则将追究法律责任

如何查看 MongoDB 日志

MongoDB 是一个流行的 NoSQL 数据库，它的日志文件对于故障排除和性能优化非常重要。本文将介绍如何查看 MongoDB 的日志文件，并提供一些示例代码来解决一个具体的问题。

问题描述

假设我们的 MongoDB 数据库出现了性能问题，我们需要查看日志文件以了解具体的错误信息和潜在的问题。我们希望能够从日志中获取以下信息：

错误消息和异常信息
慢查询日志
复制集信息和状态
索引构建进度

接下来，我们将逐个解决这些问题。

错误消息和异常信息

MongoDB 的错误消息和异常信息通常会被记录在日志文件中。为了查看最新的错误消息，我们可以使用以下代码来打印日志文件的最后几行：

import subprocess

def tail_mongodb_log(n_lines):
    command = f'tail -n {n_lines} /var/log/mongodb/mongod.log'
    output = subprocess.check_output(command, shell=True).decode('utf-8')
    print(output)
    
tail_mongodb_log(10)  # 打印最后 10 行日志

上述代码使用 subprocess 模块执行系统命令 tail，并将输出解码为 UTF-8 编码的文本。你需要根据实际的日志文件路径修改路径参数。

慢查询日志

MongoDB 可以记录慢查询日志，即执行时间超过阈值的查询。我们可以通过修改 MongoDB 的配置文件来启用慢查询日志，并指定阈值。在 mongod.conf 配置文件中，添加以下配置：

# 启用慢查询日志
operationProfiling:
  slowOpThresholdMs: 100

然后，重启 MongoDB 服务以使配置生效。

我们可以使用以下代码从日志文件中查找慢查询：

import subprocess

def find_slow_queries():
    command = 'grep "command" /var/log/mongodb/mongod.log | grep "command took"'
    output = subprocess.check_output(command, shell=True).decode('utf-8')
    print(output)
    
find_slow_queries()

上述代码使用 grep 命令过滤包含 "command took" 的行，并打印结果。你需要根据实际的日志文件路径修改路径参数。

复制集信息和状态

如果你的 MongoDB 部署了一个复制集，你可能需要查看复制集的状态和复制操作的日志。我们可以使用以下代码来查看复制集的状态：

from pymongo import MongoClient

def get_replica_set_status():
    client = MongoClient()
    status = client.admin.command('replSetGetStatus')
    print(status)
    
get_replica_set_status()

上述代码使用 pymongo 模块连接到 MongoDB，并调用 replSetGetStatus 命令来获取复制集的状态信息。

索引构建进度

索引构建是一个耗时的操作，你可能需要查看索引构建的进度。我们可以使用以下代码来查看索引构建的进度：

from pymongo import MongoClient

def get_index_build_progress(database, collection):
    client = MongoClient()
    index_builds = client[database].command('listIndexes', collection=collection)
    print(index_builds)
    
get_index_build_progress('my_database', 'my_collection')

上述代码使用 pymongo 模块连接到 MongoDB，并调用 listIndexes 命令来获取指定集合的索引构建信息。