在使用Docker运行Kafka时，配置日志自动清理通常涉及到两个步骤：启动Kafka容器时指定适当的配置参数，以及在Kafka的配置文件中设置日志清理策略。以下是一个基本的指南，展示了如何在Docker环境中设置Kafka日志的自动清理。

  1. 创建Kafka配置文件： 在宿主机上创建一个Kafka配置文件（例如 kafka.properties），并设置日志清理相关的参数。例如：
# 日志保留时间
log.retention.hours=48
# 日志大小限制，超过此大小将触发清理
log.segment.bytes=1073741824
# 日志压缩策略，这里设置为删除
log.cleanup.policy=delete
  1. 这些参数的具体值应根据你的需求进行调整。log.retention.hours 控制日志保留的时间，log.segment.bytes 控制单个日志文件的大小，log.cleanup.policy 定义了日志的清理策略。
  2. 启动Kafka容器： 使用 -v 参数将宿主机上的配置文件挂载到容器中，并设置 KAFKA_CFG_LOG_RETENTION_MS 环境变量来指定日志保留时间。例如：
docker run -d \
  --name kafka \
  -p 9092:9092 \
  -e KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181 \
  -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://localhost:9092 \
  -e KAFKA_CFG_LOG_RETENTION_MS=172800000 \
  -v /path/to/kafka.properties:/opt/kafka/config/server.properties \
  wurstmeister/kafka
  1. 在这个例子中，KAFKA_CFG_LOG_RETENTION_MS 被设置为172800000毫秒，即48小时，与配置文件中的 log.retention.hours 对应。
  2. 验证配置： 容器启动后，可以通过进入Kafka容器来验证配置是否成功应用：
docker exec -it kafka bash
cat /opt/kafka/config/server.properties
  1. 监控和调整： 根据Kafka的性能和存储需求，可能需要定期监控日志文件的大小和数量，并调整相应的参数。可以通过Kafka的命令行工具或第三方监控工具来实现。 请记住，这些步骤假设你已经有一个Zookeeper服务在运行，并且Kafka容器能够连接到它。此外，wurstmeister/kafka 是一个流行的Kafka Docker镜像，你可以根据实际情况选择其他镜像。 在设置这些参数时，建议参考Kafka官方文档以获取更详细的配置信息和最佳实践。