【问题标题】:Kafka log directories in DockerDocker 中的 Kafka 日志目录
【发布时间】:2017-01-16 21:28:33
【问题描述】:

当我在没有 Docker 的情况下运行 kafka 和 zookeeper 时,我可以在 /tmp/kafka-logs 目录中看到主题分区日志文件。现在使用 Docker,即使我在 docker-compose.yml 的 Volumes 部分中指定了日志目录,我也看不到 docker VM 中的文件,例如“TOPICNAME-PARTITIONNUMBER”。这里有什么我遗漏的吗?关于我可以在 Docker 虚拟机中找到这些目录的位置的任何想法..

zookeeper:
 image: confluent/zookeeper
 container_name: zookeeper
 ports:
   - "2181:2181"
   - "15001:15000"
 environment:
 ZK_SERVER_ID: 1
 volumes:
   - /tmp/docker/zk1/logs:/logs
   - /tmp/docker/zk1/data:/data

 kafka1:
  image: confluent/kafka
  container_name: kafka1
  ports:
    - "9092:9092"
    - "15002:15000"
  links:
    - zookeeper
  environment:
    KAFKA_BROKER_ID: 1
    KAFKA_OFFSETS_STORAGE: kafka
    # This is Container IP
    KAFKA_ADVERTISED_HOST_NAME: 192.168.99.100 

  volumes:
    - /tmp/docker/kafka1/logs:/logs
    - /tmp/docker/kafka1/data:/data

【问题讨论】:

  • 您确定您的容器化 Kafka 将日志保存在 /logs 中吗?
  • 我只能看到根据 docker-compose 文件创建的文件夹结构,我没有看到这些日志文件中存在任何数据/
  • 您是否尝试过进入容器并检查\logs 目录中的内容? IE。 docker exec -it kafka1 bashll /logs?
  • 是的,谢谢它的工作..

标签: docker apache-kafka docker-compose apache-zookeeper confluent-platform


【解决方案1】:

这是我们在撰写文件中为日志配置的方式,其中包含日志文件。您应该跳转到容器上以查看“/var/lib/kafka/data”、目录和其中的数据

卷:

-kb1_data:/var/lib/kafka/data

【讨论】:

【解决方案2】:

请记住,docker-compose 中有关共享资源的卷、端口和其他字段的列表中的第一个参数是关于主机的,第二个是关于容器的。 所以你应该改变你的volumes值的顺序。

zookeeper:
 image: confluent/zookeeper
 container_name: zookeeper
 ports:
   - "2181:2181"
   - "15001:15000"
 environment:
 ZK_SERVER_ID: 1
 volumes:
   #- ./host/folder:/container/folder
   - ./logs:/tmp/docker/zk1/logs
   - ./data:/tmp/docker/zk1/data
    
kafka1:
  image: confluent/kafka
  container_name: kafka1
  ports:
    #- "host-port:container-port"
    - "9092:9092"
    - "15002:15000"
  links:
    - zookeeper
  environment:
    - KAFKA_BROKER_ID: 1
    - KAFKA_OFFSETS_STORAGE: kafka
    - # This is Container IP
    - KAFKA_ADVERTISED_HOST_NAME: 192.168.99.100 
  volumes:
    #- ./host/folder:/container/folder
    - ./logs:/tmp/docker/kafka1/logs
    - ./data:/tmp/docker/kafka1/data

【讨论】:

  • 不维护confluent/ docker 镜像。应该是confluentinc/。此外,容器不会在/tmp/docker 下存储数据
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2018-03-01
  • 2018-09-26
  • 1970-01-01
  • 1970-01-01
  • 2020-07-30
  • 2019-01-09
相关资源
最近更新 更多