docker - 无法使用 docker-compose 创建 kafka 主题

标签 docker apache-kafka confluent-platform

我正在尝试使用 docker 设置 Kafka rest 代理。但是我在配置中提供的主题不是创建。

我正在使用 API 检查 Kafka 主题:curl "http://metrics-kafka-rest:38082/topics"我收到了这个回复:["__confluent.support.metrics","_schemas"]
下面是我在 docker-compose 中使用的配置:

    image: confluentinc/cp-zookeeper:5.3.0
    container_name: 'metrics-zookeeper'
    restart: always
    ports:
      - "32181:32181"
    environment:
      ZOOKEEPER_CLIENT_PORT: 32181
      ZOOKEEPER_TICK_TIME: 2000
      ZOOKEEPER_SYNC_LIMIT: 2
      ZOOKEEPER_SASL_ENABLED: "FALSE"

  metrics-kafka:
    image: confluentinc/cp-kafka:5.3.0
    container_name: 'metrics-kafka'
    restart: always
    ports:
      - "29092:29092"
    depends_on:
      - metrics-zookeeper
    environment:
      KAFKA_BROKER_ID: 1
      KAFKA_AUTO_CREATE_TOPICS_ENABLE: "true"
      KAFKA_ZOOKEEPER_CONNECT: metrics-zookeeper:32181
      KAFKA_INTER_BROKER_LISTENER_NAME: PLAINTEXT
      KAFKA_LISTENER_SECURITY_PROTOCOL_MAP: PLAINTEXT:PLAINTEXT,PLAINTEXT_HOST:PLAINTEXT
      KAFKA_ADVERTISED_LISTENERS: PLAINTEXT://metrics-kafka:29092
      KAFKA_CREATE_TOPICS: "Notification:1:1"
      KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR: 1
      CONFLUENT_METRICS_ENABLE: 'false'

  metrics-schema-registry:
    image: confluentinc/cp-schema-registry:5.3.0
    container_name: 'metrics-schema-registry'
    restart: always
    ports:
      - "38081:38081"
    depends_on:
      - metrics-kafka
    environment:
      SCHEMA_REGISTRY_KAFKASTORE_CONNECTION_URL: metrics-zookeeper:32181
      SCHEMA_REGISTRY_HOST_NAME: metrics-schema-registry
      SCHEMA_REGISTRY_LISTENERS: "http://metrics-schema-registry:38081"
      SCHEMA_REGISTRY_DEBUG: "true"

  metrics-kafka-rest:
    image: confluentinc/cp-kafka-rest:5.3.0
    container_name: 'metrics-kafka-rest'
    restart: always
    ports:
      - "38082:38082"
    depends_on:
      - metrics-schema-registry
    environment:
      KAFKA_REST_ZOOKEEPER_CONNECT: metrics-zookeeper:32181
      KAFKA_REST_SCHEMA_REGISTRY_URL: "http://metrics-schema-registry:38081"
      KAFKA_REST_HOST_NAME: metrics-kafka-rest
      KAFKA_REST_LISTENERS: "http://metrics-kafka-rest:38082"
      KAFKA_REST_DEBUG: "true"

我希望当我点击获取主题列表的 API 时,它应该包含主题 Notification .

最佳答案

KAFKA_CREATE_TOPICS不是 cp-kafka 支持的环境变量您正在使用的图像。

由于您已经拥有 KAFKA_AUTO_CREATE_TOPICS_ENABLE: "true"然后您就可以开始使用代理,主题将在生产者或消费者首次引用时创建。

关于docker - 无法使用 docker-compose 创建 kafka 主题,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/57475061/

相关文章:

java - 如何防止使用 Kafka 连接接收器插入 Kafka 消息中不需要的属性?

.net - 确保 .net librdkafka 应用程序经过 TLS 加密

docker - OCI 运行时创建失败 : container_linux. go:296 - 没有这样的文件或目录

Docker 设置,无法克隆存储库,因为容器名称已被占用

Docker EXPOSE 使用运行时环境变量

amazon-web-services - Docker 上下文不变(使用 Docker 上下文)

apache-kafka - 如何从 DCOS Kafka 中删除主题?

jms - Kafka 生产者不在 Windows 中工作

java - 为什么可选的水槽 channel 会导致非可选的水槽 channel 出现问题?

python - 将消息从容器发布到在容器外部运行的kafka