【问题标题】:Creating JDBC connector source for interbase为 interbase 创建 JDBC 连接器源
【发布时间】:2019-05-07 16:48:42
【问题描述】:

我正在尝试使用 curl 命令为 kafka 创建一个 JDBC 连接器。请帮我纠正这个命令。

curl -X POST -H "Content-Type: application/json"  --data "{ \"name\": 
\"ib_connector\",\"config\": { \"connector.class\": \"io.confluent.connect.jdbc.JdbcSourceConnector\", \"tasks.max\": 1,
\"connection.url\": \"jdbc:interbase://ip:3050;Database=TEST2;user=SYSDBA;password=masterkey\",\"mode\": \"timestamp+incrementing\", \"incrementing.column.name\": \"id\",\"timestamp.column.name\": \"modified\", \"topic.prefix\": \"test-interbase-\", \"poll.interval.ms\": 1000 } }"
http://localhost:8083/connectors

在命令提示符中显示以下错误

curl: (52) Empty reply from server  

我正在像这样运行 docker-compose.yml 文件

version: '3.7'
services:
  zookeeper:
    image: confluentinc/cp-zookeeper:${CONFLUENT_VERSION}
    networks:
      - kafka
    environment:
      ZOOKEEPER_CLIENT_PORT: 2181
      ZOOKEEPER_TICK_TIME: 2000
      KAFKA_JMX_PORT: 39999

  kafka:
    image: confluentinc/cp-kafka:${CONFLUENT_VERSION}
    depends_on:
      - zookeeper
    ports:
      - 9092:9092
    networks:
      - kafka
    environment:
      KAFKA_BROKER_ID: 1
      KAFKA_ZOOKEEPER_CONNECT: zookeeper:2181
      KAFKA_ADVERTISED_LISTENERS: PLAINTEXT://kafka:9092
      KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR: 1
      KAFKA_GROUP_INITIAL_REBALANCE_DELAY_MS: 0
      KAFKA_JMX_PORT: 49999

  schema-registry:
    image: confluentinc/cp-schema-registry:${CONFLUENT_VERSION}
    depends_on:
      - zookeeper
      - kafka
    networks:
      - kafka
    environment:
      SCHEMA_REGISTRY_KAFKASTORE_CONNECTION_URL: zookeeper:2181
      SCHEMA_REGISTRY_HOST_NAME: schema-registry

  connect:
    image: confluentinc/cp-kafka-connect:${CONFLUENT_VERSION}
    depends_on:
      - zookeeper
      - kafka
      - schema-registry
    ports:
      - 8083:8083
    networks:
      - kafka
    volumes:
      - ${KAFKA_CONNECT_JARS_PATH}:/etc/kafka-connect/jars
    environment:
      CONNECT_BOOTSTRAP_SERVERS: 'kafka:9092'
      CONNECT_REST_ADVERTISED_HOST_NAME: connect
      CONNECT_REST_PORT: 8083
      CONNECT_GROUP_ID: compose-connect-group
      CONNECT_CONFIG_STORAGE_TOPIC: docker-connect-configs
      CONNECT_CONFIG_STORAGE_REPLICATION_FACTOR: 1
      CONNECT_OFFSET_FLUSH_INTERVAL_MS: 10000
      CONNECT_OFFSET_STORAGE_TOPIC: docker-connect-offsets
      CONNECT_OFFSET_STORAGE_REPLICATION_FACTOR: 1
      CONNECT_STATUS_STORAGE_TOPIC: docker-connect-status
      CONNECT_STATUS_STORAGE_REPLICATION_FACTOR: 1
      CONNECT_KEY_CONVERTER: io.confluent.connect.avro.AvroConverter
      CONNECT_KEY_CONVERTER_SCHEMA_REGISTRY_URL: 'http://schema-registry:8081'
      CONNECT_VALUE_CONVERTER: io.confluent.connect.avro.AvroConverter
      CONNECT_VALUE_CONVERTER_SCHEMA_REGISTRY_URL: 'http://schema-registry:8081'
      CONNECT_INTERNAL_KEY_CONVERTER: org.apache.kafka.connect.json.JsonConverter
      CONNECT_INTERNAL_VALUE_CONVERTER: org.apache.kafka.connect.json.JsonConverter
      CONNECT_ZOOKEEPER_CONNECT: 'zookeeper:2181'
      CONNECT_PLUGIN_PATH: '/usr/share/java,/etc/kafka-connect/jars'

networks:
  kafka:
    driver: bridge

kafka 正在运行,我使用命令docker-compose up -d 运行它,我收到了成功消息。我在windows上运行它。下面是容器的状态。

当我运行 docker-compose up -d 时,它显示为 Kafka_manager 正在启动。但是一旦我检查状态,它就会显示退出 255。它是否会影响将配置保存到端口 8083。

可能是什么原因。 Kafka-connect 处于活动状态并在端口 8083 中运行。请帮助

【问题讨论】:

  • 您使用的是什么版本的 Kafka?您如何运行 Kafka Connect?您使用的是 Confluent CLI 还是其他方法?
  • 您能否更新您的问题以包括您的运行方式?你在使用 Docker Compose 吗? Kafka Connect 肯定在运行吗?您是否将端口公开给您的主机?
  • 您说“Kafka 处于活动状态并在端口 8083 中运行”,但 Kafka Connect 应该在端口 8083 上。您能否使用 @987654327 的输出更新您的问题@ ?
  • 请不要发布控制台输出的屏幕截图。文字更容易阅读:)
  • 你能发布你正在使用的 actual Docker Compose 文件吗?更新您的问题,或将其放在 gist.github.com 或类似网站上

标签: curl jdbc apache-kafka apache-kafka-connect interbase


【解决方案1】:

kafka 在 9092 上运行,而在 8083 上连接 worker。

您在 8083 上发布配置,因此请确保您已启动并运行 worker。

【讨论】:

    猜你喜欢
    • 2017-10-12
    • 1970-01-01
    • 1970-01-01
    • 2019-05-13
    • 2020-01-15
    • 2019-11-17
    • 2016-03-19
    • 2019-06-11
    • 1970-01-01
    相关资源
    最近更新 更多