代码之家 › 专栏 › 技术社区 › user432024

如何将JDBC驱动程序添加到DC/OS上的Kafka Connect?

dcos apache-kafka-connect mesos apache-kafka docker

user432024 · 技术社区 · 6 年前

使用confluent community包在DC/OS上运行Kafka Connect 4.1.1。如何将jdbc驱动程序上载或添加到远程集群?

更新:这是一个安装了DC/OS目录的包,这是一个mesos框架,运行docker映像。

1 回复 | 直到 6 年前

OneCricketeer Gabriele Mariotti 6 年前

更新

借来的剧本 here (thanks to @rmoff)

CMD 使用bash脚本下载并提取restapi源连接器。

bash -c 'echo Installing unzipâ¦ && \
                curl -so unzip.deb http://ftp.br.debian.org/debian/pool/main/u/unzip/unzip_6.0-16+deb8u3_amd64.deb && \
                dpkg -i unzip.deb && \
                echo Downloading connectorâ¦ && \
                curl -so kafka-connect-rest.zip https://storage.googleapis.com/rmoff-connectors/kafka-connect-rest.zip && \
                mkdir -p /u01/connectors/ && \
                unzip -j kafka-connect-rest.zip -d /u01/connectors/kafka-connect-rest && \
                echo Launching Connectâ¦ && \
                /etc/confluent/docker/run'

你需要 build your own Docker images 然后将它们发布到Mesos集群的可解析Docker注册表中,然后编辑Mesos服务以拉取这些图像,而不是合并的图像。

ADD http://somepath.com/someJDBC-driver.jar /usr/share/java/kafka-connect-jdbc

或者 curl ADD .tar.gz 文件)。

FROM confluentinc/cp-kafka-connect

ENV MYSQL_DRIVER_VERSION 5.1.39

RUN curl -k -SL "https://dev.mysql.com/get/Downloads/Connector-J/mysql-connector-java-${MYSQL_DRIVER_VERSION}.tar.gz" \
    | tar -xzf - -C /usr/share/java/kafka-connect-jdbc/ --strip-components=1 mysql-connector-java-5.1.39/mysql-connector-java-${MYSQL_DRIVER_VERSION}-bin.jar

你也可以使用 confluent-hub install

推荐文章

Yitian Zhang · Mesos代理始终处于停用状态

7 年前

mzibit · NGINX:proxy\u-pass微服务

7 年前

user1578872 · Mesos任务-无法接受套接字:已放弃未来

7 年前

ivoputzer · 如何使用apache marathon根据实例的正常运行时间缩减实例?

7 年前

stefanobaghino · 由于“身份验证失败:EOF”,Mesos框架保持不活动状态

7 年前

tashoyan · 在Docker容器中运行Spark驱动程序-执行器与驱动程序之间没有连接?

7 年前

Abhishek · 在Mesos Master中找不到代理

7 年前

MyCoy · 如何通过Mesos REST API启动框架

7 年前

Varun Gupta · mesos主控存储关于框架或代理的信息吗?

8 年前

Sunder · Mesos绑定错误:无法分配请求的地址[99]

8 年前