2016-09-26 60 views
1

我是kafka的新手。我正尝试使用包含增量和更新数据的kafka(实时数据)将数据从MSSQL导入到Hive。我看到github的融合平台,用于mysql到hdfs的数据传输,但我没有找到MSSQL。任何人都在这个工作,请建议我如何整合MSSQL和卡夫卡?MSSQL和KAFKA集成

+0

正如Gwen所说,Striim将允许您将实时增量更改从MSSQL传输到Kafka。让我知道如果你需要帮助开始使用它: http://www.striim.com/download-striim-for-confluent/ – capkutay

回答

1

我听说Striim提供了MSSQL更改捕获支持。 另一种选择是使用JDBC源连接器(也在Confluent的github上)

+0

谢谢reply.I有疑问。什么是融合jdbc连接器的要求.zookeeper和kafka已经需要安装,或者平台本身会来。任何机构现在都在使用这个。关于如何启动kafka-server以及如何将数据存储到kafka broker中的任何指导原则。 – user6608138

+0

哪一个更好。在我的集群中,我们已经安装了zookeeper和kafka。 – user6608138