如何通过Azure数据工厂连接Kafka早产儿

0h4hbjxa  于 2023-01-14  发布在  Kafka
关注(0)|答案(1)|浏览(137)

希望通过Azure数据工厂连接本地Kafka以访问消息并存储到adls。
使用ADF连接到Kafka
我的数据可在预置Kafka,要访问和加载到adls。

ncecgwcz

ncecgwcz1#

假设您的内部Kafka无法通过公共Internet访问,您有两种选择。您可以通过托管虚拟网络(也称为受管专用终结点)或自托管集成运行时进行连接。
下面是我从https://learn.microsoft.com/en-us/azure/data-factory/choose-the-right-integration-runtime-configuration复制的一些解释。

Azure集成运行时与托管虚拟网络

将Azure集成运行时与托管虚拟网络一起使用时,应使用托管专用终结点连接数据源,以确保传输期间的数据安全性。通过一些附加设置(如专用链接服务和负载平衡器),托管专用终结点还可用于访问内部部署数据源。

自托管集成运行时

为了防止不同环境的数据相互干扰,保证生产环境的安全性,我们需要为每个环境创建相应的自托管集成运行时,这样可以保证不同环境之间的充分隔离。
由于自托管集成运行时运行在客户托管的机器上,为了尽可能减少成本、维护和升级工作量,我们可以在同一个环境中为不同的项目使用自托管集成运行时的共享功能。请参阅文章在Azure数据工厂中创建共享的自托管集成运行时。同时,为了使数据在传输过程中更加安全,我们可以选择使用私有链接连接数据源和密钥库。和连接自托管集成运行时与Azure数据工厂服务之间的通信。

相关问题