hdinsight和talend大数据开放工作室

z4bn682m  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(448)

我目前正在做一个项目,需要将talend open studio for big data(v6.3.1)连接到azure的hdinsight(3.5)hadoop群集。到目前为止,我正在尝试一个简单的示例,其中包括创建一个配置单元表。
为此,我使用以下图表:

配置单元连接配置如下:

…请查看thivecreatetable\ 1节点的以下规范:

通过运行这个过程:·创建了指定的容器和部署blob(见下图)-这让我相信windows存储配置一切正常

·但是thivecreatetable\ 1节点有一个错误(参见下图)

·我坚信´它与主机名和端口有关我尝试使用集群的主机名和我们可以在ambari中找到的配置单元服务器的主机名(见下图)

·但没有一个像预期的那样起作用。
有人试过类似的吗?
注意:说talend支持的azure版本是3.4似乎相当重要,但是,我使用的是3.5,可能是它。
非常感谢你的帮助。

r6l8ljro

r6l8ljro1#

根据官方文档关于hadoop组件和hdinsight可用版本之间的差异,hdinsight 3.5基于hortonworks数据平台(hdp)2.5,但hdi 3.4基于hdp 2.4。但是,它们的hive组件和其他组件的版本差别不大。因此,我的建议是,您可以尝试为您当前的hdi3.5创建一个hdi3.4,使用相同的azure存储帐户,而不会对您的需求产生更多影响。

相关问题