首页 文章

HDInsight Spark群集 - 无法连接到Azure Data Lake Store

提问于
浏览
1

所以我创建了一个HDInsight Spark Cluster . 我希望它能够访问Azure Data Lake Store .

要创建HDInsight Spark集群,我按照以下说明操作:https://azure.microsoft.com/en-gb/documentation/articles/data-lake-store-hdinsight-hadoop-use-portal但Azure门户中没有选项来配置AAD或添加服务原则 .

因此,我的群集仅使用Azure Blob存储创建 . 现在我想扩展它以访问Azure Data Lake Store . 但是,“Cluster AAD Identity”对话框指出“Service Principal:DISABLED”,对话框中的所有字段都显示为灰色并禁用 . 我看不出有任何方法可以将存储扩展为指向ADL .

任何帮助,将不胜感激!谢谢 :-)

3 回答

  • 1

    您可以使用Data Factory将数据从Blob移动到ADLS,但无法从Spark群集直接访问ADLS .

  • 1

    请使用ServicePrincipal创建Azure Hdinsight群集 . ServicePrincipal应该可以访问您的数据湖存储帐户 . 您可以将群集配置为使用Data Lake存储,但这非常复杂 . 事实上,没有相关文件 . 所以推荐的创建方法是使用ServicePrincipal .

  • 0

    您创建了哪种类型的群集?在我们的Linux群集中,您链接的指南中列出了所有选项 .

相关问题