首页 文章
  • 0 votes
     answers
     views

    火花工作(oozie - hue)陷入运行状态

    我有一个火花工作将csv转换为镶木地板 . 我试图通过色调的oozie工作流来运行它 . 这是最简单的工作流程,包括一个步骤(一个火花程序) . 当我为一个简单的程序jar运行它时(比如hello spark types示例),它通过hue提交时工作正常 . 但是当我有一个更大的jar(~96 MB)时,工作就会陷入运行状态 . 代码没有问题,因为同一个jar在同一个环境中与spark-submi...
  • 0 votes
     answers
     views

    找不到sqoop cloudera manger jdbc驱动程序

    我正在尝试在cloudera manager中为sqoop设置JDBC驱动程序 . Here is some background on my setup: 1)我在ubundu上有一台运行CDH 4.5的5机Hadoop集群2)通过cloudera manager安装了sqoop 我已经下载了最新的JDBC mysqlconnector jar并将其复制到以下位置: sudo cp /home...
  • 3 votes
     answers
     views

    在YARN上运行Spark作业

    我正在尝试利用我在群集上拥有的所有资源来运行Spark作业 . 我在所有节点上都安装了Cloudera Manager . 这是我用来提交作业的命令 . spark-submit --master yarn --deploy-mode cluster file:///[spark python file] file:...

热门问题