首页 文章
  • 1 votes
     answers
     views

    Hue中的空白页面Sqoop,“错误:无法获取连接器”

    我正在尝试在Hue中使用sqoop但是有一个错误: Sqoop错误:无法获取连接器 . 并且页面中没有sqoop向导 . 但是我可以使用sqoop shell(而不是sqoop2)从Oracle导入数据 . 我的问题是: 除了放置oracle jdbc驱动程序之外还有其他配置吗? (在/opt/cloudera/parcels/CDH-5.5.0-1.cdh5.5.0.p0.8/lib/s...
  • 0 votes
     answers
     views

    使用Hue sqoop 2从vertica获取数据

    我已经安装了CDH Hue并且它已经完全运行,我正在尝试使用hue sqoop2从vertica获取数据 . 要 Build 一个新的连接sqoop hue问我一些参数,设置如下 Name: VerticaConnector: generic-jdbc-connectorJDBC Driver Class: com.vertica.DriverJDBC Connection String: ...
  • 1 votes
     answers
     views

    Oozie:Hue:运行shell脚本时拒绝权限

    我在HDFS /user/user 中有一个shell脚本 sample_shell.sh ,如下所示: source /user/user/params_new.cfg echo "HELLO WORLD" echo $layer params_new.cfg也在HDFS /user/user 目录中,其内容为: layer="S" 我是ooz...
  • 2 votes
     answers
     views

    尝试在Hue中运行工作流时出现Oozie错误

    我目前无法让Oozie在我的hadoop安装上正常工作 . 任何输入都是值得赞赏的,因为我是一个完整的初学者 . 我使用:hadoop 2.6.0(使用Yarn),oozie 4.0.1,hive 1.0.0,hue 3.7.1,pig 0.12它是我在伪分布式运行的本地安装 . 我从tars安装了所有内容并手动配置它,因为很遗憾,cloudera的一键安装在OS X中不起作用 . 在CLI和Hu...
  • 1 votes
     answers
     views

    使用Hue通过Shell脚本在oozie中调度sqoop作业

    我可以使用Hue在Oozie中运行sqoop命令 . 但是,当我尝试通过将它放在shell脚本中运行相同的sqoop命令时,我收到如下错误 Stdoutput 2016-05-20 10:52:13,241 ERROR [main] sqoop.Sqoop (Sqoop.java:runSqoop(181)) - Got exception running Sqoop: java.lang.R...
  • 0 votes
     answers
     views

    Hue上的Pig脚本错误

    HUE版本:hue-3.9.0 cdh5.11.2 5098-1.cdh5.11.2.p0.7.el6.x86_64 CDH版本:2.6.0-cdh5.11.2 猪脚本: A = LOAD'/ user / hdfs / test_data'; DUMP A; 在shell上运行此脚本时,它成功运行 但是当在Hue上运行它会挂起50%的检查日志 ��h��׶9�A@���P VERSIONAPP...
  • 0 votes
     answers
     views

    Oozie Workflow中的Spark会抛出Class not found Exception

    ![Hue Workflow with Argument] 1 Hue 3.10 Spark 1.6.0 CDH 5.8.0 当我使用spark-submit命令运行jar时它工作正常,但使用色调工作流程它会给我一个错误 . `java.lang.ClassNotFoundException:java.net.URLClassLoader $ 1.run(URLClassLoader.java:...
  • 0 votes
     answers
     views

    通过Hue更新HDFS中的文件

    我知道HDFS是一次写入和多次读取类型 . 据我所知,不可能在HDFS中更新文件(随机),因为文件存储在分布式环境中(作为块),每个块都复制在其他节点上,即使这些复制块也很难更新数据节点 . 但是,我的问题是可以使用色调工具更新HDFS中的文件吗?因为,我使用hue工具更新了许多文件(存储在HDFS中),并在其上运行了map-reduce作业 . 那么,hue如何更新HDFS中的文件呢?色调是否在...
  • 0 votes
     answers
     views

    运行猪脚本给我错误:你是一个Hue管理员但不是HDFS超级用户(这是“hdfs”)

    我正在使用cloudera quickstart vm-4.7 . 我无法运行猪脚本,因为它抛出以下错误消息: 无法访问:/pigwordcount/wordcountinput.txt . 注意:您是Hue管理员,但不是HDFS超级用户(即“hdfs”) . [Errno 2]找不到文件/pigwordcount/wordcountinput.txt 它给了我“找不到文件”,但文件已存在于...
  • 0 votes
     answers
     views

    HUE中的Filebrowser无法正常工作,用户上传失败

    当我尝试按任何用户报告上传时看到的错误: "Failed to obtain user group information: org.apache.hadoop.security.authorize.AuthorizationException: User: hadoop is not allowed to impersonate hue" 我不知道该怎么做...我已经改变了h...
  • 1 votes
     answers
     views

    Hue无法访问CDH中的Solr Collections

    我正在使用CDH 4并设置Hue和Solr . 我还在Solr中创建了可以从Solr UI访问的集合 . 但我无法在顺化看到这个系列 . 当我检查Hue日志时,我看到以下错误: User [hue] not defined as proxyuser 我用Google搜索,发现它与hue.ini中的某些proxyuser设置有关 . 即使在建议进行更改之后,我也无法使其正常工作 . 请帮我解决这个问...
  • 0 votes
     answers
     views

    HUE共享工作流作业的权限问题

    在cloudera HUE使用用户A创建工作流作业时,作业将共享给一个组 . 用户A可以提交作业 . 用户B尝试为工作区提交作业 - 权限错误 . 试图给出不同的路径 "/user/jadhavsa/fallout/workspace" 并且还获得了1777的许可 . 作业启动时,作业重置文件夹对所有者的权限再次出现相同的错误 Failed to creat...
  • 0 votes
     answers
     views

    错误2118:输入路径不存在

    我从shell脚本运行猪脚本,我连接50个文件并将其放入hdfs,但当我尝试使用猪脚本加载文件时,我收到错误 ERROR 2118:输入路径不存在: 但文件在那里,当我尝试删除文件时,我收到的色调错误信息是: 无法执行操作 . 注意:您是Hue管理员,但不是HDFS超级用户,“hdfs”或HDFS超级组的一部分,“超级组” . [Errno 2]找不到文件/ user / cloudera...
  • 0 votes
     answers
     views

    如何在没有CDH的情况下安装和配置Hue来管理HDFS

    我想安装和配置Hue来使用网络管理我的HDFS文件? 我在本地计算机上安装了单节点Hadoop集群 . 我找到了这个Hue Install Guide,它通过Cloudera管理器和CDH安装Hue,但我想在不使用Cloudera管理器和CDH的情况下安装它 . 我怎么解决这个问题?
  • 0 votes
     answers
     views

    使用CDH4.3配置Hue

    我正在尝试使用CDH 4.3配置hue . 我正面临着HDFS的配置错误 . 它说 "Current value: http://XXX.XX.XX.XXX:50070/webhdfs/v1/ Filesystem root '/' should be owned by 'hdfs'" 但在我的情况下,所有者根文件夹是用户,那么我怎么能告诉hue根文件夹的所有者是用户 .
  • 0 votes
     answers
     views

    在HDP Hue Pig UI中运行任何Pig作业时出错 . 错误:“请初始化HIVE_HOME”

    当我尝试从Hue Pig UI启动Pig Script Job时,该过程启动一个作业,然后进度条在那里停留1-3分钟并最终全部变为红色,唯一的输出是:“请初始化HIVE_HOME” . 我试图运行的我的猪脚本来自Pig validation in the HDP installation manual . 猪脚本:A =使用PigStorage加载'passwd'(':');B = foreach...
  • 4 votes
     answers
     views

    与hue oozie服务器的握手错误

    我正在尝试将hue与支持ssl的oozie服务器连接,但面临以下SSL问题 . Error submitting workflow Batch job for query-pig: ("bad handshake: Error([('SSL routines', 'ssl3_get_server_certificate', 'certificate verify failed')],)&...
  • 0 votes
     answers
     views

    Hue通过http连接到hiveserver2

    我正在尝试通过http将Hue连接到Hiveserver2 . 我使用Hue 3.7(github版本)和Hive 0.13.1 . 这是我的hive-site.xml配置: <property> <name>hive.server2.transport.mode</name> <value>http</value> <...
  • 1 votes
     answers
     views

    Hue访问HDFS权限问题

    我已经按照cloudera路径C安装指南安装了 http://www.cloudera.com/content/cloudera/en/documentation/core/latest/topics/cdh_vd_cdh_package_tarball.html 中的hadoop和一些组件 . 如果我通过CLI访问hdfs,我可以创建/ put / delete等没有任何问题 但在HUE文件浏览...
  • 0 votes
     answers
     views

    在Apache Hadoop和Hive(Redhat)上安装Hue

    我有一个运行Hadoop 2.7和Hive 2.0.1 . 我正在尝试安装Hive编辑器,以便我可以轻松编写HiveQL查询 . 因此,我下载并构建了Hue 3.10 . 我将其配置为使用HDFS和Hive(我不确定它们是否正确) . 当我启动Hue时,它检查配置,我在Hue的服务器日志中看到一些与webhdfs相关的错误 [27/Jul/2016 23:08:55 -0700] webhdfs ...
  • 1 votes
     answers
     views

    Hue安装问题

    我是bigdata技术/ hadoop生态系统的新手 . 作为我的任务之一,我正在尝试在我的单节点hadoop集群[apache distribution hadoop2.6.0]上安装和运行Hue . 我按照许多网站提供的说明安装了hue: 下载最新的hue tar文件 在一个位置解压缩 然后 sudo make install 它在/ usr / local / hue目录中安...
  • 0 votes
     answers
     views

    无法使用gethue / hue docker镜像配置HDFS地址

    我试图从gethue / hue获得Hue docker图像,但它似乎忽略了我给他的配置,并且总是在localhost上寻找HDFS而不是我要求他寻找的docker容器 . 这是一些背景: 我正在使用以下docker compose来启动HDFS集群: hdfs-namenode: image: bde2020/hadoop-namenode:1.1.0-hadoop2.7.1-jav...
  • 5 votes
     answers
     views

    从oozie到Hue运行shell脚本

    我在Hue使用oozie编辑器调用bash shell脚本 . 我在工作流中使用了shell动作,并在shell命令中尝试了以下不同的选项: 使用'choose a file'上传shell脚本 提供存在shell脚本的本地目录路径 给出了存在shell脚本的HDFS路径 但所有这些选项都给出了以下错误: 不能运行程序 “sec_test_oozie.sh”(在目录 “/数据/ ...
  • 0 votes
     answers
     views

    使用“添加文件”部分(shell脚本)时,Hortonworks Hue Oozie流式处理作业失败

    我安装了HDP 2.x和hue . (2位房东) 我需要解决这个问题,因为我是oozie工作流程的新手 . 我在这里按照示例:http://www.oraclealchemist.com/news/hadoop-streaming-hue-oozie-workflows-hive/如果我只在相应路径的所有主机中都有mapper和reducer,那么它的工作正常 . 我看到oozie的ambari...
  • 1 votes
     answers
     views

    如何使用hue接口将Java Action作为oozie工作流运行

    我创建了一个java main方法的测试可执行jar,它接受args [0] = Hadoop . java程序接受此参数并将以下字符串写入文本文件中; “currentTimeStamp / t欢迎来到Hadoop !! / n”100,000次 . 我使用hue接口为java动作创建了一个oozie-workflow . 请参阅下面的workflow.xml . 然而,oozie-workf...
  • 1 votes
     answers
     views

    Hue / Hive用户root不允许模拟Hue

    Situation: 我在不同的Docker容器中设置了Hive,Hue和Hadoop . 在同一个Docker网络中 . 我为每个1 Hadoop Namenode,2个Datanodes,1个Hue实例,1个Hive Server和一个Postgres Metastore创建了一个Container . 我能够在namenode的hdfs-site.xml中配置一个hue代理用户,并可以通过w...
  • 0 votes
     answers
     views

    Spark:从XML / Parquet / Sequence文件中读取数据

    我是Spark的新手,我目前主要在cloudera HDFS集群上使用Hive&Impala . 我有几十个XML文件,我用它来创建使用Hive的外部表 . 该表当前存储为Parquet文件 . 现在,我想使用Spark读取这些数据..我可以直接从表中读取数据吗? 或者我是否必须从原始数据中读取它?如果是这样,不同格式(XML,Sequence,Parquet)之间是否存在性能差异? 谢谢 . 更...
  • 1 votes
     answers
     views

    根据特定列值连接两个表

    我有两个表(表1和表2),我想加入它们并创建表3.逻辑如下: Table 1 column1 | column2 |栏3user1 | ID1 |名1user2 | ID2 | NAME2user3 | ID3 | NAME3user4 | ID4 | NAME4 Table 2 column1 | COLUMN2user1 | ACT1user1 | ACT1user1 | ACT1user1 ...
  • 0 votes
     answers
     views

    为什么动态字段在solr中不像普通字段(特别是在Hue中查询和显示时)那样?

    在Hue和Solr中,动态字段都会导致问题 . 在Hue中,存储为动态字段的数据拒绝显示在默认的Solr搜索中,该搜索显示导入的集合中的所有可用数据 . 它也无法搜索text_general类型的数据并被索引和存储 . 在Solr中,似乎动态字段未编入索引,即使模式设置如下: <dynamicField name="*_t" type="text_genera...
  • 0 votes
     answers
     views

    在Cloudera Hue中为Oozie配置正确的端口(调用PIG脚本)

    我是CDH4 Oozie工作流编辑器的新手 . 在尝试从Oozie工作流编辑器调用pig脚本时,我收到以下错误 . HadoopAccessorException: E0900: Jobtracker [mymachine:8032] not allowed, not in Oozies whitelist 看起来Oozie正在向Yarn端口(8032)提交作业 . 我希望它提交到8021(MR...

热门问题