首页 文章
  • 1 votes
     answers
     views

    hadoop-yarn - 由于spark_shuffle,NodeManager无法启动

    我在我的集群中安装了hadoop纱线 . 但由于服务spark_shuffle在INITED状态失败,我的一台奴隶机无法启动NodeManager . 我尝试删除与hadoop相关的所有/ tmp / *,重新格式化hdfs . 但没有任何作用,我现在不知道 你能帮帮我吗?非常感谢 16/06/23 11:31:03 INFO service.AbstractService: Service sp...
  • 0 votes
     answers
     views

    非法参数例外:无法访问BASE URL:httpHDP安装

    我'm trying to install HDP2.3 with ambari. I had already installed ambari client and server. In three nodes. When I'm选择堆栈 - 我无法访问BASE URL错误 . 请看下面的错误图片 . 同样在服务器日志中,我可以看到错误为: Resource_management.core....
  • 0 votes
     answers
     views

    Ambari 在手动更改配置文件后是否恢复配置?

    我正在运行带有边缘节点的 Microsoft HDInsight 3.6 群集。对于我们的应用程序需求,我们需要更改边缘节点上 core-site.xml 的属性值,我们当前正在尝试使用 shell 脚本(使用 sed 命令) 但是,我们发现配置恢复到原始值,这会导致我们的应用程序出现问题。请注意,边缘节点主机与群集中的所有其他节点位于相同的“默认”配置组中。 我是新手,所以想要了解以下内容 - ...
  • 0 votes
     answers
     views

    HDP Ambari安装失败

    HDP Repo Content 我正在尝试在4节点群集上安装HDP Ambari . 关注Hortonworks数据平台 - 使用Ambari自动安装 - PDF版本: 这是我到目前为止: 4个虚拟机 - CentOS 6 在每台服务器上下载了Amabri Repo 下载了HDP堆栈仓库 yum安装ambari-server(在一台机器上) yum安装了ambari-ag...
  • 0 votes
     answers
     views

    使用外部Oracle数据库设置IBM Open Platform

    当我尝试使用Oracle数据库作为RDBMS安装单节点IBM Open Platform集群时,我有点困惑 . 首先,我理解IBM Big Insights的Hadoop部分不是相应Apache版本的修改版本(如HortonWorks那样),因此,当Ambari(来自IBM repo)提供我使用外部Oracle数据库时,我想它应该管用 . 我可能错了,我在糟糕的IBM安装指南中找不到任何oracl...
  • 0 votes
     answers
     views

    Ambari YARN容器设置

    我对Ambari上的CPU设置感兴趣,具体来说,我看到CPU选项,例如: 为节点上的所有容器分配的物理CPU百分比虚拟核心数 每个容器: 最小容器大小(VCores)最大容器大小(VCores) 我看到有关RAM的类似设置,我能够找到一些关于它的recommendations,但我没有找到CPU的情况 . 具体来说,我是否应该为系统保留一些VCores(如内存的情况),或者我应该将它全部用...
  • 0 votes
     answers
     views

    HortonWorks Ambari 1.7.0选择了错误的HDP堆栈

    我正在尝试使用Ambari 1.7.0设置6节点HDP 2.2群集 . 在hack之后(通过向ambari-agent / ambari-enh添加'export PYTHON = / usr / bin / python2.6')来获取在代理节点上运行的ambari-agent守护程序,我能够注册目标主机 . 但是,我在“部署”步骤中遇到了一个可怕的问题 . 虽然我选择了HDP 2.2堆栈,但似...
  • 0 votes
     answers
     views

    Apache Ambari:在现有集群中安装时,Datanode安装失败

    我使用带有3个数据节点的apache ambari 2.1.0创建了hadoop集群 . 现在,当我尝试将另一个datanode添加到(现有群集)中时,它会抛出一个错误 resource_management.core.exceptions.Fail:执行'/ usr / bin / yum -d 0 -e 0 -y install'hedoop_2_3_ *''返回1.没有Presto元数据可...
  • 0 votes
     answers
     views

    当scp文件时,在centos7上安装ambari

    我正在安装Ambari 2.1.0: 我可以通过ssh连接而不通过(穿越id_rsa.pub) 我用redhat7 OS检查了HDP 2.3 两个主机(物理机)出现问题,一个是本地机器,称为主机,另一个称为worker1 . 显示错误的文件存在'/usr/lib/python2.6/site-packages/ambari_server/os_check_type.py' 当我...
  • 1 votes
     answers
     views

    无法通过Ambari 2.2.1.1部署HDP

    我不能通过Ambari 2.2.1.1部署HDP堆栈(hdfs,yarn,spark .etc) . 我收到了这个错误: 回溯(最近一次调用最后一次):文件"/var/lib/ambari-agent/cache/stacks/HDP/2.0.6/hooks/before-ANY/scripts/hook.py",第35行,在BeforeAnyHook()中执行()文件&quo...
  • 1 votes
     answers
     views

    无法从HDP 2.3.4.0升级到2.3.4.7

    我正在尝试将HDP 2.3.4.0升级到HDP 2.3.4.7版本,但我收到以下错误消息 . stderr:/var/lib/ambari-agent/data/errors-676.txt 2017-01-07 16:40:07,949 - 软件包管理器无法安装软件包 . 错误:执行'/ usr / bin / yum -d 0 -e 0 -y install'--disablerepo =...
  • 1 votes
     answers
     views

    在软件包安装期间是否应该配置Oozie / Sqoop jar位置?

    我在CentOS 6.7中使用HDP 2.4 . 我用Ambari创建了集群,所以Oozie由Ambari安装和配置 . 运行与jar文件位置相关的Oozie / Sqoop时出现两个错误 . 第一个涉及 postgresql-jdbc.jar ,因为Sqoop作业是从Postgres逐步导入的 . 我将 postgresql-jdbc.jar 文件添加到HDFS并在 workflow.xml 中...
  • 0 votes
     answers
     views

    无法启动hortonworks ambari指标收集器

    我在12节点集群上安装了HDP . 我使用了Hortonworks自动ambari安装 . 一切都在工作,除了Ambari指标收集器 . 这是我第三次尝试此安装,尝试自定义某些组件的分发位置 . 每当我遇到无法隔离的错误时,我都会对机器进行重新格式化并再次尝试,每次都会简化 . 最后一次我没有做任何改动,除了Hive和Oozie数据库的位置 . 但我仍然遇到与Metrics收集器无法启动相同的问题...
  • 0 votes
     answers
     views

    在postgresql升级后,Ambari没有启动

    我们有一个四节点Hadoop集群,其中安装了HDP 2.4和Kerberos . 由于这是我们的 生产环境 集群,我们希望为所有服务提供HA,包括Hive,Ambari和Oozie用于存储元数据的PostgreSQL数据库 . 但是,我们的postgreSQL版本8.4.2不支持Postgres的内置功能(流复制) . 因此,我们决定将PostgreSQL升级到版本(9.3)ambari支持 . ...
  • 0 votes
     answers
     views

    在45分钟工作正常后,TSocket在Thrift服务器上超时

    我写了一个脚本,使用Thrift Server连接到HBase . 每分钟此脚本从HBase获取3200条记录并更新一些信息并保存 . 前30-45分钟,Ambari Hadoop集群正常运行 . 之后发生查询异常: 异常'Thrift \ Exception \ TTransportException',消息'TSocket:超时读取来自192.168.1.55:9090的4个字节'/home...
  • 0 votes
     answers
     views

    Hadoop集群kerberized时无法访问HDFS

    我成功地对测试Hortonworks集群进行了测试 . Ambari为服务创建了关键标记,它们都已启动 . 名称节点有HA . 备用namenode启动速度很快,Active namenode需要更长时间 . Namenode UI显示一切正确 . 可以使用kerberos登录 . Namenodes是nn1.zim.com和 nn2.zim.com 这个问题可能有什么问题?以hdfs身份登...
  • 2 votes
     answers
     views

    用于访问HDFS中的文件的URI

    我使用包含3个节点的Ambari设置了一个集群 . 现在我想使用我的客户端应用程序访问HDFS中的文件 . 我可以在Amabari的Data Nodes下找到所有节点URI . 我需要使用什么URI端口来访问文件?我使用了默认安装过程 .

热门问题