-
0 votesanswersviews
同一台机器上有两个hadoop节点,而另一台机器没有加入集群
我有一台两台机器的测试集群,两台都安装了hadoop . 我已经配置了hadoop集群但是在管理UI上(如下图所示)我看到两个节点在同一台主机上运行,而另一台机器没有Hadoop节点 . 在主机上运行以下服务: ~$ jps 26310 ResourceManager 27593 Jps 26216 DataNode 26135 NameNode 26557 NodeManager 26701 ... -
0 votesanswersviews
Ubuntu 16.04上的Hadoop 2.8.1 - 资源管理器在NameNode上崩溃
得到了以下问题:我有一个hadoop集群(2.8.1,java 8),我的资源管理器在大约30秒-1分钟或我尝试将任何文件添加到hdfs后仍然保持中断 . 我有3个VPS(Ubuntu 16.04.2 LTS),1个用于Namenode,2个用于数据节点 . 这些主要是为了玩,所以只有20GB的空间(我相信应该足以看到mapreduce工作的一些微小的影响) 我的文件内容: 每台服务器上的/ et... -
0 votesanswersviews
Hadoop集群中Application Master的容器分配
有人可以解释一下AM如何在集群内的节点上分配容器? 还要考虑使用用例,因为我们知道默认最小容器大小是1024 MB 考虑Hadoop Cluster <1-Master&3-Datanodes> Namenode:master(3GB RAM,2个核心) Datanodes:data1(512MB RAM,1 Core), data2(512MB RAM,1 Core), ... -
1 votesanswersviews
ConnectException:在Hadoop中运行mapreduce时拒绝连接
我设置了多机器模式的Hadoop(2.6.0):1个namenode 3 datanodes . 当我使用command:start-all.sh时,他们(namenode,datanode,资源管理器,节点管理器)工作正常 . 我用jps命令检查了它,每个节点的结果都是下面的: NameNode: 7300 ResourceManager 6942 NameNode 7154 Secondar... -
0 votesanswersviews
hadoop with yarn resourcemanager和nodemanager命令未找到
在此先感谢您的帮助 ! 当我启动%HADOOP_HOME%\ sbin目录\启动dfs.cmd,它的工作原理,然后当我做%HADOOP_HOME%\ sbin目录\启动yarn.cmd这是行不通的,它打开两个窗口说:“命令的ResourceManager找不到”和“命令”nodemanager“找不到 . 我一直在努力解决这个问题,但没有找到任何解决办法,并尝试了很多东西 . 这是我的yarn-s... -
0 votesanswersviews
启动ResourceManager和NodeManager时出现Hadoop错误
我正在尝试使用单节点群集(Psuedo-distributed)设置Hadoop3-alpha3并使用the apache guide来执行此操作 . 我已经尝试运行示例MapReduce作业,但每次拒绝连接 . 运行 sbin/start-all.sh 后,我在ResourceManager日志中看到了这些异常(类似地在NodeManager日志中): xxxx-xx-xx xx:xx:xx,x... -
0 votesanswersviews
Hadoop:如何获取或计算队列权重?
我知道可以在fairscheduler.xml文件中获取这些值 . 但有没有办法可以使用资源管理器RESTFul endpoints 之一来计算这个数字? 参考资料我一直在筛选这些信息:https://hadoop.apache.org/docs/stable/hadoop-yarn/hadoop-yarn-site/ResourceManagerRest.html Problem: 除了分析资源... -
0 votesanswersviews
当YARN正在运行时,提交的hadoop作业会陷入Accepted状态
我正在使用VirualBox在Windows笔记本电脑上运行Ubuntu 14 VM . 我为 Single Node 配置了Apache发行版HDFS和YARN . 当我运行dfs和YARN时,所有必需的恶魔都在运行 . 当我没有配置YARN并且只运行DFS然后我可以成功执行MapReduce作业时,但是当我运行YARN然后工作卡在ACCEPTED状态时,我尝试了许多关于更改节点的内存设置但没有... -
3 votesanswersviews
使用多个resx文件进行本地化
我的Web应用程序通过使用ResourceManager放置在附属程序集中的资源文件来处理本地化 . 由于应用程序正在增长,我想将resx文件拆分为多个文件(对于每种语言),但在客户端,似乎我必须为我想要读取的每个文件创建一个ResourceManager实例 . 有没有办法将多个resx文件包装成单个文件? 谢谢 -
1 votesanswersviews
RuntimeResourceManager中的序列化问题
帮我解决以下问题: Type 'System.Resources.RuntimeResourceSet' in Assembly 'mscorlib, Version=2.0.0.0, Culture=neutral, PublicKeyToken=b77a5c561934e089' is not marked as serializable. 示例代码: [Serializable] ...