【发布时间】:2020-01-17 19:22:56
【问题描述】:
我正在尝试在 AWS ec2 上托管的 kubernetes 集群上使用 mr3 设置 hive。当我运行命令 run-hive.sh 时,Hive-server 启动并且 master-DAg 被初始化,但随后它卡在挂起状态。当我描述吊舱时。这是显示的错误消息。我已将资源保持在最低限度,因此它不应该是那个问题,并且我没有任何受污染的节点。如果您知道在 Kubernetes 上运行 hive 并访问 S3 的任何替代方案或在 Kubernetes 集群上实现 mr3 hive 的更好方法,请分享。
【问题讨论】:
-
您能否添加您的 3 个节点的描述?使用
kubectl describe node <name>,从主题看来,你们中的 2 个 pod 没有足够的资源,1 个有污点,不允许创建您的 pod。 -
您的问题不是因为您安装 Hive 的方式,而是因为您没有足够的资源。你用的是什么节点?您是否调查过运行 Hive 需要多少 CPU 和内存,或者您只是猜到了?
-
问题标题
0/3 nodes are available: 1 node(s) had taints that the pod didn't tolerate, 2 Insufficient cpu.上的错误消息明确指出您的一个节点上的 CPU 不足和污染,调度程序将零节点标记为三个节点中的可用节点。
标签: amazon-s3 amazon-ec2 kubernetes hive