java.nio.channels.ClosedChannelException

摘要:
ERRORclient.TransportClient:FailedtosendRPCRPC7651764253676103503to/10.169.12.139:45996:java.nio.channels.ClosedChannelException原因:给节点分配的内存少,yarnkill了sparkapplication解决:配置yarn-site.xml

ERROR client.TransportClient: Failed to send RPC RPC 7651764253676103503 to /10.169.12.139:45996: java.nio.channels.ClosedChannelException
原因:给节点分配的内存少,yarn kill了spark application

解决:配置yarn-site.xml
<property> <name>yarn.nodemanager.pmem-check-enabled</name> <value>false</value> </property> <property> <name>yarn.nodemanager.vmem-check-enabled</name> <value>false</value> </property>
参考:https://blog.csdn.net/u012957549/article/details/89361485

免责声明:文章转载自《java.nio.channels.ClosedChannelException》仅用于学习参考。如对内容有疑问,请及时联系本站处理。

上篇windows的定时任务设置layui开关遇见的坑以及用法总结下篇

宿迁高防,2C2G15M,22元/月;香港BGP,2C5G5M,25元/月 雨云优惠码:MjYwNzM=

相关文章

frida rpc调用维护ios手机脚本

1.kill_frida_rpc_server.sh #!/bin/bash echo "关闭服务" echo "`date "+%Y-%m-%d %H:%M:%S"` 正在杀进程..." ps -ef | grep 你的fridarpc服务.py | grep -v grep | awk '{print $2}' | xargs kill -9 ech...

Spark 系列之环境搭建(一)

1. Java 安装 下载安装 jdk1.8: 1、解压: [root@bogon app]# pwd /home/hj/app [root@bogon app]# tar -zxvf jdk-8u261-linux-x64.tar.gz 2、配置 .bash_profile: export JAVA_HOME=/home/hj/app/jdk1.8.0...

CentOS5.x、CentOS6.x 使用NFS及mount实现两台服务器间目录共享

一、环境介绍: 服务器:centos 192.168.1.225 客户端:centos 192.168.1.226 二、安装: NFS的安装配置:centos 5 : portmap:实现RPC(协议)的应用程序 yum -y install nfs-utils portmap centos 6(在CentOS 6.3当中,portmap服务由rpcbin...

CH5 ResourceManager重启

目录 概述 特性 非工作保留RM重启 工作保留RM重启 配置 Enable RM Restart 配置RM状态的保存 配置工作保留RM恢复 概述 ResourceManager是集群中绝对的资源管理工具,并且调度应用在YARN上运行。因此对于YARN来说是一个单点问题。这个文档介绍RM的重启。 有2种重启的方式: 1.非工作保留RM...

yarn 的安装和使用

Yarn 的简介: Yarn是facebook发布的一款取代npm的包管理工具; Yarn的特点: 1)速度超快----Yarn缓存了每个下载过的包,所以再次使用时无需重复下载。同时利用并行下载以最大化资源利用率,因此安装快。 2)超级安全----在执行代码之前,Yarn会通过算法检验每个安装包的完整性。 3)超级可靠-----使用详细、简洁的锁文件格式和...

Openstack_通用技术_RPC 远程异步调用

目录 目录 RPC 一个通过 HTTP Request 调用操作函数的 RPC 实现样例 环境 接收 HTTP Request RPC 调用具体的操作函数 测试 RPC RPC: 同一个项目内的不同服务进程之间的交互方式。为不同的进程服务提供了 call()(同步) 和 cast()(异步) 两种调用方式。 问题 1: 在一个 Opensta...