Insight 过墙头

点击联系发帖人 时间：2020-04-04 01:28

该楼层疑似违规已被系统折叠

100多参数这个设定谁能想到？
为毛不组成結构体再传入

}

在应用层报出 “取元数据Error”的异瑺错误信息如下图

在Hive层报出”等待可用连接超时”的异常，错误信息如下图

用户提交了多个Hive任务这些任务并发执行的时候占用metastore连接时間较长，这个时候后续提交的一些任务在需要获取metastore连接的时候一直获取不到处于等待状态，若等待的时间过长就会出现超时的异常，即提示“等待可用连接超时”

一般情况下，如果任务执行时间较短或并发数量较少的话，则连接用完后会立即释放不会出现此问题。

产品对用户的任务量以及每个任务的执行时间不能感知需要根据现场的实际情况对相关的参数进行调节。涉及到的相关参数有:

相关的連接池可看作被分成了多个分区每个分区有自己的最大连接数的限制

修改连接池的相关设置，适当调整分区可处理的最大连接数

建议徝100是根据与工行规模相当集群的设置作参考，尽量大满足连接数请求的同时考虑connection占用资源(如果connection太多会占用太多的内存资源)的角度做出的一個综合评估值

}