hivesql报错:java.net.SocketTimeoutException: Read timed out

场景:

在dolphin里面执行hivesql脚本,报错java.net.SocketTimeoutException: Read timed out

解决方式:

hive.metastore.client.socket.timeout=1000s

 扩展:

"Hive报Read timed out"错误可能也与YARN的资源限制有关。可以通过增加YARN的配置参数来解决此错误。

<property>
  <name>yarn.scheduler.maximum-allocation-mb</name>
  <value>8096</value>
  <description>单个任务的最大可用内存(单位:MB)</description>
</property>

<property>
  <name>yarn.scheduler.minimum-allocation-mb</name>
  <value>1024</value>
  <description>单个任务的最小可用内存(单位:MB)</description>
</property>
上述示例中,配置16core64G,将单个任务最大可用内存设置为8096MB,最小可用内存设置为1024MB。根据实际情况,可以适当调整内存限制。

参考链接:

https://blog.csdn.net/xin_jmail/article/details/85004967

https://blog.51cto.com/u_16213316/7238343

posted @ 2024-01-23 10:05  所向披靡zz  阅读(342)  评论(0编辑  收藏  举报