Soft memory limit exceeded (at 101.75% of capacity). This is attempt 12771:

内存限制问题(Memory Limits):

Soft memory limit exceeded (at 101.75% of capacity). This is attempt 12771:
问题出现原因:

Ku都有一个硬性和软性的内存限制。
硬存储器限制是Kudu进程允许使用的最大数量,由--memory_limit_hard_bytes标志控制。

软内存限制是由硬盘内存限制的一个百分比,由--memory_limit_soft_percentage标志控制,memory_limit_soft_percentage默认值为80%,决定进程在开始拒绝某些写入操作之前可能使用的内存量。
那么Kudu就会因为记忆背压而拒绝写入。这可能会导致写入超时。有几种方法可以缓解库杜的内存压力:

Kudu都有一个硬性和软性的内存限制。
硬存储器限制是Kudu进程允许使用的最大数量,由--memory_limit_hard_bytes标志控制。

软内存限制是由硬盘内存限制的一个百分比,由--memory_limit_soft_percentage标志控制,memory_limit_soft_percentage默认值为80%,决定进程在开始拒绝某些写入操作之前可能使用的内存量。
那么Kudu就会因为记忆背压而拒绝写入。这可能会导致写入超时。有几种方法可以缓解库杜的内存压力:

解决方案:
1.如果主机有更多的内存可用于Kudu,增加–memory_limit_hard_bytes。

2.通过增加磁盘数量或增加维护管理器线程的数量,–maintenance_manager_num_threads。
通常,维护管理器线程与数据目录的建议比率是1:3。减少在应用程序端流向Kudu的写入量。

 

posted @   民宿  阅读(274)  评论(0编辑  收藏  举报
编辑推荐:
· 开发者必知的日志记录最佳实践
· SQL Server 2025 AI相关能力初探
· Linux系列:如何用 C#调用 C方法造成内存泄露
· AI与.NET技术实操系列(二):开始使用ML.NET
· 记一次.NET内存居高不下排查解决与启示
阅读排行:
· 开源Multi-agent AI智能体框架aevatar.ai,欢迎大家贡献代码
· Manus重磅发布:全球首款通用AI代理技术深度解析与实战指南
· 被坑几百块钱后,我竟然真的恢复了删除的微信聊天记录!
· 没有Manus邀请码?试试免邀请码的MGX或者开源的OpenManus吧
· 园子的第一款AI主题卫衣上架——"HELLO! HOW CAN I ASSIST YOU TODAY
点击右上角即可分享
微信分享提示