logstash retrying failed action with response code: 429

使用logstash进行同步的时候报如下错误：

09:08:22.284 [[main]>worker4] INFO  logstash.outputs.elasticsearch - retrying failed action with response code: 429 ({"type"=>"es_rejected_execution_exception", "reason"=>"rejected execution of org.elasticsearch.transport.TransportService$7@6d1e3b7a on EsThreadPoolExecutor[bulk, queue capacity = 200, org.elasticsearch.common.util.concurrent.EsThreadPoolExecutor@3cd6876e[Running, pool size = 8, active threads = 8, queued tasks = 200, completed tasks = 651632]]"})

 

判断应该是es的写入性能不行，修改es的配置添加如下配置，然后重启es生效

 

thread_pool.bulk.queue_size: 10000 # 写入队列大小
indices.memory.index_buffer_size: 30%

posted @   kuroniko  阅读(463)  评论(0)  编辑  收藏  举报
相关博文：
·  logstash同步es到es从库
·  RetryableException: Read timed out executing导致服务假死无响应
·  使用logstash迁移遇到的错误(es同步到es)
·  Logstash [logstash.outputs.elasticsearch][main] retrying failed action with response code: 403
·  :error=>"Elasticsearch Unreachable: [http://192.168.100.44:9200/][Manticore::SocketException] 拒绝连接 (Connection refused)"}
阅读排行：
· TypeScript + Deepseek 打造卜卦网站：技术与玄学的结合
· 阿里巴巴 QwQ-32B真的超越了 DeepSeek R-1吗？
· 【译】Visual Studio 中新的强大生产力特性
· 【设计模式】告别冗长if-else语句：使用策略模式优化代码结构
· 10年+ .NET Coder 心语 ── 封装的思维：从隐藏、稳定开始理解其本质意义
历史上的今天：
2020-03-06 kafka 消费重试 实现
点击右上角即可分享
微信分享提示
SQL AI 助手