该用户很懒 - 博客园

2021年4月14日

摘要：转载：https://www.huaweicloud.com/articles/efaefd3b4cdc45298eb72747893e49c7.html 一.前言各位开发和运维同学，在项目实施落地的过程中，尤其是使用EDAS、DRDS、MQ这些java中间件时，肯定会遇到不少JAVA程序运行和J 阅读全文

posted @ 2021-04-14 20:13 该用户很懒阅读(542) 评论(0) 推荐(1) 编辑

2021年4月13日

metricbeat安装使用

摘要：安装跟版本对应 1、curl -L -O https://artifacts.elastic.co/downloads/beats/metricbeat/metricbeat-6.4.3-amd64.deb 2、sudo dpkg -i metricbeat-6.4.3-amd64.deb 配置：阅读全文

posted @ 2021-04-13 15:53 该用户很懒阅读(526) 评论(0) 推荐(0) 编辑

elasticsearch监控方案

摘要：用Prometheus+grafana进行监控 https://github.com/justwatchcom/elasticsearch_exporter https://github.com/vvanholl/elasticsearch-prometheus-exporter 用metricbe 阅读全文

posted @ 2021-04-13 15:00 该用户很懒阅读(152) 评论(0) 推荐(0) 编辑

2021年4月8日

discovery.zen.minimum_master_nodes防止脑裂

摘要：转载：https://blog.csdn.net/zuodaoyong/article/details/104719508 discovery.zen.minimum_master_nodes对集群的稳定性至关重要，防止脑裂的出现。脑裂：如果网络的故障导致一个集群被划分成两片，每片都有多个nod 阅读全文

posted @ 2021-04-08 20:08 该用户很懒阅读(336) 评论(0) 推荐(0) 编辑

elasticsearch集群配置规则

摘要： 1、集群中至少配置3个master节点，大集群5个，遵循奇数原则，为了防止脑裂，discovery.zen.minimum_master_nodes相应地设置成2和3 2、如果都是机械硬盘的话，一般每台机器上会有1个warm，1个hot数据节点。如果有ssd硬盘，ssd放hot，机械放warm 3、阅读全文

posted @ 2021-04-08 11:35 该用户很懒阅读(1368) 评论(0) 推荐(0) 编辑

2021年4月6日

hive动态分区和静态分区

摘要：转载：https://www.jianshu.com/p/5dbbaea8ff41 一）hive中支持两种类型的分区：静态分区SP（static partition）动态分区DP（dynamic partition）静态分区与动态分区的主要区别在于静态分区是手动指定，而动态分区是通过数据来进行阅读全文

posted @ 2021-04-06 20:40 该用户很懒阅读(579) 评论(0) 推荐(0) 编辑

shell截取字符串方法

摘要：转载：https://www.cnblogs.com/kevingrace/p/8868262.html 2.1） # 最小限度从前面截取word语法：${parameter#*word} ，即截取 "第一个分隔符word及其之前的字符全部删掉"后的字符 1 2 3 4 5 6 7 8 9 10 阅读全文

posted @ 2021-04-06 20:30 该用户很懒阅读(371) 评论(0) 推荐(0) 编辑

esrally对统一集群的性能测试——分布式、单机、内外网、client端的node数量

摘要： 1、es集群环境：三台物理节点整个集群配置9个node：3个master节点、3个client节点、3个data节点 2、rally测试数据：默认配置、http_logs 3、测试结果 3.1 分布式（外网client节点http port） 3.2 单机压测（外网client节点http por 阅读全文

posted @ 2021-04-06 19:57 该用户很懒阅读(397) 评论(2) 推荐(0) 编辑

esrally安装和分布式运行

摘要： 1、python3环境安装 2、pip3 install esrally 3、运行esrally，这个时候会出现.rally文件夹，注意一定要先运行esrally这个命令注意：压测的是client node的http port esrally --pipeline=benchmark-only - 阅读全文

posted @ 2021-04-06 15:46 该用户很懒阅读(154) 评论(0) 推荐(0) 编辑

2021年3月31日

goreplay中间件输出的log转html

摘要： #-*-coding:utf-8-*- #!/bin/pyton import csv import pandas as pd import requests import json import datetime import re import sys def file_convert_html 阅读全文

posted @ 2021-03-31 09:55 该用户很懒阅读(125) 评论(0) 推荐(0) 编辑