诗码者

摘要： 日志分割 场景：日志量比较大，且研发程序没有设置分卷 1、配置样例： 文件路径：/etc/logrotate.d/tomcat /data/logs/catalina.out { daily compress delaycompress copytruncate create 0644 root r 阅读全文

摘要： 在生产环境中tomcat内存设置不好很容易出现jvm内存溢出。 1、 linux下的tomcat： 修改TOMCAT_HOME/bin/catalina.sh 位置cygwin=false前。 JAVA_OPTS="-server -Xms256m -Xmx512m -XX:PermSize=64M 阅读全文

摘要： 1、概述 logstash是有java语言写的，所以程序占用系统资源比较多。但是支持grok正则，这是特别强大的。 2、安装 参考：https://www.elastic.co/guide/en/logstash/current/installing-logstash.html yum安装： inp 阅读全文

摘要： 1、概述 filebeat使用go语言开发，轻量级、高效。主要由两个组件构成：prospector和harvesters。 Harvesters负责进行单个文件的内容收集，在运行过程中，每一个Harvester会对一个文件逐行进行内容读取，并且把读写到的内容发送到配置的output中。 Prospe 阅读全文

摘要： 1、mongotop #mongotop -h 127.0.0.1:27017 -u test -p test123 --authenticationDatabase admin 输出说明： ns：包含数据库命名空间，后者结合了数据库名称和集合。 db：包含数据库的名称。名为 . 的数据库针对全局锁 阅读全文

摘要： 一、概述 Superset使用Flask-Cache进行缓存，Flask-Cache支持redis，memcached，simplecache（内存），或本地文件系统）等缓存后端，如果你打算使用memcached，就需要使用memcached服务器作为后端，如果你打算使用redis，就需要安装pyt 阅读全文

摘要： 1、hive的partition的相关查询，由于presto不支持vachar和int的自动转换，所以使用where的时候需要手动转换一下。 #select count(*) from userlogs where date=date'2017-12-11'; 阅读全文

摘要： 1、通过抓包大致确定访问量 #time tcpdump -nn -i eth0 'tcp[tcpflags] = tcp-syn' -c 10000 >/dev/null 根据real时间判断访问量，如果这个值很小，说明访问量比较大。 2、通过tcpdump抓包分析Ethernet-ip-tcp-u 阅读全文

摘要： 1、maven私服 nexus 使用docker部署,下载最新的image #docker pull sonatype/nexus3 #cat docker-compose.yml version: '2'services: nexus: image: sonatype/nexus3 contain 阅读全文

摘要： 1、概述 superset大数据可视化的利器，深度集成durid，结合kylin、presto完成强大的大数据可视化功能，曾用名Panoramix、caravel。相比caravel它有个比较抢眼的功能SQL lab。具体可参考官方文档 2、安装 提前在10.0.2.245服务器上面部署好redis 阅读全文