摘要：
Flink 配置文件 对于管理员来说，差不多经常调整的就只有 conf 下的flink conf.yaml ： 经过初步的调整，大约有以下模块的参数（未优化） Licensed to the Apache Software Foundation (ASF) under one or more con 阅读全文
摘要：
Example: spark.master spark://master:7077 spark.eventLog.enabled true spark.eventLog.dir hdfs://namenode:8021/directory spark.serializer org.apache.sp 阅读全文
摘要：
export JAVA_HOME=/app/jdk export SPARK_MASTER_PORT=7077 export SPARK_MASTER_WEBUI_PORT=8080 export SPARK_WORKER_CORES=50 export SPARK_WORKER_OPTS=" Ds 阅读全文
摘要：
查看文件编码在Linux中查看文件编码可以通过以下几种方式：1.在Vim中可以直接查看文件编码:set fileencoding即可显示文件编码格式。如果你只是想查看其它编码格式的文件或者想解决用Vim查看文件乱码的问题，那么你可以在~/.vimrc 文件中添加以下内容：set encoding=u 阅读全文
摘要：
export HBASE_HEAPSIZE=16384export HBASE_OFFHEAPSIZE=25gexport HBASE_MASTER_OPTS="$HBASE_MASTER_OPTS -Xmx16g -Xms16g -Xmn4g -Xss256k -XX:MaxPermSize=25 阅读全文
摘要：
如果是为了编译hadoop2.8.0源码，必须使用2.5.0版本的protobuf，安装方法同下 1. 下载需要的安装包：https://github.com/google/protobuf/releases protoc-3.1.0-win32.zip（protoc-2.5.0-win32.zip 阅读全文
摘要：
最近在学习HBase先关的知识，顺便做一下笔记，以加深知识的了解和掌握。 Hbase常用工具 文件检测修复工具 hbase hbck -help 常用选项： -details 显示所有region检查的完整报告 -summary 输出表和状态的总结信息 -metaonly 只检查-ROOT-和.ME 阅读全文
摘要：
1.总结 "Slow ReadProcessor" 和"Slow BlockReceiver"往往是因为集群负载比较高或者某些节点不健康导致的，本文主要是帮助你确认是因为集群负载高导致的还是因为某些节点的硬件问题。 2.症状 1.作业比以前运行的时间变长 2.Job的日志中有以下WARN的信息 3. 阅读全文
摘要：
export HBASE_OPTS="-XX:+UseConcMarkSweepGC" export HBASE_LOG_DIR=/app/hbase/logexport HBASE_PID_DIR=/app/hbase/tmpexport HBASE_HEAPSIZE=16384export HB 阅读全文
摘要：
简介 简介 产品交付后对于项目管理人员往往就是工作接近尾声,但是对于一线开发和运维的小伙伴,那是维护工作的起点. 线上问题对于程序员来说其实就是生产环境中遇到的问题总称,优先级对于开发同学和运维同学来说是最高级别.当一位工程师遇到线上问题,一般都会放下手头的工作,优先全力解决线上问题. 往往系统运维 阅读全文