TonyChai

2015年7月7日

摘要：一.mmap系统调用1.mmap系统调用mmap将一个文件或者其它对象映射进内存。文件被映射到多个页上，如果文件的大小不是所有页的大小之和，最后一个页不被使用的空间将会清零。munmap执行相反的操作，删除特定地址区域的对象映射。当使用mmap映射文件到进程后,就可以直接操作这段虚拟地址进行文件的读... 阅读全文

posted @ 2015-07-07 15:07 TonyChai 阅读(1043) 评论(0) 推荐(0) 编辑

linux下cpu物理个数、多核、超线程判断解析

摘要：在Linux体系中，供给了proc文件体系显示体系的软硬件信息。若是想懂得体系中CPU的供给商和相干设备信息，则可以经由过程/proc/cpuinfo文件获得。本文章针对该文件进行简单的总结。基于指令集（ISA）的CPU产生的/proc/cpuinfo文件不一样，基于X86指令集CPU的/proc/... 阅读全文

posted @ 2015-07-07 15:01 TonyChai 阅读(5109) 评论(0) 推荐(0) 编辑

linux后端诊断与调试技术

摘要：本文不是liunx命令使用教程，也不打算全方面阐明其用法，互联网公司项目很多，服务程序之间相互依赖调用很复杂，各种因素会影响线程服务正常运行，特别是基础服务组件更是如此，当出现各种问题时，如何诊断linux下哪个环节出现问题或状况。从linux系统层面看，通过各种操作命令和手段快速定位线上程序的症状... 阅读全文

posted @ 2015-07-07 14:47 TonyChai 阅读(566) 评论(0) 推荐(0) 编辑

kafka在zookeeper中存储结构

摘要： 1.topic注册信息/brokers/topics/[topic] :存储某个topic的partitions所有分配信息Schema:{ "version": "版本编号目前固定为数字1", "partitions": { "partitionId编号": [ 同步副本组br... 阅读全文

posted @ 2015-07-07 12:04 TonyChai 阅读(284) 评论(0) 推荐(0) 编辑

kafka脚本

摘要：为了便于使用，kafka提供了比较强大的Tools，把经常需要使用的整理一下开关kafka Serverbin/kafka-server-start.sh config/server.propertiesbin/kafka-server-stop.shJMX_PORT=9999 nohup bin/... 阅读全文

posted @ 2015-07-07 11:59 TonyChai 阅读(1357) 评论(0) 推荐(0) 编辑

2015年7月6日

linux 环境变量设置方法总结（PATH / LD_LIBRARY_PATH）

摘要： PATH和LD_LIBRARY_PATH本质都是变量，所谓变量的意思就是由别人赋值产生的，直觉往往会让我们添加和减少这个变量本身的某些路径，实际上这是不正确的。正确的做法是我们要去修改赋予这个变量数值的那些配置文件，加一条路径或者减一条。说到底变量只关乎显示，不关乎其用于显示的内容。PATH: 可执... 阅读全文

posted @ 2015-07-06 17:53 TonyChai 阅读(6459) 评论(0) 推荐(0) 编辑

2015年7月2日

maven待整理

摘要： http://blog.csdn.net/column/details/yuguiyang-maven.html?&page=2 阅读全文

posted @ 2015-07-02 14:58 TonyChai 阅读(101) 评论(0) 推荐(0) 编辑

linux进程的一些日常处理

摘要： linux 下查看一个进程运行路径的方法在linux下查看进程大家都会想到用 ps -ef|grep XXX可是看到的不是全路径，怎么看全路径呢？每个进程启动之后在 /proc下面有一个于pid对应的路径例如：ps -ef|grep python显示：oracle 4431 4366 0 18:56... 阅读全文

posted @ 2015-07-02 10:18 TonyChai 阅读(231) 评论(0) 推荐(0) 编辑

2015年6月25日

BI生态圈常用端口使用配置总结

摘要： Hadoop集群的各部分一般都会使用到多个端口，有些是daemon之间进行交互之用，有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多，完全记不住哪个端口对应哪个应用，特收集记录如此，以便查询。这里包含我们使用到的组件：HDFS, YARN, HBase, Hive, ZooKe... 阅读全文

posted @ 2015-06-25 11:11 TonyChai 阅读(627) 评论(0) 推荐(0) 编辑

2015年6月19日

为你的 Hadoop 集群选择合适的硬件

摘要：随着Apache Hadoop的起步，云客户的增多面临的首要问题就是如何为他们新的的Hadoop集群选择合适的硬件。尽管Hadoop被设计为运行在行业标准的硬件上，提出一个理想的集群配置不想提供硬件规格列表那么简单。选择硬件，为给定的负载在性能和经济性提供最佳平衡是需要测试和验证其有效性。（比如，I... 阅读全文

posted @ 2015-06-19 11:26 TonyChai 阅读(370) 评论(0) 推荐(0) 编辑

公告