摘要：
最简单的解释就是： 同步是指：发送方发出数据后，等接收方发回响应以后才发下一个数据包的通讯方式。 异步是指：发送方发出数据后，不等接收方发回响应，接着发送下个数据包的通讯方式。 阅读全文
摘要：
hadoop源码中有很多package，以下对比较重要的package进行说明： package 说明 tool 提供命令行工具，入distcp（集群间复制数据）、archive（打包归档） mapreduce Map/Reduce实现 filecache 提供hdfs的本地缓存，提高读取速度 fs 抽象文件系统，提供统一访问接口 hdfs 分布式文件系统实现 ipc 节点间通信 io ... 阅读全文
摘要：
linux系统默认打开文件数是1024，这对服务器来说，数值太低了，经常报Too many open files这个错，所以要手动修改这个值。 1、使用ulimit -a可以查看目前服务器的资源限制情况： 其中的open file就是打开的文件数，从中看到可以使用-n进行设置，也可以使用ulimit -n直接查看打开文件数的限制数 2、设置系统root有效的打开文件数限制 vi/etc/security/limits.conf 添加如下内容： 然后运行ulimit -n 131072设置，这是为了在当前会话中生效。 limits.conf在下次登录后就会生效。 ... 阅读全文