摘要：
扎实的基础知识、高质量的代码、清晰的思路、优化代码的能力、优秀的综合能力是编程技术面试的五大要点。 找工作一直是一个热门话题。要想找到心仪的工作，难免需要经过多轮面试。编程面试是程序员面试过程中最为重要的一个环节。如果能在编程面试的环节充分展示自己的能力，那么拿到中意的 Offer 就是水到渠成的事情。 我先后在欧特克、微软和思科等公司任软件工程师，多次接受他人的面试，同时也面试过很多人。总结面试与被面试的经验，我发现尽管面试官的背景、性格各不相同，但都关注应聘者五种素质：扎实的基础知识；能写高质量的代码；分析问题时思路清晰；能优化时间效率和空间效率；具备包括学习能力、沟通能力、发散思维能.. 阅读全文
摘要：
全球虚拟化和云基础架构领导厂商VMware公司今天公布了最新开源项目——Serengeti，支持企业能够在 虚拟和云环境中快速部署、管理和扩展Apache Hadoop。此外，VMware与Apache Hadoop社区共同合作研发扩展功能，让主要组件可以“感知虚拟化”以支持灵活扩展，并进一步提高Hadoop在虚拟化环境中的性能。VMware公司云应用服务副总裁陈志璋表示：“通过支持企业充分利用超大型数据而获取竞争优势，Apache Hadoop具有带来业务变革的潜力。它代表了应用正在发生根本性变化的一个方面，而企业也在寻求把这些新技术融入其产品家族的方式。VMware与 Apache Had 阅读全文
摘要：
分布式系统漫谈一—— Google三驾马车:GFS,mapreduce,Bigtable(2007-11-08 17:01:41)转载▼标签：it/科技分布式系统漫谈一 —— Google三驾马车: GFS,mapreduce,Bigtable谈到分布式系统，就不得不提Google的三驾马车:Google fs[1],Mapreduce[2],Bigtable[3]。虽然Google没有公布这三个产品的源码，但是他发布了这三个产品的详细设计论文。而且，Yahoo资助的Hadoop也有按照这三篇论文的开源Java实现:Hadoop对应Mapreduce, Hadoop Distributed F 阅读全文
摘要：
hadoop 海量数据 大数据量，海量数据 处理方法总结 布隆过滤器应用 悉数那些“巨型”数据仓库 Hadoop在业界的使用情况 淘宝Hadoop集群的概况 分布式 Paxos在大型系统中常见的应用场景 hadoop的实现 序 基于hadoop的crc校验谈hadoop的离线设计思想 基础 Hadoop使用场景 mapreduce作业流程概论 How MapReduce Works HDFS 读写流程 Hadoop在MapReduce中使用压缩详解 HDFS数据的Checksum Hado... 阅读全文
摘要：
hadoop对于压缩文件的支持hadoop对于压缩格式的是透明识别,我们的MapReduce任务的执行是透明的，hadoop能够自动为我们 将压缩的文件解压，而不用我们去关心。如果我们压缩的文件有相应压缩格式的扩展名（比如lzo，gz，bzip2等），hadoop就会根据扩展名去选择解码器解压。hadoop对每个压缩格式的支持,详细见下表：压缩格式工具算法文件扩展名多文件可分割性DEFLATE无DEFLATE.deflate不不gzipgzipDEFLATE.gz不不ZIPzipDEFLATE.zip是是，在文件范围内bzip2bzip2bzip2.bz2不是LZOlzopLZO.lzo不是如 阅读全文