陈驰字新宇

摘要： HDFS的shell操作很简单，直接查看文档就可以，和Linux指令类似，下面简单总结一下HDFS的JAVA客户端编写。（HA集群的话把core-site.xml，hdfs-site.xml，mapred-site.xml，yarn-site.xml都拷贝到工作空间） 如图建立工程，其中客户端放在h 阅读全文

摘要： 1、概述 如下SQL语句发生严重消耗资源的问题，使得OS's load average会在30以上，一条语句需要执行上百秒。 /*PIXPatient 184176条DomainPatient 184189条PersonName 184189条*/ 捕获的SQL语句： select * from P 阅读全文

摘要： 1. 准备Linux环境 提示：我用的系统是CentOS 6.4。 1.0点击VMware快捷方式，右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段：192.168.1.0 子网掩码：255.255.255.0 - 阅读全文

摘要： 原因： 是虚拟机服务没有开启 解决方法：（以管理员的方式运行） 点击“开始→运行”，在运行框中输入 CMD 回车打开命令提示符，然后依次执行以下命令。 net start vmcinet start vmx86net start VMnetuserifsc config vmci=autosc co 阅读全文

摘要： 常见的分布式文件系统有，GFS、HDFS、Lustre 、Ceph 、GridFS 、mogileFS、TFS、FastDFS等。各自适用于不同的领域。它们都不是系统级的分布式文件系统，而是应用级的分布式文件存储服务。 Google学术论文，这是众多分布式文件系统的起源 Google File Sy 阅读全文

摘要： 首先我们看一下NAMENODE: 我们已经知道了NAMENODE作为DATANODE的管理者，其重要性不言而喻，那么NAMENODE是怎么管理数据的呢？ 首先，我们看一下上面这张图，每次客户端读写数据都要先经过NAMENODE，其实就是先查询NAMENODE中的元数据，那么问题来了，NAMENODE 阅读全文

摘要： 参考以上这张图，实际上我们客户端访问HDFS里面的内容时，并不需要真实知道内容存在于服务器的内容的真实路径，我们只需要知道一个虚拟路径就可以，比如最上面的hdfs://weekend110:9000/wordcount/input/test.txt，而HDFS内部已经将虚拟路径和真实路径的映射关系对 阅读全文

摘要： 摘自知乎大神的论述 作者：Xiaoyu Ma链接：https://www.zhihu.com/question/27974418/answer/38965760来源：知乎著作权归作者所有，转载请联系作者获得授权。 大数据本身是个很宽泛的概念，Hadoop生态圈（或者泛生态圈）基本上都是为了处理超过单 阅读全文

摘要： 引用自：http://www.cnblogs.com/evening/archive/2012/03/29/2423554.html 在学习python的过程中，lambda的语法时常会使人感到困惑，lambda是什么，为什么要使用lambda，是不是必须使用lambda？ 下面就上面的问题进行一下 阅读全文

摘要： Fragment（重要） 用途：在一个Activity里切换界面，切换界面时只切换Fragment里面的内容 生命周期方法跟Activity一致，可以理解把其为就是一个Activity fragment切换时会销毁旧的，再创建新的 定义布局文件作为Fragment的显示内容 //此方法返回的View 阅读全文