吴一达

摘要： 最近遇到集群HDFS启动缓慢的问题，集群为Hadoop-2.5.0版本，做了HDFS的HA。在某次故障后重启HDFS集群，发现启动超慢，积累了100多个EditsLog，整个启动过程持续了近六个小时。为了总结这次的经验教训，补充了一下NameNode启动过程中有关FSImage... 阅读全文

摘要： 如果移动端访问不佳，请尝试–> Github版背景公司做相似产品较多，一般都是以某个产品为基础修改，逐步替换设计图的切图。这个就会导致需要经常为Copy的项目修改包名。 这里是参考一些网上的说法，结合自身实战经验加以完善，特此分享给同行们，避免不必要的弯路。Android Stud... 阅读全文

摘要： 背景MAMP是Mac下的一个PHP+Nginx+MySQL的集成环境，支持多站点，不同版本PHP。 今天有人请教MAMP如何显示文件列表的问题，这里记录一下。知识补充一个网站为了安全考虑，默认是禁止访问目录下的文件列表的。 当你请求一个目录时：Created with Raphaë... 阅读全文

摘要： 最近一个月基本上没有更新博客了，主要是和朋友一起在捣鼓J-Robot这个机器人，现在基本是可以控制它了，也算是一点小小的成就感吧。 先来几张图片吧。再来一张： 是否觉得呆呆的？来，Jimi给大家摆个姿势：来，jimi给大家走一段路吧：来，jimi给大家跳一个舞吧： 还有... 阅读全文

摘要： 在安装Hive时，需要在hive-site.xml文件中配置元数据相关信息。与传统关系型数据库不同的是，hive表中的数据都是保存的HDFS上，也就是说hive中的数据库、表、分区等都可以在HDFS找到对应的文件。这里说到的元数据可以理解成hive中用于保存数据库、表、分区或者... 阅读全文

摘要： 如果移动端访问不佳，请尝试–>Github版背景最近无意间发现几个开源软件的Bug反馈系统使用的是Flarum，Flarum是一款优雅简洁论坛软件，看起来还是相当不错的，一时抑制不住想要尝试一下。由于服务器使用的是AMH集成环境，它相对于通常的直接安装环境有很多的区别，这导致安... 阅读全文

摘要： Linux CentOS配置LAPM环境时，为了方便，将php和mysql命令加到系统环境命令，下面我们记录几种在linux下将php和mysql加入到环境变量中的方法。 如果在没有添加到环境变量之前，执行“php -v”命令查看当前php版本信息时时，则会提示命令不存在的错误，下... 阅读全文

摘要： 1.Harris角点检测Harris角点检测算法是一个极为简单的角点检测算法，该算法在1988年就被发明了，算法的主要思想是如果像素周围显示存在多于一个方向的边，我们认为该点为兴趣点。基本原理是根据公式： 化简为求解矩阵，最后根据矩阵的特征值判断是否为角点 实现效果： 代码... 阅读全文

摘要： 如何使用《DB 查询分析器》高效地生成旬报货运量数据马根峰 (广东联合电子服务股份有限公司, 广州 510300) 1 引言 中国本土程序员马根峰（CSDN专访马根峰：海量数据处理与分析大师的中国本土程序员）推出的个人作品----万能数据库... 阅读全文

摘要： 在新建Hive表时，可以使用stored as rcfile来指定hive文件的存储方式为RCFile。一、RCFile文件结构 下图是一个RCFile的文件结构形式。 从上图可以看出： 1）一张表可以包含多个HDFS block。 2）在每个block中，RCFi... 阅读全文