02 2018 档案
摘要：http://www.talkwithtrend.com/Question/177983-1247453 一些测试的描述如下内容最为详细，供你参考： 测试对于验证系统的正确性、分析系统的性能来说非常重要，但往往容易被我们所忽视。为了能对系统有更全面的了解、能找到系统的瓶颈所在、能对系统性能做更好的改
阅读全文
摘要：a表示显示目录下所有的文件和文件夹（不含子目录） h表示以人类能看懂的方式 max-depth表示目录的深度<!--EndFragment-->
阅读全文
摘要：http://blog.csdn.net/lipeng_bigdata/article/details/51160359 UnderReplicatedBlocks是HDFS中关于块复制的一个重要数据结构。在HDFS的高性能、高容错性体系中，总有一些原因促使HDFS系统内进行块复制工作，比如基于高性
阅读全文
摘要：转载：http://blog.csdn.net/jek123456/article/details/65658790 在某个Logstash的场景下，我产生了为什么不能用Flume代替Logstash的疑问，因此查阅了不少材料在这里总结，大部分都是前人的工作经验下，加了一些我自己的思考在里面，希望对
阅读全文
摘要：创建hive表： 导入数据： 将表转换成ORC表：
阅读全文
摘要：https://www.cnblogs.com/Kellana/p/5844919.html 在mongodb 集群中，if 存在orphaned documents 和chunk migration， count查询可能会导致一个不正确的查询结果，例如我就是踩的这个坑，先不说话，看结果： skip
阅读全文
摘要：hdfs dfs -du -h 查看各个HDFS空间占用情况 hdfs dfs -rmr /user/fughting/.Trash/Current 就可以清空fighting这个用户的回收站了(但是这种方式并不会删除文件。会将其放到另外一个.Trash) 需要添加参数： -skipTrash 才会
阅读全文
摘要：https://community.hortonworks.com/questions/449/how-to-reset-ambari-admin-password.html 1) Postgres - As mentioned earlier 2) Mysql Login as root user
阅读全文
摘要：https://www.cnblogs.com/MOBIN/p/5704001.html 摘要 Hive提供了与HBase的集成，使得能够在HBase表上使用HQL语句进行查询 插入操作以及进行Join和Union等复杂查询 应用场景 1. 将ETL操作的数据存入HBase 2. HBase作为Hi
阅读全文
摘要：2.重新加载DataNode配置 同样只需要操作添加硬盘的Datanode ./hdfs dfsadmin -reconfig datanode 10.5.24.139:50020 start 注：10.5.24.139为目录调整的Datanode节点，Datanode的默认IPC地址为：50020
阅读全文
摘要：https://www.jianshu.com/p/5c3bb771dc5d 最近在学习dubbo源码，dubbo在功能扩展方面，提供了SPI的扩展。初次看到SPI，还是不容易理解，下面记录SPI的学习。 系统里抽象的各个模块，往往有很多不同的实现方案，比如日志模块的方案，xml解析模块、jdbc模
阅读全文
摘要：https://www.cnblogs.com/kissdodog/archive/2013/06/24/3152743.html 操作结果集 为了配合测试，特地建了两个表，并且添加了一些测试数据，其中重复记录为东吴的人物。 表：Person_1魏国人物 表：Person_2蜀国人物 A、Union
阅读全文
摘要：http://blog.itpub.net/26812308/viewspace-2124660/ 在Replica sets 中的secondary节点默认是不可读的。使用Replica Sets实现读写分离。通过在连接时指定或者在主库指定slaveOk，由Secondary来分担读的压力，Pri
阅读全文
