紫杉

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::

2014年7月4日

摘要: 所谓“时间相关多列数据”指的是同一个Key下具有多个属性数据,并且这些数据与时间具有相关性,多数场景是该Key对应在不同时间时刻的行为数据。在实际应用中,这类数据很多,例如电子商务网站上用户最近一段时间浏览的宝贝集合、访问的URL列表等。使用HBase存储此类数据时,有以下两种常用的方案:多行单列表... 阅读全文
posted @ 2014-07-04 16:20 紫杉 阅读(452) 评论(0) 推荐(0) 编辑

摘要: Hbase的访问方式1、Native Java API:最常规和高效的访问方式;2、HBase Shell:HBase的命令行工具,最简单的接口,适合HBase管理使用;3、Thrift Gateway:利用Thrift序列化技术,支持C++,PHP,Python等多种语言,适合其他异构系统在线访问... 阅读全文
posted @ 2014-07-04 14:07 紫杉 阅读(900) 评论(0) 推荐(0) 编辑

摘要: Hbase对Mapreduce API进行了扩展,方便Mapreduce任务读写HTable数据。一个简单示例:说明:从日志表中,统计每个IP访问网站目录的总数[java]view plaincopypackageman.ludq.hbase;importjava.io.IOException;im... 阅读全文
posted @ 2014-07-04 14:06 紫杉 阅读(296) 评论(0) 推荐(0) 编辑

2014年7月3日

摘要: 讲到了LSM 树和COLA树,LSM已经被许多主流NoSQL系统采用,如BigTable,Cassandra,而COLA则知道的人不多。文章分析比较的很清晰。以下原文-------------------------------------------------------------------... 阅读全文
posted @ 2014-07-03 11:02 紫杉 阅读(520) 评论(0) 推荐(0) 编辑

2014年7月1日

摘要: 测试环境 Hadoop 0.20.2版本、Hive-0.5.0版本、JDK1.61、一般来说我们对hive的操作都是通过cli来进行,也就是Linux的控制台,但是,这样做本质上是每个连接都存放一个元数据,各个之间都不相同,所以,对于这样的模式我建议是用来做一些测试比较合适,并不适合做产品的开发和应... 阅读全文
posted @ 2014-07-01 16:05 紫杉 阅读(2238) 评论(0) 推荐(0) 编辑

2014年6月17日

摘要: 参数处理-Shell传入参数的处理1. $# 传递到脚本的参数个数2. $* 以一个单字符串显示所有向脚本传递的参数。与位置变量不同,此选项参数可超过9个3. $$ 脚本运行的当前进程ID号4. $! 后台运行的最后一个进程的进程ID号5. $@ 与$#相同,但是使用时加引号,并在引号中返回每个参数... 阅读全文
posted @ 2014-06-17 18:29 紫杉 阅读(2776) 评论(0) 推荐(1) 编辑

摘要: 转自:http://ifeve.com/java-synchronousqueue/介绍Java 6的并发编程包中的SynchronousQueue是一个没有数据缓冲的BlockingQueue,生产者线程对其的插入操作put必须等待消费者的移除操作take,反过来也一样。不像ArrayBlocki... 阅读全文
posted @ 2014-06-17 15:50 紫杉 阅读(348) 评论(0) 推荐(0) 编辑

摘要: 看了一堆文章,终于把JAVA CAS的原理深入分析清楚了。感谢GOOGLE强大的搜索,借此挖苦下百度,依靠百度什么都学习不到!参考文档:http://www.blogjava.net/xylz/archive/2010/07/04/325206.htmlhttp://blog.hesey.net/2... 阅读全文
posted @ 2014-06-17 15:24 紫杉 阅读(201) 评论(0) 推荐(0) 编辑

摘要: 1. AQS简介AQS是Java并发类库的基础,其提供了一个基于FIFO队列,可以用于构建锁或者其他相关同步装置的基础框架。该同步器(以下简称同步器)利用了一个int来表示状态,期望它能够成为实现大部分同步需求的基础。使用的方法是继承,子类通过继承同步器并需要实现它的方法来管理其状态,管理的方式就是... 阅读全文
posted @ 2014-06-17 14:25 紫杉 阅读(265) 评论(0) 推荐(0) 编辑

2014年6月16日

摘要: 从各个角度总结了电商平台中的架构实践,由于时间仓促,定了个初稿,待补充完善,欢迎大家一起交流。转载请声明出处:http://blog.csdn.net/yangbutao/article/details/12242441作者:杨步涛关注分布式架构、大数据、搜索、开源技术QQ:306591368技术B... 阅读全文
posted @ 2014-06-16 18:10 紫杉 阅读(305) 评论(0) 推荐(0) 编辑