yuerspring

摘要：大数据技术之Flume 配置示例 1 & 3 [root@bigdatacloud conf]# cat test1a1.sources = r1a1.sinks = k1a1.channels = c1# Describe/configure the sourc... 阅读全文

posted @ 2016-05-03 22:54 yuerspring 阅读(185) 评论(0) 推荐(0) 编辑

摘要：大数据技术阅读全文

posted @ 2016-05-03 22:54 yuerspring 阅读(102) 评论(0) 推荐(0) 编辑

摘要： Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。这种动作（网页浏览，搜索和其他用户的行动）是在现代网络上的许多社会功能的一个关键因素。这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。对于像Hadoop的... 阅读全文

posted @ 2016-05-03 22:53 yuerspring 阅读(264) 评论(0) 推荐(0) 编辑

摘要：大数据技术之阅读全文

posted @ 2016-05-03 22:53 yuerspring 阅读(132) 评论(0) 推荐(0) 编辑

摘要：大数据技术之Hadoop-----> 未完，待续到官网下载 hadoop-2.5.2.tar.gz ，解压到没有中文的路径下配置环境变量 HADOOP_HOME 配置Path 路径 %HADOOP_HOME%/bin ；%HADOOP_HOME%/sbin... 阅读全文

posted @ 2016-05-03 22:52 yuerspring 阅读(262) 评论(0) 推荐(0) 编辑

摘要： ing 阅读全文

posted @ 2016-05-03 22:47 yuerspring 阅读(82) 评论(0) 推荐(0) 编辑

摘要： datatstage 中的一个db source stage一直处于Ready 状态，很奇怪，请赐教阅读全文

posted @ 2016-05-03 17:28 yuerspring 阅读(117) 评论(0) 推荐(0) 编辑

摘要： US team 同事开发了一个prod_dimnsn 的job ，job 之大让人很是无语，一个job 里面大概用到了不下 50 个stage ，虽然只有简单的60W 数据，但是真个job 里面用了太多来的 lookup change capture... 阅读全文

posted @ 2016-05-03 13:23 yuerspring 阅读(190) 评论(0) 推荐(0) 编辑

摘要：物联网云计算大数据分布式联系紧密，阅读全文

posted @ 2012-10-08 17:05 yuerspring 阅读(146) 评论(0) 推荐(0) 编辑

摘要：在IBM datastage job 中我们知道共有三种类型，在此简单阐述下1.server job ，运行在server 服务器端，简单用于逻辑控制的job 可以采用这种方法实现2.parallel job ，并行运行的job，对于大多数的job develop 采... 阅读全文

posted @ 2012-03-27 13:52 yuerspring 阅读(393) 评论(0) 推荐(0) 编辑