NoSql - 随笔分类(第3页) - 风生水起

摘要：个性化推荐的成功应用需要两个条件。第一是信息过载，第二是用户大部分时候没有特别明确的需求。阅读全文

posted @ 2012-11-28 16:40 风生水起阅读(162) 评论(0) 推荐(0) 编辑

摘要：安装Hadoop Eclipse Plugin（见其他网页）。hadoop 0.20.2下eclipse plugin “run on hadoop” 不起作用的解决方法Hadoop Eclipse Plugin默认会以本地文件的方式执行（无法找到hadoop conf目录），这是任务也不能在50030界面下看到。如果想将任务提交到HDFS文件系统，需要将hadoop的conf目录加入到项目的class path，同时需要将项目的输出目录加入到hadoop的classpath中。阅读全文

posted @ 2012-11-23 14:49 风生水起阅读(359) 评论(0) 推荐(0) 编辑

hadoop 0.20.2下eclipse plugin “run on hadoop” 不起作用的解决方法

摘要：hadoop 0.20.2下eclipse plugin “run on hadoop” 不起作用的解决方法阅读全文

posted @ 2012-11-22 16:40 风生水起阅读(1360) 评论(1) 推荐(1) 编辑

远程调试Hadoop（转）

摘要：远程调试Hadoop 阅读全文

posted @ 2012-11-21 19:49 风生水起阅读(4098) 评论(0) 推荐(0) 编辑

Hadoop实战第四章--读书笔记

摘要：Hadoop实战第四章--读书笔记阅读全文

posted @ 2012-11-20 18:08 风生水起阅读(1321) 评论(0) 推荐(0) 编辑

Hadoop源码分析

摘要：当前问题：input file 如何split？与inputformat有什么关系？多个reduce输出多个文件，这多个文件如何在HDFS中存储，每个输出文件作为HDFS中的文件吗？会不会太小了？HIVE执行结果是返回一个文件，是HIVE自己把文件合并的吗？map-reduce如何确定map和reduce任务的个数的？根据输入文件的大小？map执行完之后的临时文件是写在本地还是写到特定的服务器上？今天在看inputformat这块，目前对于输入文件的split部分还没有理清楚，很多代码不知道具体作用，看来需要架起环境来单步调试一下。阅读全文

posted @ 2012-11-16 17:53 风生水起阅读(338) 评论(0) 推荐(0) 编辑

hadoop常见配置含义备忘录

摘要：hadoop常见配置含义备忘录阅读全文

posted @ 2012-10-30 18:18 风生水起阅读(557) 评论(0) 推荐(0) 编辑

Hadoop/HIVE错误解决方案汇总

摘要：Hadoop错误解决方案汇总阅读全文

posted @ 2012-10-26 14:56 风生水起阅读(13078) 评论(0) 推荐(0) 编辑

HiveQL学习

摘要：HiveQL学习阅读全文

posted @ 2012-10-12 16:34 风生水起阅读(964) 评论(0) 推荐(2) 编辑

Hive UDAF开发

摘要：Hive UDAF开发阅读全文

posted @ 2012-10-12 16:30 风生水起阅读(4470) 评论(0) 推荐(0) 编辑

Hive UDF开发

摘要：Hive UDF开发阅读全文

posted @ 2012-10-12 16:29 风生水起阅读(22991) 评论(1) 推荐(2) 编辑

编译Hive/Hadoop总结

摘要：编译Hive/Hadoop总结1. 首先要看readme文件，根据说明来编译；2. 首先在命令行确保可以编译打包成功，然后执行anteclipse-files生成针对eclipse的文件，然后就可以导入到eclipse里了（具体见http://blog.csdn.net/shuhuai007/article/details/6739847）3. 修改编译环境HADOOP_HOME的值（Run-->Debug Configuration-->Environment，修改HADOOP_HOME的值）；IDE：netbeans可以建立maven项目，加入tar包，通过maven下载代码；阅读全文

posted @ 2012-10-09 18:26 风生水起阅读(3240) 评论(0) 推荐(0) 编辑

IVY教程

摘要：IVY教程阅读全文

posted @ 2012-10-04 23:52 风生水起阅读(5680) 评论(0) 推荐(0) 编辑

Hive环境搭建与入门（转）

摘要：作为JAVA的初学者折腾了很久，试了代理服务器等方法，最终发现了这片文章，楼主总结的很不错！阅读全文

posted @ 2012-10-04 23:46 风生水起阅读(4378) 评论(0) 推荐(0) 编辑

MangoDB使用总结

摘要：MangoDB使用总结 MangoDB的优点： MangoDB性能注意事项：阅读全文

posted @ 2012-09-29 15:46 风生水起阅读(3044) 评论(0) 推荐(0) 编辑

HIVE Thrift Server使用总结

摘要：因为报表前端用dot NET MVC写的，要想从HIVE中获取详细数据，目前的方案是使用hive thriftserver。 1. 生成HIVE Thrift对应的C#类文件阅读全文

posted @ 2012-09-13 18:19 风生水起阅读(20407) 评论(3) 推荐(1) 编辑

hadoop hive安装手记（转）

摘要：hadoop hive安装手记阅读全文

posted @ 2012-09-06 17:50 风生水起阅读(4212) 评论(0) 推荐(0) 编辑

使用Thrift RPC编写程序zz

摘要：本文以C++语言为例介绍了thrift RPC的使用方法，包括对象序列化和反序列化，数据传输和信息交换等。本文采用了一个示例进行说明，该示例主要完成传输（上报日志或者报表）功能，该示例会贯穿本文，内容涉及thrift定义，代码生成，thrift类说明，client编写方法，server编写方法等。关于Thrift架构分析，可参考：Thrift架构介绍。关于Thrift文件编写方法，可参考：Thrift使用指南。阅读全文

posted @ 2012-09-05 18:05 风生水起阅读(1736) 评论(0) 推荐(0) 编辑

Thirft框架介绍zz

摘要：Thirft框架介绍阅读全文

posted @ 2012-09-03 17:46 风生水起阅读(413) 评论(0) 推荐(0) 编辑

java实现Hbase中的查询（一）Filter方式

摘要：java实现Hbase中的查询（一）Filter方式阅读全文

posted @ 2012-08-23 14:57 风生水起阅读(23696) 评论(2) 推荐(1) 编辑

随笔分类 - NoSql