JamesFan - 博客园

2014年3月30日

pig ERROR 2997: Encountered IOException. File or directory null does not exist.

摘要： grunt> ls2014-03-30 19:58:31,344 [main] ERROR org.apache.pig.tools.grunt.Grunt - ERROR 2997: Encountered IOException. File or directory null does not ... 阅读全文

posted @ 2014-03-30 20:04 JamesFan 阅读(541) 评论(0) 推荐(0) 编辑

hadoop学习路线（转）

摘要：刚刚入门hadoop，如何去学习hadoop。google一篇学习路线图，与童鞋们共勉：转自：http://blog.csdn.net/zhoudaxia/article/details/8801769-------------------------------------------------... 阅读全文

posted @ 2014-03-30 10:48 JamesFan 阅读(170) 评论(0) 推荐(0) 编辑

2014年3月29日

86标准SQL与92标准SQL用法区别

摘要： 86标准SQL与92标准SQL用法区别在开发Oracle9i时，数据库还时间了ANSL SQL/92标准的链接语法，在书中建议在使用Oracle 9i及更高版本时，应该使用SQL/92标准的语法；在使用Oracle 8i 及更低版本时，应该使用SQL/86标准的语法。 -----《Oracle ... 阅读全文

posted @ 2014-03-29 14:12 JamesFan 阅读(276) 评论(0) 推荐(0) 编辑

hive-0.11.0安装

摘要：一、安装1、下载安装hivehive-0.11.0.tar.gz(稳定版)目录:/datatar –zxvfhive-0.11.0.tar.gz2、配置把所有的模板文件copy一份cd /opt/hive-0.11.0/confcp hive-default.xml.template hive-si... 阅读全文

posted @ 2014-03-29 11:48 JamesFan 阅读(258) 评论(0) 推荐(0) 编辑

2014年3月25日

[推荐算法]基于用户的协同过滤算法

摘要： (转)[推荐算法]基于用户的协同过滤算法分类：算法2013-11-12 14:121695人阅读评论(1)收藏举报算法python协同过滤算法推荐算法目录(?)[+]什么是推荐算法推荐算法最早在1992年就提出来了，但是火起来实际上是最近这些年的事情，因为互联网的爆发，有了更大的数据量可以供我们使用... 阅读全文

posted @ 2014-03-25 23:17 JamesFan 阅读(675) 评论(0) 推荐(0) 编辑

win7 x64 eclipse_kepler下编译 hadoop1.1.2-celipse-plugin

摘要： 1、编译前准备a) 下载和解压hadoop-1.1.2.tar.gzb) 下载并配置ant2、配置a) 进入hadoop-1.1.2\src\contrib拷贝build-contrib.xml到eclipse-plugin下2 ) 修改build-contrib.xmli. ... 阅读全文

posted @ 2014-03-25 12:01 JamesFan 阅读(185) 评论(0) 推荐(0) 编辑

2014年3月24日

将博客搬至CSDN

posted @ 2014-03-24 13:09 JamesFan 阅读(111) 评论(0) 推荐(0) 编辑

Hadoop中Partition解析

摘要： 1.解析PartitionMap的结果，会通过partition分发到Reducer上，Reducer做完Reduce操作后，通过OutputFormat，进行输出，下面我们就来分析参与这个过程的类。Mapper的结果，可能送到Combiner做合并，Combiner在系统中并没有自己的基类，... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(268) 评论(0) 推荐(0) 编辑

如何启动、关闭和设置ubuntu防火墙

摘要：如何启动、关闭和设置ubuntu防火墙引自：http://www.cnblogs.com/jiangyao/archive/2010/05/19/1738909.html就这句话就够了，下面的可以不看sudo ufwenable|disable由于LInux原始的防火墙工具iptables过于... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(141) 评论(0) 推荐(0) 编辑

Ubuntu下安装eclipse

摘要：环境：Ubuntu 10.04步骤：1、安装配置JDK，详见http://blog.csdn.net/gavin_dinggengjia/article/details/73638632、下载eclipse从官网http://www.eclipse.org/downloads/下载Eclips... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(111) 评论(0) 推荐(0) 编辑

hbase multiple SLF4J&n…

摘要： hbase multiple SLF4J bindings 警告hbaseshell 和命令操作中经常有个烦人的警告，说SLF4J有多个绑定：hbase(main):003:0> listTABLESLF4J: Class path contains multiple SLF4J bindin... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(131) 评论(0) 推荐(0) 编辑

hadoop版本与支持的hbase版本对照…

摘要： hadoop版本与支持的hbase版本对照表分类：hbase2013-05-2017:19701人阅读评论(2)收藏举报HbaseHadoopAs of Hive 0.9.0 the HBase integration requires at least HBase0.92, earlier ... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(1085) 评论(0) 推荐(0) 编辑

ubuntu设置固定IP

摘要： ubuntu设置固定IP时间:2013-06-0600:17来源:www.chengxuyuans.com1.设置IPvi/etc/network/interfacesauto loiface lo inet loopback auto eth0iface eth0 inet staticad... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(203) 评论(0) 推荐(0) 编辑

2014年02月16日

摘要： UBUNTU搭建HBASE0.90.5,HADOOP0.20.2环境时报错如下：2014-02-16 13:37:05,796 INFO org.apache.hadoop.ipc.HbaseRPC:Server at /127.0.0.1:60020 could not be reached... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(156) 评论(0) 推荐(0) 编辑

正则表达式 LINUX

摘要：正则表达式热身正则表达式(regularexpression)描述了一种字符串匹配的模式，可以用来检查一个串是否含有某种子串、将匹配的子串做替换或者从某个串中取出符合某个条件的子串等。例如grep,expr,sed,awk.或Vi中经常会使用到正则表达式，为了充分发挥shell编程的威力,需要... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(475) 评论(0) 推荐(0) 编辑

linux正则表达式基础

摘要： linux中awk，sed，grep等命令使用区别正则表达式基础在最简单的情况下，一个正则表达式看上去就是一个普通的查找串。例如，正则表达式"testing"中没有包含任何元字符，，它可以匹配"testing"和"123testing"等字符串，但是不能匹配"Testing"。要想真正的用好... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(142) 评论(0) 推荐(0) 编辑

Linux shell脚本全面学习

摘要： Linux shell脚本全面学习1. Linux脚本编写基础1.1语法基本介绍1.1.1开头程序必须以下面的行开始（必须方在文件的第一行）：#!/bin/sh 符号#!用来告诉系统它后面的参数是用来执行该文件的程序。在这个例子中我们使用/bin/sh来执行程序。当编辑好脚本时，如果要执... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(159) 评论(0) 推荐(0) 编辑

eclipse中jquery.js文件有错误提示…

摘要： eclipse中jquery.js文件有错误提示的解决办法2013-04-06 19:18浏览次数：382由于jquery.js文件进行了压缩，压缩之后的语法eclipse无法完全识别，所以有错误提示。但不影响实际使用，所以可以将错误提示屏蔽。错误提示的屏蔽办法：1、打开工程根目录下的文件：.... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(236) 评论(0) 推荐(0) 编辑

sqoop的安装

摘要： sqoop的安装sqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具sqoop-1.2.0-CDH3B4依赖hadoop-core-0.20.2-CDH3B4.jar，所以你需要下载hadoop-0.20.2-CDH3B4.... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(128) 评论(0) 推荐(0) 编辑

linux之sed用法

摘要： linux之sed用法sed是一个很好的文件处理工具，本身是一个管道命令，主要是以行为单位进行处理，可以将数据行进行替换、删除、新增、选取等特定工作，下面先了解一下sed的用法sed命令行格式为：sed[-nefri] ‘command’输入文本常用选项：-n∶使用安静(silent)模式。在... 阅读全文

posted @ 2014-03-24 13:09 JamesFan 阅读(119) 评论(0) 推荐(0) 编辑

JamesFan博客

专注海量数据计算

公告