03 2019 档案

hadoop三个配置文件的参数含义说明
摘要：1 获取默认配置 配置hadoop，主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件，默认下来，这些配置文件都是空的，所以很难知道这些配置文件有哪些配置可以生效，上网找的配置可能因为各个hadoop版本不同，导致无法生效。浏览更多的配置，有 阅读全文
posted @ 2019-03-30 23:27 火军刀 阅读(858) 评论(0) 推荐(0) 编辑
一个完整的hadoop程序开发过程
摘要：目的 说明hadoop程序开发过程 前提条件 ubuntu或同类OS java1.6.0_45 eclipse-indigo hadoop-0.20.2 hadoop-0.20.2-eclipse-plugin.jar 各项版本一定要匹配，否则出了问题都不知道是什么原因。 配置 配置Java 详见： 阅读全文
posted @ 2019-03-29 23:19 火军刀 阅读(3975) 评论(0) 推荐(0) 编辑
hadoop-1.0.1根目录下的jar包
摘要： 阅读全文
posted @ 2019-03-29 19:53 火军刀 阅读(205) 评论(0) 推荐(0) 编辑
ubuntu linux修改文件所属用户(owner属主)和组(groud属组、用户组)
摘要：使用chown命令可以修改文件或目录所属的用户： 命令格式：sudo chown 用户 目录或文件名 例如：sudo chown -R griduser /home/dir1 (把home目录下的dir1目录的拥有者改为griduser用户) 参数 -R 是递归设置各级子目录 使用chgrp命令可以 阅读全文
posted @ 2019-03-29 15:00 火军刀 阅读(2357) 评论(0) 推荐(1) 编辑
eclipse与hadoop-eclipse-plugin之间的版本对应关系
摘要：eclipse与hadoop-eclipse-plugin之间，版本互相不兼容，或者说，版本要求严格。 把hadoop-eclipse-plugin复制到eclipse的plugins目录下以后，如果不匹配，eclipse中就不会出现插件界面，而且不会报错，没有反应（没有出现菜单）就说明有问题，如果 阅读全文
posted @ 2019-03-29 14:30 火军刀 阅读(844) 评论(0) 推荐(0) 编辑
官网列表
摘要：开发语言类： Java Linux工具类： 要从windows往Linux复制文件，似乎没有什么别的方法，只能用工具。 WinSCP 是一个 Windows 环境下使用 SSH 的开源图形化 SFTP 客户端，同时支持 SCP 协议。它的主要功能就是在本地与远程计算机间安全地复制文件。这是一个开源的 阅读全文
posted @ 2019-03-16 23:39 火军刀 阅读(170) 评论(0) 推荐(0) 编辑
如何解决PuTTY中文乱码的问题
摘要：我们可以使用PuTTY这个工具在一台机器上对其它linux系统进行连接和操作。如果大家都在linux系统中，可以在终端中用ssh ip或主机名直接连接。 如果要在windows中对远程的linux系统（包括本机上的虚拟机）进行管理，putty是我们可以使用的工具之一。 windows下的putty有 阅读全文
posted @ 2019-03-16 21:36 火军刀 阅读(2349) 评论(0) 推荐(0) 编辑
Eclispe最常用的几个快捷键
摘要：熟练使用快捷键可以在很大程度上提高我们的工作效率，Eclipse的快捷键很多,但是常用的也就那么几个,下面说下Eclispe最常用的几个快捷键: Eclipse的快捷键组合可在Eclipse按下ctrl+shift+L查看。 1. ctrl+shift+r：打开资源 这可能是所有快捷键组合中最省时间 阅读全文
posted @ 2019-03-13 15:54 火军刀 阅读(395) 评论(0) 推荐(0) 编辑
ubuntu下安装thrift
摘要：configure: error: "Error: libcrypto required." 阅读全文
posted @ 2019-03-06 15:01 火军刀 阅读(227) 评论(0) 推荐(0) 编辑
ubuntu下安装oracle
摘要：开源的世界挺有意思，安装oracle如此复杂。 主要分为四个大步骤： Java的安装 Oracle安装前的准备 Oracle的安装环境配置 安装Oracle 1、Java安装（略） 这一步网上有好多教程，大家可以自行安装。 验证Java是否安装成功： 2、Oracle安装前的准备 （1）安装Orac 阅读全文
posted @ 2019-03-06 14:44 火军刀 阅读(2953) 评论(1) 推荐(0) 编辑
ubuntu下安装mysql
摘要：ubuntu自带了mysql，使用apt-get安装即可 用以下命令检查MySQL是否运行： 我这里显示 说明安装成功。 安装完毕以后，用以下命令登录 会提示 此时，打开/etc/mysql/debian.cnf文件，注意，不是mysql.cnf 默认的user是debian-sys-maint，m 阅读全文
posted @ 2019-03-06 01:03 火军刀 阅读(339) 评论(0) 推荐(0) 编辑
Hive的安装
摘要：要访问web接口http://192.168.1.8:9999/hwi/，必须先启动bin/hive --service hwi 阅读全文
posted @ 2019-03-05 21:51 火军刀 阅读(111) 评论(0) 推荐(0) 编辑
ubuntu下能ping通ssh不通的解决思路
摘要：1.首先看看是否能ping通，如果ping不通可能就要考虑网线、路由等问题了； 2.看防火墙是否关闭，sshd是否开启 3.ssh -v 服务器的ip号，根据提示寻找可能的问题； 我的问题在这一步之后解决了，ssh通了，却不知道原因。 4.service sshd stop /usr/sbin/ss 阅读全文
posted @ 2019-03-04 00:41 火军刀 阅读(4245) 评论(0) 推荐(0) 编辑
ubuntu下pig报错ERROR 2999: Unexpected internal error. Failed to create DataStorage的解决
摘要：2019-03-04 00:10:03,998 [main] ERROR org.apache.pig.Main - ERROR 2999: Unexpected internal error. Failed to create DataStorage.bashrc中要按照以下内容设置，此错误的出现 阅读全文
posted @ 2019-03-04 00:21 火军刀 阅读(268) 评论(0) 推荐(0) 编辑
Ubuntu系统中各种文件颜色的含义
摘要：蓝 色：文件夹 ，ls -l或ll时可以看到权限部分的第1个字母是d红色：压缩文件 绿色：可执行文件，包括jar白色：文本文件红色闪烁：错误的符号链接淡蓝色：符号链接黄色：设备文件灰色:其它文件 可以用 命令查看 阅读全文
posted @ 2019-03-02 07:33 火军刀 阅读(2583) 评论(0) 推荐(0) 编辑
Hbase建表时遇到的问题This could be a sign that the server has too many connections
摘要：Hbase创建表时遇到以下错误： ERROR: org.apache.hadoop.hbase.ZooKeeperConnectionException: HBase is able to connect to ZooKeeper but the connection closes immediat 阅读全文
posted @ 2019-03-02 02:00 火军刀 阅读(150) 评论(0) 推荐(0) 编辑