摘要:
cron是一个Linux下的后台进程,用来定期的执行一些任务。因为我用的是Ubuntu,所以这篇文章中的所有命令也只能保证在Ubuntu下有效,但其他系统应该也差不多。想要让cron执行你指定的任务,首先就要编辑crontab文件。crontab是一个文本文件,用来存放你要运行的命令。你可以以下命令... 阅读全文
摘要:
set -x与set +x指令上传者:huahuafdy我也要“分享赚钱”2014/6/19关注(210)评论(0)声明:此内容仅代表网友个人经验或观点,不代表本网站立场和观点。 set -x与set +x指令 用于脚本调试。set是把它下面的命令打印到屏幕 set -x 是开启 set +x... 阅读全文
摘要:
CentOS设置程序开机自启动的方法作者:朱 茂海 /分类:系统管理字号:L M S在CentOS系统下,主要有两种方法设置自己安装的程序开机启动。1、把启动程序的命令添加到/etc/rc.d/rc.local文件中,比如下面的是设置开机启动httpd。#!/bin/sh## This script... 阅读全文
摘要:
1.配置RESOURCES节点有时会遇到maven打包后找不到资源文件了,其实这时候路径发生了变化,为了确保打包后路径不发生变化,指定一个固定的路径,请看下面配置 ... true src/main/command run.bat... 阅读全文
摘要:
环境:cdh5.1.0jdk1.7 org.apache.maven.plugins maven-compiler-plugin 1.7 1.7 maven-assembly-plugin 2.2 ... 阅读全文
摘要:
如何将maven项目打包成可执行的jar分类:maven2010-12-17 10:1810411人阅读评论(2)收藏举报jarmavenassemblyjava方法一:将项目及所依赖的所有jar包打包成一个jar。1、pom.xml添加assembly插件2、执行mvn assembly:asse... 阅读全文
摘要:
iBatis简介:iBatis是apache的一个开源项目,一个O/R Mapping解决方案,iBatis最大的特点就是小巧,上手很快。如果不需要太多复杂的功能,iBatis是能够满足你的要求又足够灵活的最简单的解决方案,现在的iBatis已经改名为Mybatis了。官网为:http://www.... 阅读全文
摘要:
环境:hadoop-2.3.0-cdh5.1.0centos 6.5 x64win7 eclipse4.30. 前提条件 ,jdk,maven要安装好。1、下载hadoop,用winRAR解压。(路径不能有空格)D:\JavaDev\hadoop-2.3.0-cdh5.1.02. 配置win7环境变... 阅读全文
摘要:
Hive之数据查询发布于:2013 年 10 月 11 日由Aaron发布于:Hive一,排序和聚合对于排序有两种方式,一种是order by 一种是sort byorder by 会对所有的数据进行排序,所以最后会只有一个reducer来处理,如果数据量非常大,效率会非常差劲sort by是部分排... 阅读全文
摘要:
先前条件:要先安装好MYSQL下载:hive-0.12.0-cdh5.1.0.tar.gz,并解压到安装目录1.添加环境变量修改/etc/profile文件。#vi /etc/profile增加export HIVE_HOME=/hadoop/hadoop/hive修改exportPATH=$JAV... 阅读全文
摘要:
出处:http://www.taobaotest.com/blogs/qa?bid=13894引言HBase提供了Java Api的访问接口,掌握这个就跟Java应用使用RDBMS时需要JDBC一样重要,本文将继续前两篇文章中blog表的示例,介绍常用的Api。练习前的准备工作创建一个Maven工程... 阅读全文
摘要:
1.检查是否有安装安装之前应该先查询系统是否自在了mysql的软件包 rpm -qa|grep -i mysql如果有的话需要先删除 rpm -e 软件名 --nodeps2.下载安装包cd/usr/local/srcwgethttp://cdn.mysql.com/Downloads/MySQL-... 阅读全文
摘要:
分三步:1. 添加环境变量2.编辑hbase-env.sh文件3.编辑hbase-site.xml 文件前提条件是安装好hadoop,下面展开说明1. 添加环境变量export HBASE_HOME=/usr/local/cdh/hbaseexport PATH=$PATH:$PIG_HOME/bi... 阅读全文
摘要:
cdh版与0.98版的配置一样1.环境master:c1slave:c2,c3CentOS 6.5 x64 ,hadoop-2.3.0-cdh5.1.0,zookeeper-3.4.5-cdh5.1.0下载地址:http://archive.cloudera.com/cdh5/cdh/5/2. 前提... 阅读全文
摘要:
1.环境主机名IP地址JDKZooKeepermyidc1192.168.58.1291.7.0_11server.11c2192.168.58.1301.7.0_11server.22c3192.168.581311.870_11server.332.文件配置 (每个节点都要配置)tar -zxv... 阅读全文
摘要:
eclipse提示框的背景颜色使用的是系统的提示框颜色配置,在windows下为黄色,但在Ubuntu12.04(gnome)下却是黑色,造成提示内容很难看清。在eclipse中我们是无法修改这个颜色的配置的,只能通过修改系统的颜色配置。在ubuntu11.10以前,我们是可以能过自定义系统外观来修... 阅读全文
摘要:
Ubuntu系统默认是不允许用户以root身份登录的,在网上找到的方法如下:1、首先设置root密码,利用现有管理员帐户登陆Ubuntu,在终端执行命令:sudo passwd root,接着输入密码和root密码,重复密码。这样就有了可用的root用户。2、默认情况是不允许用root帐号直接登录图... 阅读全文
摘要:
先参考:《hadoop-2.3.0-cdh5.1.0伪分布安装(基于centos)》http://blog.csdn.net/jameshadoop/article/details/39055493注:本例使用root用户搭建一、环境操作系统:CentOS6.564位操作系统注:Hadoop2.0以... 阅读全文
摘要:
出处:http://golab.blog.51cto.com/7876557/1365883一、Hadoop基本介绍Hadoop优点1.高可靠性:Hadoop按位存储和处理数据2.高扩展性:Hadoop是在计算机集群中完成计算任务,这个集群可以方便的扩展到几千台3.高效性:Hadoop能够在节点之间... 阅读全文
摘要:
编写不易,转载请注明(http://shihlei.iteye.com/blog/2084711)!说明 本文搭建Hadoop CDH5.0.1 分布式系统,包括NameNode ,ResourceManger HA,忽略了Web Application Proxy 和Job HistorySe... 阅读全文