勤奋的园

摘要： JDK提供了几个很实用的工具，如下： jinfo：观察运行中的java程序的运行环境参数：参数包括Java System属性和JVM命令行参数，java class path等信息。命令格式：jinfo 进程pidjps：用来显示本地的java进程，可以查看本地运行着几个java程序，并显示他们的进 阅读全文

摘要： 背景说明 Elasticsearch是一个基于Apache Lucene(TM)的开源搜索引擎。无论在开源还是专有领域，Lucene可以被认为是迄今为止最先进、性能最好的、功能最全的搜索引擎库。 Elasticsearch 是一种NoSQL数据库（非关系型数据库），和常规的关系型数据库（比如：MyS 阅读全文

摘要： 1 . top : 用于实时显示 process 的动态 PID：进程的ID USER：进程所有 PR：进程的优先级别，越小越优先被执 VIRT：进程占用的虚拟内 RES：进程占用的物理内 SHR：进程使用的共享内 S：进程的状态,S表示休眠，R表示正在运行，Z表示僵死状态，N表示该进程优先值为负 阅读全文

摘要： 1. 设置hive以本地模式运行(即使当前用户是在分布式模式或伪分布式模式下执行也使用这种模式) set hive.exec.model.local.auto=true; 若想默认使用这个配置,可以将这个命令添加到$HOME/.hiverc文件中 2. 当频繁使用hadoop dfs命令时，最好为这 阅读全文

摘要： 数据仓库，英文名称为Data Warehouse，可简写为DW或DWH。数据仓库，是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。 关于其定义，数据仓库之父比尔·恩门（Bill Inmon）在1991年出版的“Building the Data Warehouse”（《建立数据仓库》 阅读全文

摘要： 磁带文件系统时代。数据库最初的理念是采用单一数据源来支持所有用途。数据库这一概念是从管理主文件的磁带文件系统发展而来的。磁带可以存储较大的数据量，而且磁带上存储的记录是大小可变的，但磁带有很多缺陷。缺陷之一是磁带上的文件必须是按顺序访问，这就意味着分析师在寻找一条记录时不得不按照顺序搜索整个文件。磁 阅读全文

摘要： 执行任务时报以下错： Safe mode is ON in r2n03/192.168.0.43:8020ERROR to execute safemode cmd: get on r1n08/192.168.0.38:8020 , Exception = java.net.ConnectExcep 阅读全文

摘要： 举例a、b表： bId bNum 1 20 2 30 aId aNum 1 10 2 20 3 30 left join以左表为准 select * from a left join b on a.aId=b.bId; aId aNum bId bNum 1 10 1 20 2 20 2 30 3 阅读全文

摘要： 1. hive 表及数据准备 建表，并插入初始数据。向表中插入 hive> use test; hive> create table kwang_test (id int, name string); hive> insert into kwang_test values(1,'kwang'); h 阅读全文

摘要： 通用参数 import export 通用通用参数选项 含义说明–connect 指定JDBC连接字符串–connection-manager 指定要使用的连接管理器类–driver 指定要使用的JDBC驱动类–hadoop-mapred-home 指定$HADOOP_MAPRED_HOME路径–h 阅读全文