liutoutou

摘要： spark版本：spark-1.0.2-bin-hadoop2.tgz下载链接：http://www.apache.org/dist/spark/spark-1.0.2/Scala版本：scala-2.10.4.tgz下载链接：http://www.scala-lang.org/files/arch... 阅读全文

摘要： HBASE的安装：安装的软件版本：hbase-0.98.4-hadoop2.tar.gz下载链接：http://www.apache.org/dist/hbase/hbase-0.98.4/1、解压文件,并配置环境变量将下载的hbase-0.98.2-hadoop4.tar.gz解压到/home/h... 阅读全文

摘要： HBase 为用户提供了一个非常方便的使用方式, 我们称之为“HBase Shell”。HBase Shell 提供了大多数的 HBase 命令, 通过 HBase Shell 用户可以方便地创建、删除及修改表, 还可以向表中添加数据、列出表中的相关信息等。备注:写错 HBase Shell 命令时... 阅读全文

摘要： hadoop+hive-0.10.0完全分布式安装方法1、jdk版本：jdk-7u60-linux-x64.tar.gzhttp://www.oracle.com/technetwork/cn/java/javase/downloads/jdk7-downloads-1880260.html2、hi... 阅读全文

摘要： /* 启动MySQL */net start mysql/* 连接与断开服务器 */mysql -h 地址 -P 端口 -u 用户名 -p 密码/* 跳过权限验证登录MySQL */mysqld --skip-grant-tables-- 修改root密码密码加密函数password()update... 阅读全文

摘要： Vi简介1. Vi是一种广泛存在于各种UNIX和Linux系统中的文本编辑程序。2. Vi不是排版程序，只是一个纯粹的文本编辑程序。3. Vi是全屏幕文本编辑器，它没有菜单，只有命令。4. Vi不是基于窗口的，所以，这个多用途编辑程序可以用于在任何类型的终端上编辑各式各样的文件。5. Vi的功能十分... 阅读全文

摘要： 共同点：1.hbase与hive都是架构在hadoop之上的。都是用hadoop作为底层存储区别：2.Hive是建立在Hadoop之上为了减少MapReduce jobs编写工作的批处理系统，HBase是为了支持弥补Hadoop对实时操作的缺陷的项目 。3.想象你在操作RMDB数据库，如果是全表扫描... 阅读全文

摘要： 系统# uname -a # 查看内核/操作系统/CPU信息# head -n 1 /etc/issue # 查看操作系统版本# cat /proc/cpuinfo # 查看CPU信息# hostname # 查看计算机名# lspci -tv # 列出所有PCI设备# lsusb -tv # 列出... 阅读全文

摘要： Hive是一种构建在Hadoop上的数据仓库，Hive把SQL查询转换为一系列在Hadoop集群中运行的MapReduce作业，是MapReduce更高层次的抽象，不用编写具体的MapReduce方法。Hive将数据组织为表，这就使得HDFS上的数据有了结构，元数据即表的模式，都存储在名为meta... 阅读全文

摘要： hive有textFile,SequenceFile,RCFile三种文件格式。textfile为默认格式，建表时不指定默认为这个格式，导入数据时会直接把数据文件拷贝到hdfs上不进行处理。SequenceFile,RCFile格式的表不能直接从本地文件导入数据，数据要先导入到textfile格式的... 阅读全文