随笔分类 -  Hadoop

Hadoop常用命令
摘要：启动Hadoop 进入HADOOP_HOME目录。 执行sh bin/start-all.sh 关闭Hadoop 进入HADOOP_HOME目录。 执行sh bin/stop-all.sh 1、查看指定目录下内容 hadoop dfs –ls [文件目录] eg: hadoop dfs –ls /u 阅读全文
posted @ 2014-09-09 00:11 Tom19971220 阅读(6) 评论(0) 推荐(0) 编辑
hadoop面试题集锦
摘要：Q1. Name the most common InputFormats defined in Hadoop? Which one is default ? Following 2 are most common InputFormats defined in Hadoop - TextInput 阅读全文
posted @ 2014-07-31 23:27 Tom19971220 阅读(0) 评论(0) 推荐(0) 编辑
基于HBase的手机数据备份系统
摘要：基于HBase实现的手机数据备份系统，实现了手机关键信息的备份，如短信、联系人等。 包括服务器端(Server)和客户端(Client) Server运行环境：Hadoop+HBase+Tomcat Client运行环境: Eclipse+Android2.3 该系统可以用于毕业设计 系统源码地址： 阅读全文
posted @ 2014-05-08 13:59 Tom19971220 阅读(0) 评论(0) 推荐(0) 编辑
hadoop ipc原理简介
摘要：一、为什么不使用RMI 最最主要还是因为RMI的可控性不够灵活，其次数据序列化格式不够精简。 这两点可以在实际编程中慢慢体会，ipc例子可以在网上搜到。 二、主要技术元素 包含四点：1、序列化对象(数据传输的核心) 2、反射 3、动态代理 4、Socket传输 三、原理 主要说明实现原理，忽略网络异 阅读全文
posted @ 2014-04-18 23:17 Tom19971220 阅读(8) 评论(0) 推荐(0) 编辑
secureCRT 向centos发送文件
摘要：首先在secureCRT使用：rz 命令，然后选择文件。即可传输。 从centos向windows传输数据，可以用sz命令。如：sz abc.txt 。即可把abc.txt 传输到windows中。 阅读全文
posted @ 2014-03-16 14:13 Tom19971220 阅读(0) 评论(0) 推荐(0) 编辑
在Hadoop中，从MapFile文件中读取指定键值的元素
摘要：在本示例中，我们实现了一个继承自Configured基类，并且实现了Tool接口的ReadMapfile类。这样ReadMapfile类就成为可以在Hadoop运行环境中执行的应用类。 一）准备阶段 Configured基类 Configured基类实现了Configurable接口。Configu 阅读全文
posted @ 2014-02-27 21:53 Tom19971220 阅读(2) 评论(0) 推荐(0) 编辑

个人网站
点击右上角即可分享
微信分享提示