2016年8月23日

Sqoop-1.4.6 Merge源码分析与改造使其支持多个merge-key

摘要： Sqoop中提供了一个用于合并数据集的工具sqoop-merge。官方文档中的描述可以参考我的另一篇博客Sqoop-1.4.5用户手册。 Merge的基本原理是，需要指定新数据集和老数据集的路径，根据某个merge-key，在reduce过程中，优先取出新数据集中的数据，共... 阅读全文

posted @ 2016-08-23 23:22 吴一达 阅读(960) 评论(0) 推荐(1) 编辑

Docker简介/安装/使用

摘要： 什么是Docker？docker是一个开源的应用容器引擎，系统级的轻量虚拟化技术。应用程序的自动化部署解决方案，能够迅速创建一个容器，并在容器上部署和运行应用程序，并通过配置文件可以轻松实现应用程序的自动化安装、部署和升级。docker使用Go语言编写，用cgroup实现资源隔离，容器技术采用LX... 阅读全文

posted @ 2016-08-23 18:01 吴一达 阅读(451) 评论(0) 推荐(0) 编辑

Docker学习笔记1：CentOS7 下安装Docker

摘要： 本文内容摘自官网：https://docs.docker.com/engine/installation/linux/centos/#/create-a-docker-group注：本文是介绍Linux 上的分布式版本CentOs上安装.一、安装前的准备工作Docker 需要安装在64位系统的Ce... 阅读全文

posted @ 2016-08-23 10:52 吴一达 阅读(183) 评论(0) 推荐(0) 编辑

导航