随笔分类 - 数据运维
摘要:原文:有两个网卡的机器,如何强制外网访问时,用其中某个网卡?(双网卡路由配置) - 宏宇 - 博客园 (cnblogs.com) 假设两网卡为 A网卡 IP地址10.1.1.1 掩码255.255.255.0 网关10.1.1.254 ,通过A网卡可以上互联网 B网卡 IP地址169.254.254
阅读全文
摘要:原文:Kettle的安装及简单使用 - 阿涛必须奥利给 人生如逆旅,你我亦行人。 Kettle 的 安装 及 简单使用一、kettle概述1、什么是kettle Kettle 是一款开源的 ETL 工具,纯 java 编写,可以在Window、Linux、Unix上运行,绿色无需安装,数据抽取高效稳
阅读全文
摘要:原文:mysql集群__院长大人_的博客-CSDN博客_mysql集群 下载 mysql 镜像 docker pull mysql:5.7 3.3.2 主节点创建3.3.2.1 创建 Master 实例并启动 docker run -p 3307:3306 --name mysql-master \
阅读全文
摘要:方案一: Yum 安装Docker 1.安装依赖 yum install -y yum-utils device-mapper-persistent-data lvm2 2.添加Docker 软件的包源 yum-config-manager \ --add-repo \ https://downlo
阅读全文
摘要:原文链接 :DataX Kettle 使用场景的对比 https://blog.csdn.net/lzhcoder/article/details/120830522 拓展阅读Datax与Sqoop的对比 参考文章data 调研及 增量更新 的思路 - tianyafu - 博客园 基于现在接触的E
阅读全文
摘要:Sqoop主要特点 1、可以将关系型数据库中的数据导入 hdfs、hive 或者 hbase 等 hadoop 组件中,也可将 hadoop 组件中的数据导入到关系型数据库中; 2、sqoop 在导入导出数据时,充分采用了 map-reduce 计算框架,根据输入条件生成一个 map-reduce
阅读全文
摘要:原文: 基于现在接触的ETL工具(dataX 和 kettle)做个小总结 现阶段需要做数据库同步工作, 目前调研了两个工具 dataX 和 kettle 目前虽然环境使用的是 kettle jenkins 调度平台方案, 但是多多少少会有一些不太令人满意的地方,但应该算是满足大部分需求了,先暂时这
阅读全文