随笔分类 -  大数据

DataX 离线跨网场景的实施配置
摘要：配置仅限于跨不同网情况，网络互通情况方案和配置会更简单一点 内网A：MySql数据转换成Csv { "job": { "setting": { "speed": { "channel":1 } }, "content": [ { "reader": { "name": "mysqlreader", 阅读全文
posted @ 2020-03-10 18:28 leeolevis 阅读(615) 评论(0) 推荐(0) 编辑
使用Docker快速搭建ELK环境
摘要：今天由于Win系统的笔记本没带回家，其次Docker在非Linux系统下都需要安装额外的软件去镜像才行 所以感觉没有差别，先直接用Mac搭建一遍呢， 本篇部分命令和配置内容为摘抄 Mac下使用Docker快速搭建ELK环境 一、首先我们在Docker官网下载Mac下的安装镜像 这儿我下好了也安装好了 阅读全文
posted @ 2018-01-01 11:41 leeolevis 阅读(4768) 评论(0) 推荐(1) 编辑
使用Logstash来实时同步MySQL数据到ES
摘要：上篇讲到了ES和Head插件的环境搭建和配置，也简单模拟了数据作测试 本篇我们来实战从MYSQL里直接同步数据 一、首先下载和你的ES对应的logstash版本，本篇我们使用的都是6.1.1 下载后使用logstash-plugin install logstash-input-jdbc 命令安装j 阅读全文
posted @ 2017-12-24 17:14 leeolevis 阅读(18653) 评论(2) 推荐(1) 编辑
ElasticSearch和ElasticSearch Head环境搭建和数据模拟
摘要：首先elasticsearch-6.0.0\bin目录下运行elasticsearch服务 修改elasticsearch-6.0.0\elasticsearch.yml文件 在文件最后加入下面代码，设置跨域 http.cors.enabled: true http.cors.allow-origi 阅读全文
posted @ 2017-12-23 11:19 leeolevis 阅读(1781) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示