摘要: mysql数据实时同步到Elasticsearch业务需要把mysql的数据实时同步到ES,实现低延迟的检索到ES中的数据或者进行其它数据分析处理。本文给出以同步mysql binlog的方式实时同步数据到ES的思路, 实践并验证该方式的可行性,以供参考。mysql binlog日志mysql的bi 阅读全文
posted @ 2020-06-30 11:17 奋斗的一线码农 阅读(5264) 评论(0) 推荐(0) 编辑
摘要: 通过DataX同步数据至Elasticsearch 使用总结 Long值导入时精度丢失,字段类型使用text splitPk使用ID流水号时,导入无进度0% 因Id取最小值递加至最大值,范围间隔大空查询较多 将数据源的查询时间 拆细 ES日期字段创建需指定格式 yyyy-MM-dd HH:mm:ss 阅读全文
posted @ 2020-06-30 11:10 奋斗的一线码农 阅读(6402) 评论(0) 推荐(0) 编辑
摘要: 1、上传OGG_BigData_Linux_x64_19.1.0.0.1.zip到/data/ogg_app/目录下。 2、解压OGG_BigData_Linux_x64_19.1.0.0.1.zip后tar xvf OGG_BigData_Linux_x64_19.1.0.0.1.tar。 3、在 阅读全文
posted @ 2020-06-12 17:09 奋斗的一线码农 阅读(521) 评论(0) 推荐(0) 编辑
摘要: Oracle 12c系列|PDB的创建 转自:https://blog.csdn.net/dev_csdn/article/details/79459017 PDB数据库的创建可以从现存的数据库中复制数据文件,包括种子容器、可插拔数据库、non-CDB数据库,创建时可以使用CREATE PLUGGA 阅读全文
posted @ 2020-06-09 10:35 奋斗的一线码农 阅读(1624) 评论(0) 推荐(0) 编辑
摘要: oracle12c的CDB与PDB oracle12c的新特性Oracle 12C引入了CDB与PDB的新特性,在ORACLE 12C数据库引入的多租用户环境(Multitenant Environment)中,允许一个数据库容器(CDB)承载多个可插拔数据库(PDB)。CDB全称为Containe 阅读全文
posted @ 2020-06-09 09:44 奋斗的一线码农 阅读(1848) 评论(0) 推荐(0) 编辑
摘要: Oracle12C开启归档模式 安装Oracle12C后,默认是没有开启归档模式的,可按以下方式开启。1、查看归档相关信息: archive log list 可以看到数据库未开启归档。2、关闭数据库:shutdown immediate 3、启动数据库至mount状态:startup mount 阅读全文
posted @ 2020-06-08 11:30 奋斗的一线码农 阅读(1087) 评论(0) 推荐(0) 编辑
摘要: oracle创建用户并指定表空间 /*第1步:创建ODPS数据表空间 */create tablespace ODPSlogging datafile '/home/oracle/tablespace_dir/ODPS.dbf'size 100m autoextend onnext 50m maxs 阅读全文
posted @ 2020-06-08 10:00 奋斗的一线码农 阅读(1604) 评论(0) 推荐(0) 编辑
摘要: 使用OGG同步Oracle12C数据至Kafka https://blog.csdn.net/andyguan01_2/article/details/86716388 一、环境操作系统:CentOS6.9软件版本:Zookeeper3.4.13,Kafka2.1.0集群架构(Zookeeper和K 阅读全文
posted @ 2020-06-05 17:57 奋斗的一线码农 阅读(1572) 评论(0) 推荐(0) 编辑
摘要: Linux 安装OGG for BigData 一、环境操作系统:CentOS6.9软件版本:OGG BigData 12.2.0.1二、安装步骤1、下载OGG BigData 12.3.2.1.1的安装文件打开以下网址:https://www.oracle.com/technetwork/midd 阅读全文
posted @ 2020-06-05 14:50 奋斗的一线码农 阅读(1369) 评论(0) 推荐(0) 编辑
摘要: ogg静默安装同步oracle数据 注意ogg12.2和oracle12.2会有版本不兼容,ogg版本向下兼容,所以要同步oracle12C数据ogg版本起码要是12.3。 1.上传压缩包:191004_fbo_ggs_Linux_x64_shiphome.zip 2.解压:unzip 191004 阅读全文
posted @ 2020-06-05 09:29 奋斗的一线码农 阅读(1588) 评论(0) 推荐(0) 编辑