随笔分类 -  docker-compose

上一页 1 2 3 4 5 6 7 ··· 15 下一页

postgres s3 fdw 试用
摘要:s3 是一个很不错的文件存储系统,以下是一个简单的试用s3 fdw (使用https://github.com/smomni/s3_fdw_py)此版本兼容pg11 同时使用了python3 开发,使用multicorn (很强大) 环境准备 说明 s3_fdw 的docker 镜像以及原有的已经p 阅读全文

posted @ 2020-02-25 19:45 荣锋亮 阅读(776) 评论(0) 推荐(0) 编辑

cube.js 集成 elasticsearch 的一种变通方法
摘要:前边有介绍过cube.js 对于es 的支持(以及关于opendistro elasticsearch的bug)实际上我们可以通过 postgres 的elasticsearch-fdw 迂回式的解决此问题,对于需要的分析都可以通过pg 的fdw 操作解决 环境准备 docker-compose 文 阅读全文

posted @ 2020-02-25 09:35 荣锋亮 阅读(422) 评论(0) 推荐(0) 编辑

使用postgres_fdw 串接elasticsearch fdw
摘要:目的很简单,主要还是elasticsearch fdw 的镜像太大,为了减少all-in-one 的大小,实现一个层级的数据模型 环境准备 docker-compose 文件 version: "3" services: elasticsearch: image: elasticsearch:7.6 阅读全文

posted @ 2020-02-25 09:12 荣锋亮 阅读(1001) 评论(0) 推荐(0) 编辑

postgres elasticsearch fdw 学习
摘要:es 的fdw 是基于multicorn(python扩展)开发的,官方的multicorn 版本已经很老了,对于pg 的高版本是不支持的 但是已经有人提供了支持新版本的包了,还是很不错的,基于python 开发fdw 简单方便 multicorn 支持的版本 apt-get install pos 阅读全文

posted @ 2020-02-24 18:52 荣锋亮 阅读(1461) 评论(0) 推荐(0) 编辑

postgres pg_cron 扩展连接远程pg server
摘要:pg_cron 是一个简单但是使用还算灵活的pg定时任务扩展,以下是一个remote insert 数据的简单试用 环境准备 docker-compose 注意demo,包含了好几个组件,cstore 以及graphql-engine 可以不用管,但是三者集成起来将会很强大的 version: '3 阅读全文

posted @ 2020-02-24 10:23 荣锋亮 阅读(589) 评论(0) 推荐(0) 编辑

使用 cstore fdw 加速hasura graphql-engine的查询
摘要:列式存储在数据分析(olap)上有天然的优势,以下是使用cstore fdw + hasura graphql-engine 加速 数据的分析 环境准备 docker-compose 文件 version: '3' services: graphql-engine: image: hasura/gr 阅读全文

posted @ 2020-02-24 09:22 荣锋亮 阅读(358) 评论(0) 推荐(0) 编辑

pgspider cstore fdw docker 镜像试用
摘要:cstore_fdw 是citus 团队开源的pg 列式存储扩展,可以加速我们的数据分析,关于列式存储以及行式存储的比较 可以参考下边连接的动图(来自clickhouse 官方网站) https://clickhouse.tech/docs/en/ 以下是关于cstore fdw 的简单使用 环境准 阅读全文

posted @ 2020-02-24 09:07 荣锋亮 阅读(422) 评论(0) 推荐(0) 编辑

pgspider clickhouse fdw docker 镜像的几点说明
摘要:clickhouse 的fdw 是基于odbc 开发的,同时也需要依赖libclickhouse 以下是对于构建中的一些说明 预备说明 实际上大部分官方文档已经提供了 odbc 说明 需要下载编译好的,地址https://github.com/ClickHouse/clickhouse-odbc/r 阅读全文

posted @ 2020-02-22 12:47 荣锋亮 阅读(560) 评论(0) 推荐(0) 编辑

pgspider clickhouse fdw 试用
摘要:昨天有构建过一个clickhouse 的fdw docker 镜像,今天测试下 环境使用docker-compose 运行,clickhouse 同样也是 环境准备 docker-compose 环境 version: "3" services: server: image: yandex/clic 阅读全文

posted @ 2020-02-22 12:30 荣锋亮 阅读(668) 评论(0) 推荐(0) 编辑

pgspider griddb fdw +plv8 集成使用
摘要:以下是一个简单的griddb fdw 与plv8 的集成,同时添加了node require 模块的支持,可以实现灵活的系统扩展 pgspider plv8 docker镜像制作 dockerfile FROM dalongrong/pgspider:base as build WORKDIR /a 阅读全文

posted @ 2020-02-12 18:55 荣锋亮 阅读(431) 评论(0) 推荐(0) 编辑

griddb 集群简单学习
摘要:griddb集群可以使用多种方式部署 多播集群 静态配置(固定列表) url 地址provider 以下是一个简单的基于固定node 节点列表的模式部署 环境准备 为了方便使用docker-compose 部署,同时使用估计ip 分配模式 docker-compose 文件 version: "3" 阅读全文

posted @ 2020-02-11 13:06 荣锋亮 阅读(928) 评论(0) 推荐(0) 编辑

pgspider redis fdw pub && sub 试用
摘要:redis fdw 封装的redis 操作功能还是比较强大的,同时支持通过insert 的方式publish messag 以下是一个简单的学习(但是按照原理应该也是可以sub的 (select message,细节可以看看源码)) 环境准备 dockerc-compose 文件 version: 阅读全文

posted @ 2020-02-11 10:28 荣锋亮 阅读(400) 评论(0) 推荐(0) 编辑

pgspider redis fdw 试用
摘要:目前redis 的fdw有好几个,github 上有一个start 比较高的,但是对于新版本pg 支持不好,目前使用了 https://github.com/nahanni/rw_redis_fdw,以下是docker 镜像的构建以及试用 dockerfile 老样子基于base 镜像构建 FROM 阅读全文

posted @ 2020-02-11 09:11 荣锋亮 阅读(1059) 评论(0) 推荐(0) 编辑

pgspider tds fdw sql server docker 镜像试用
摘要:前边有制作过一个tds 的fdw,以下是一个简单的试用 环境准备 docker-compose 文件 使用sql server Linux 版本 version: "3" services: pg-tds: image: dalongrong/pgspider:tds ports: - "5432: 阅读全文

posted @ 2020-02-09 22:23 荣锋亮 阅读(405) 评论(0) 推荐(0) 编辑

使用 pgspider griddb fdw 让griddb 支持hasura graphql-engine
摘要:原理很简单,就是通过griddb fdw 暴露griddb 的数据操作为正常的pg 操作,后然就可以使用hasura graphql-engine 了 参考环境准备 version: "3" services: graphql-engine: image: hasura/graphql-engine 阅读全文

posted @ 2020-02-07 16:10 荣锋亮 阅读(256) 评论(0) 推荐(0) 编辑

pgspider griddb 试用
摘要:前边有构建一个简单的pgspider griddb fdw 的docker 镜像,以下是一个简单的试用 一些说明 关于pgspider griddb fdw 的构建目前4.3 有bug,使用的是4.2版本的,同时对于java 链接使用member ip,不是广播地址ip 环境准备 griddb 自己 阅读全文

posted @ 2020-02-07 15:38 荣锋亮 阅读(357) 评论(0) 推荐(0) 编辑

pgspider influxdb 扩展使用以及docker 镜像构建说明
摘要:influxdb 是官方提供的fdw,对于influxdb 的访问是通过cgo 直接到处golang 的调用为c 调用(实际上也有一个直接使用golang 编写pg 扩展的项目plgo) 一些说明 对于pgspider 的构建是通过一个base 镜像构建的,但是以为依赖golang 所以提供了一个额 阅读全文

posted @ 2020-02-06 15:25 荣锋亮 阅读(586) 评论(0) 推荐(0) 编辑

pgspider 其他扩展的集成
摘要:目前的测试,pgspider 对于pg 的侵入不大,很多已有的pg扩展都是可以使用的,所以基于比较常用的 添加了mongdb,sql server 等的容器镜像,构建比较简单,都是基于现有构建的base mongdb FROM dalongrong/pgspider:base as build WO 阅读全文

posted @ 2020-02-05 17:36 荣锋亮 阅读(335) 评论(0) 推荐(0) 编辑

pgspider 简单试用
摘要:前边已经构建好了,关于sqlite,mysql,以及默认的pg 的扩展,以下是一个简单的学习试用 环境准备 为了简单目前只测试关于pg的,后边会学习关于mysql的 docker-compose 文件 version: "3" services: pg-core: image: dalongrong 阅读全文

posted @ 2020-02-05 13:46 荣锋亮 阅读(413) 评论(0) 推荐(0) 编辑

pgspider sqlite mysql docker 镜像
摘要:昨天有基于官方制作了只包含core 的docker 镜像,同时我们也需要sqlite 以及mysql的 所以提取了一个base 镜像,为了减少镜像的大小,使用了多阶段构建,方便后边sqlte 以及mysql 镜像的更新,以及重新构建,对于influxdb的docker 镜像,后边也会提供 base 阅读全文

posted @ 2020-02-05 11:29 荣锋亮 阅读(820) 评论(0) 推荐(0) 编辑

上一页 1 2 3 4 5 6 7 ··· 15 下一页

导航