荣锋亮 - 博客园

tbls ci 友好的数据库文档化工具

摘要： tbls 是用golang 编写的数据库文档化工具，当前支持的数据库有pg、mysql、bigquery 此工具同时提供了变更对比、lint 校验，生成是markdown格式的简单使用安装 mac 系统使用brew 安装 brew install k1LoW/tap/tbls brew inst 阅读全文

posted @ 2019-05-27 09:30 荣锋亮阅读(1018) 评论(0) 推荐(0) 编辑

graphql-query-rewriter 无缝处理graphql 变更

摘要： graphql-query-rewriter 是一个graphql schema 变动重写的中间件，可以帮助我们解决在版本变动，查询实体变动是的问题，从目前已知的技术中我们可选的方案有以下处理变动的 directive （client、server 端指令） query rewrite （sche 阅读全文

posted @ 2019-05-27 09:28 荣锋亮阅读(364) 评论(0) 推荐(0) 编辑

使用terraform v0.12 生成gitlab repo 创建部署tf 文件

摘要：以前写过一个使用模版引擎+ rest 接口的模式，生成tf 文件，v0.12 直接提供了方便的json 处理函数我们可以直接结合http 以及templatefile providers 方便的生成文件 rest api 格式因为有一个数据格式的问题，在rest 接口中直接就暴露了parent 阅读全文

posted @ 2019-05-23 14:13 荣锋亮阅读(1031) 评论(0) 推荐(0) 编辑

terraform v0.12.0 发布了

摘要： v0.12.0 相比以前的有好多新的特性，包括语法，以及函数增强，昨天还在折腾的一个json解码的问题，直接使用 v0.12.0 就可以解决了，同时也包含了for 操作处理同时官方文档对于v0.12.0 的使用也有比较详细的介绍，具体的使用可以参考官方文档参考资料 https://github. 阅读全文

posted @ 2019-05-23 12:38 荣锋亮阅读(419) 评论(0) 推荐(0) 编辑

使用terraform 进行gitlab 代码仓库批量迁移

摘要： gitlab 的代码是在文件目录中，这个对于批量迁移很简单，只需要copy 文件夹（但是对于不同gitlab server 可能需要重新设置目录权限）几个问题大批量仓库tf resource问题直接使用默认的不是很好，需要配置的比较多，解决方法，可以通过直接查询数据库数据，使用模版引擎生成tf 阅读全文

posted @ 2019-05-23 11:28 荣锋亮阅读(668) 评论(0) 推荐(0) 编辑

rpmlint 方便的rpm spec 以及rpm 文件检查工具

摘要： rpmlint 可以方便的让我们检查rpm spec 的信息，给予我们提示以及改进，同时也支持对于rpm 文件处理安装 yum install -y rpmlint 使用 spec 检查 rpmlint SPECS/rong.spec 效果 0 packages and 1 specfiles c 阅读全文

posted @ 2019-05-22 18:38 荣锋亮阅读(590) 评论(0) 推荐(0) 编辑

linux patch 简单学习

摘要：使用patch 我们可以方便的进行软件补丁包处理，以下演示一个简单的c 项目补丁处理原代码 app.c #include <stdio.h> int main(){ printf("this is a demo app"); return 0; } 补丁修改代码命名旧的app.c 为app.c. 阅读全文

posted @ 2019-05-22 17:11 荣锋亮阅读(209) 评论(0) 推荐(0) 编辑

rpm 简单 package 创建demo

摘要：安装的工具 yum install -y rpmdevtools 准备环境主要是初始化,会自动创建rpm 包构建需要的目录 rpmdev-setuptree 编写简单的spec cd ~/rpmbuild/SPECS/dalong.spec Name: dalong-demo Version: 1 阅读全文

posted @ 2019-05-22 15:29 荣锋亮阅读(620) 评论(0) 推荐(0) 编辑

fio 文件系统io 性能测试安装使用

摘要：备注：使用的是yum 进行的安装，大家可以使用源码编译安装(centos 7) 安装 yum install -y fio 命令行参数 fio-2.2.8 fio [options] [job options] <job file(s)> --debug=options Enable debug 阅读全文

posted @ 2019-05-22 11:28 荣锋亮阅读(3049) 评论(0) 推荐(0) 编辑

保护 SSH 的三把锁

摘要：转自：https://www.ibm.com/developerworks/cn/aix/library/au-sshlocks/index.html 简介如果需要远程访问计算机并启用了 Secure Shell (SSH) 连接，黑客就会尝试突破您的防线并控制您的计算机，您必须接受这个事实。尽管阅读全文

posted @ 2019-05-22 09:48 荣锋亮阅读(691) 评论(0) 推荐(0) 编辑

redis 设置为只读模式

摘要：数据库的只读模式，对于在系统出现重大故障，但是又不影响用户的查询操作还是很重要的对于redis 设置只读模式需要分不同的场景 master-slave cluster single master-slave 模式这个就比较简单的了，可以使用哨兵自动解决，或者通过命令行 slaveof host 阅读全文

posted @ 2019-05-22 08:57 荣锋亮阅读(9884) 评论(0) 推荐(0) 编辑

ssh：no matching host key type found. Their offer: ssh-dss

摘要：最近突然ssh 服务连接出现 no matching host key type found. Their offer: ssh-dss 以前一直没有问题可能的原因 openssh 服务升级，加密算法支持问题小心被挖矿了（以前一直可以，但是新的不行，主要查看sshd 服务配置）一般解决方法 s 阅读全文

posted @ 2019-05-21 09:59 荣锋亮阅读(7044) 评论(0) 推荐(1) 编辑

virtualenvwrapper 方便的virtualenv 包装

摘要： virtualenvwrapper 是一个方便的virtualenv 包装我们可以用来方便的管理python 的开发环境，同时也支持对于项目的管理安装 pip 安装 pip install virtualenvwrapper 配置环境变量配置 .bashrc or .profile 配置 .b 阅读全文

posted @ 2019-05-21 09:45 荣锋亮阅读(235) 评论(0) 推荐(0) 编辑

High scalability with Fanout and Fastly

摘要：转自：http://blog.fanout.io/2017/11/15/high-scalability-fanout-fastly/ Fanout Cloud is for high scale data push. Fastly is for high scale data pull. Many 阅读全文

posted @ 2019-05-19 21:29 荣锋亮阅读(239) 评论(0) 推荐(0) 编辑

使用singer 转换gitbase 数据到postgresql

摘要： gitbase 是mysql server 的一个实现（主要是用来分析git仓库代码），但是里面好多功能可能并不是很强大（sql 的限制）我们可以通过singer 的tap-mysql 将数据抽取到标准的pg 数据库，可以方便的使用pg 的好多函数参考使用 mysql-postgresql 的可阅读全文

posted @ 2019-05-19 17:05 荣锋亮阅读(229) 评论(0) 推荐(1) 编辑

inertia 服务端驱动的spa 开发框架

摘要： inertia 可以让我们开发server 驱动的单页面应用开发，从目前的github代码来看，代码量并不多，相关的文档也还比较少 introducing-inertia-js 这个连接值得看下参考资料 https://reinink.ca/articles/introducing-inertia 阅读全文

posted @ 2019-05-19 11:22 荣锋亮阅读(447) 评论(0) 推荐(0) 编辑

使用go-mysql-server 开发自己的mysql server

摘要： go-mysql-server是一个golang 的mysql server 协议实现包，使用此工具我们可以用来做好多方便的东西基于mysql 协议暴露自己的本地文件为sql 查询基于mysql 协议灵活的暴露rest 服务的接口查询为sql 基于mysql 协议方便对于一些数据的查询分析基于阅读全文

posted @ 2019-05-18 19:23 荣锋亮阅读(978) 评论(0) 推荐(0) 编辑

edgedb-js 来自官方的js 驱动

摘要：目前对于edgedb 主要还是来自官方的python驱动，目前js 版本的已经快发布了，代码在github 可以看到了同时官方文档也提供了一个关于edgedb 内部的协议说明，结合js 驱动以及文档我们可以方便学习内部协议参考资料 https://edgedb.com/docs/internal 阅读全文

posted @ 2019-05-17 23:33 荣锋亮阅读(206) 评论(0) 推荐(0) 编辑

edgedb 开发环境运行

摘要：以下是一篇来自官方的edgedb 开发环境搭建说明，实际上我以前自己也摸索过一个，基本方法一样，一些是官方的做一个简单的记录预备工具 GNU make version 3.80 or newer; C compiler (GCC or clang); autotools; Python 3.7 阅读全文

posted @ 2019-05-17 23:32 荣锋亮阅读(275) 评论(0) 推荐(0) 编辑

cube.js 学习 cube 连接mongodb 试用

摘要： cube.js 对于mongodb 的连接是通过mongodb bi connector（mysql 协议）处理的，以下为简单的试用安装mongo bi connector 这个玩意用docker 跑起来有点烦，直接试用本地运行，后期制作一个docker 镜像下载地址参考地址 https:// 阅读全文

posted @ 2019-05-16 16:06 荣锋亮阅读(758) 评论(0) 推荐(0) 编辑

cube.js 学习 cube docker-compose 运行

摘要： cube.js 官方为我们也提供了backeng 部署的模型，为了测试方便以下是一个使用docker-compose 运行的demo 项目是一个集成gitbase 的demo，实际可以按照自己的项目修改，同时集成了redis cache,gitbase-web 环境准备项目结构 ├── READM 阅读全文

posted @ 2019-05-16 13:10 荣锋亮阅读(691) 评论(0) 推荐(0) 编辑

处理kubernetes 一些比较难删除的资源

摘要： kubernetes 提供了force 的命令在我们删除资源的时候，但是很多时候还是不可以的一般删除资源的处理命令 kubectl delete <resource> <resourename> --grace-period=0 --force --wait=false 问题一般这个是没有问题阅读全文

posted @ 2019-05-15 10:24 荣锋亮阅读(397) 评论(0) 推荐(0) 编辑

prisma mongodb 试用

摘要： prisma 已经支持mongodb了，我们需要做的就是安装新版本的prisma cli，后然初始化项目使用环境准备安装cli 注意使用新版本（prisma/1.32.2）低版本有坑注意使用新版本（prisma/1.32.2）低版本有坑 npm install -g prisma 初始化一阅读全文

posted @ 2019-05-14 16:04 荣锋亮阅读(692) 评论(0) 推荐(0) 编辑

prisma 已经支持mongodb了

摘要：好久没有关注prisma 的版本迭代了，记得在去年12月份左右的时候，mongodb 在github 上还只是一个草案，官方文档也没有相关的详细介绍，今天留意了下，居然已经支持了，还是很给力的（mysql、postgresql、mongodb）只是prisma 官方文档用起来总觉得有点难找东西，阅读全文

posted @ 2019-05-14 09:29 荣锋亮阅读(483) 评论(0) 推荐(0) 编辑

gitbase cube.js schema 文件项目

摘要： cube.js 进行数据分析，需要我们编写schema 文件，但是因为gitbase 的原因没发进行自动生成，而且还有些问题所以做了一些简单的修改注意直接使用cube-cli 0.9.0 可以自动帮助我们生成大部分schema 还是很方便的参考项目 https://github.com/ron 阅读全文

posted @ 2019-05-13 22:53 荣锋亮阅读(334) 评论(0) 推荐(0) 编辑

cube.js 学习（十一）cube + gitbase 分析git 代码

摘要：这个是一个简单的demo，使用gitbase+cube 分析git 仓库代码需求我们平时使用的gitlab，或者gogs 等git 仓库管理工具，有自己的管理强项，但是对于分析上可能就不是那么强大了这个就需要我们进行git 代码文件级别的分析了，可选的工具很多gitstats 就是一个不错的选阅读全文

posted @ 2019-05-12 22:58 荣锋亮阅读(582) 评论(0) 推荐(0) 编辑

gitbase 集成sqler 进行git 代码分析

摘要： gitbase 是一个方便的git sql 查询引擎，sqler 是一个很不错的sql 转rest api工具，以下是一个简单的集成测试项目使用docker-compose 运行环境准备 docker-compose 文件 version: "3" services: sqler: image: 阅读全文

posted @ 2019-05-12 15:54 荣锋亮阅读(330) 评论(0) 推荐(0) 编辑

dinoql 支持自定义resovler了

摘要： dinoql 当前版本0.4.0 支持自定义reovler 了，使用也比较简单环境准备初始化 yarn init -y 添加依赖 yarn add dinoql graphql-tag package.json npm script 添加当前已经解决了node 环境运行的问题了，所以不需要添加阅读全文

posted @ 2019-05-12 11:26 荣锋亮阅读(176) 评论(0) 推荐(0) 编辑

使用gitbase 分析git 仓库代码

摘要： gitbase 是一个基于golang 开发的开源git 仓库sql 接口查询引擎，基于此工具，我们可以方便的分析git 仓库代码的情况而且可以基于源码的分析，还是很强大的安装直接使用编译的二进制文件即可 https://github.com/src-d/gitbase/releases 配置阅读全文

posted @ 2019-05-11 23:53 荣锋亮阅读(495) 评论(0) 推荐(0) 编辑

通过HttpServletRequest重写+filter 添加header

摘要：问题说明需要做的事情比较简单，就是通过filter 重写httpservletrequest ，同时给予request 添加header 主要是通过HttpServletRequestWrapper 进行处理，代码写死了，只是一个简单的演示。自定义HttpServletRequest（实现Htt 阅读全文

posted @ 2019-05-11 23:31 荣锋亮阅读(2363) 评论(0) 推荐(0) 编辑

s3git 使用git 管理云存储

摘要：使用s3git 我们可以方便的基于git协议进行s3存储数据的版本管理，同时也提供了一个方便的golang 包，我们可以集成到我们的应用中，但是有一点，目前已经没有再更新过了,但是设计理论很不错，实际上现在的 ipfs 与这种就是类似的做法，ipfs 更灵活强大。参考资料 https://git 阅读全文

posted @ 2019-05-11 08:14 荣锋亮阅读(656) 评论(0) 推荐(0) 编辑

TimescaleDB1.3 的新特性——Continuous aggregates: faster queries with automatically maintained materialized views

摘要： One characteristic of time-series data workloads is that the dataset will grow very quickly. Without the proper data infrastructure, these large data 阅读全文

posted @ 2019-05-11 07:54 荣锋亮阅读(528) 评论(0) 推荐(0) 编辑

dinoql 使用nodejs 运行的几个问题

摘要： dinoql 是一个很不错的javascript objects 查询处理方案，基于graphql，当前版本有点问题 node 环境运行 ReferenceError: window is not defined 分析，实际上，查看webpack 的构建使用的是umd 方法打包，应该是可以使用的，但阅读全文

posted @ 2019-05-10 13:52 荣锋亮阅读(302) 评论(0) 推荐(0) 编辑

dinoql 试用

摘要： dinoql 前面有过介绍，详细的参考文档即可，这篇主要是简单使用注意目前dinoql 直接通过node 运行会有window 的问题，有好几种解决方法，后边会说明环境准备项目初始化 yarn init -y 添加dinoql依赖 yarn add dinoql 添加工具依赖主要是解决web 阅读全文

posted @ 2019-05-10 11:35 荣锋亮阅读(340) 评论(0) 推荐(0) 编辑

dinoql 使用graphql 语法查询javascript objects

摘要： dinoql 是一个不错的基于graphql 语法查询javascript objects 的工具包，包含以下特性 graphql 语法（很灵活）安全的访问（当keys 不存在的时候，不会抛出运行时错误）别名支持（可以重命名查询的keys）内置了一些resolvers （类似graphql）阅读全文

posted @ 2019-05-10 10:09 荣锋亮阅读(335) 评论(0) 推荐(0) 编辑

使用git_stats 统计分析git 仓库代码&& 集成webhook

摘要：前几天写过一个使用gitstats 统计分析代码的，但是那个因为开发的问题，对于直接和容器集成是有问题的，统计需要进入容器执行命令，对于自动构建的还不是很方便，所以使用了git_stats 项目使用docker-compose 运行，同时使用docker in docker 模式运行,同时集成we 阅读全文

posted @ 2019-05-08 23:18 荣锋亮阅读(817) 评论(0) 推荐(0) 编辑

使用gitstats分析git 仓库代码

摘要： gitstats 是一个很不错的git 代码提交分析工具，可以帮助我们生成图表统计结果工具文档信息 gitstats http://gitstats.sourceforge.net/ 安装使用centos 系统 yum install gitstats 使用 git clone 代码 git c 阅读全文

posted @ 2019-05-07 12:46 荣锋亮阅读(1050) 评论(0) 推荐(0) 编辑

PostGraphile 4.4 发布，支持real time 查询

摘要：在4.4 之前，real time 是通过插件完成处理的，4.4 直接内置了，还是很方便的功能，总算和其他类似graphql 平台看齐了，使用上还是挺方便的。参考资料 https://www.graphile.org/news/postgraphile-version-4-4/#graphql- 阅读全文

posted @ 2019-05-05 08:56 荣锋亮阅读(438) 评论(0) 推荐(0) 编辑

cube.js 学习（十）cube 来自官方的学习网站

摘要：尽管cube.js 包含了一个doc 站点，但是资料不是很全，同时如果查看了cube github 代码中的一些demo的话，发现还是很不错的但是一些实践没有在文档展现出来，还好我们可以从cube 的产品网站找点有意义的东西参考网站 https://statsbot.co/docs 比如一些好的阅读全文

posted @ 2019-05-04 15:01 荣锋亮阅读(365) 评论(0) 推荐(0) 编辑

Optimize Cube.js Performance with Pre-Aggregations

摘要：转自：https://cube.dev/blog/high-performance-data-analytics-with-cubejs-pre-aggregations/ 可以了解 Pre-Aggregations的处理流程 This is an advanced tutorial. If you 阅读全文

posted @ 2019-05-04 09:32 荣锋亮阅读(499) 评论(0) 推荐(0) 编辑

导航

公告