随笔分类 - 数据库灾难恢复

fastdfs 集群异常修复实践

摘要：实际上可能会有更好的技术方案，只是从目前系统玩法来法，以下是一个不错的对于业务系统影响最小的方法原有参考架构设计简单说明：很简单，nginx +fastdfs module+ fastdfs 集群的玩法，文件基于sdk 进行上传，主要的场景是图片服务（当然其他模式也是支持的）故障问题因为一台阅读全文

posted @ 2021-11-13 15:06 荣锋亮阅读(323) 评论(0) 推荐(0) 编辑

记一次mysql 异常停电数据库损坏恢复的方法

摘要：mysql innodb 引擎损坏恢复的参考资料还是很多的，以下记录一个问题的处理问题异常停电，mysql 重启异常，innodb tablespace 异常一般常见的解决方法备份，删除ibdata1,ib_logfile* 等文件，配置 innodb_force_recovery = 6 阅读全文

posted @ 2020-12-28 21:20 荣锋亮阅读(969) 评论(0) 推荐(0) 编辑

使用mgob 进行mongodb 数据库备份

摘要：mgob 是就有golang 编写的mongodb 数据库备份工具，支持cron 调度，基于cli （mongodump,minio mc ...）各种工具以及rest api 的模式进行数据的备份管理，实际上我们基于webhook 的模式比如（adnanh/webhook）也是可以解决的，对于阅读全文

posted @ 2020-03-27 22:25 荣锋亮阅读(839) 评论(0) 推荐(0) 编辑

pgloader 学习（五）pgloader 参考手册

摘要：pgloader将各种来源的数据加载到PostgreSQL中。它可以转换动态读取的数据，并在加载前后提交原始SQL。它使用COPY PostgreSQL协议将数据流式传输到服务器，并通过填充一对reject.dat和reject.log文件来管理错误 pgloader 的操作，可以使用命令行参数，阅读全文

posted @ 2019-06-13 14:48 荣锋亮阅读(4322) 评论(0) 推荐(0) 编辑

pgloader 学习（一）支持的特性

摘要：pgloader 是一个不错的多种格式数据同步到pg 的工具，pgloader 使用postrgresql 的copy 协议进行高效的数据同步处理特性加载文件到内容pg 多种数据源格式的支持 csv、fixed 列、dbase、sqlte、ibm ixf、postgresql、mysql、sql 阅读全文

posted @ 2019-06-13 09:19 荣锋亮阅读(639) 评论(0) 推荐(0) 编辑

pgloader 方便的数据迁移工具

摘要：pgloader 是一个支持多种数据源迁移到pg 数据库的工具，高性能，使用灵活同时作者也提供了docker 版本的镜像，今年3月份使用此工具的时候，发现好久都没更新了，但是最近作者有了新版本的发布，同时支持pg to pg，修复了部分bug，同时也有了新的官方文档。同时作者提出的Conti 阅读全文

posted @ 2019-06-12 10:00 荣锋亮阅读(740) 评论(0) 推荐(0) 编辑

redis 设置为只读模式

摘要：数据库的只读模式，对于在系统出现重大故障，但是又不影响用户的查询操作还是很重要的对于redis 设置只读模式需要分不同的场景 master-slave cluster single master-slave 模式这个就比较简单的了，可以使用哨兵自动解决，或者通过命令行 slaveof host 阅读全文

posted @ 2019-05-22 08:57 荣锋亮阅读(9907) 评论(0) 推荐(0) 编辑