随笔分类 -  存储协议

使用lavinmq 做为minio amqp 消息服务
摘要：环境准备 docker-compose version: '3' services: minio: image: minio/minio ports: - "9000:9000" - "19001:19001" environment: MINIO_ACCESS_KEY: minio MINIO_S 阅读全文

posted @ 2022-12-01 12:42 荣锋亮 阅读(104) 评论(0) 推荐(0) 编辑

minio 对象存储部署一些说明
摘要：一个minio 简单部署使用说明，以前写过一些简单的，主要扩展下，对于优化相关的具体可以参考官方的以及linux 相关优化的文章 参考部署 可靠性玩法 可以开启多版本 开启复制（可以是跨站点，跨minio 集群，以及bucket） 禁用console （MINIO_BROWSER=off），如果需要 阅读全文

posted @ 2022-10-26 20:34 荣锋亮 阅读(545) 评论(0) 推荐(0) 编辑

minio gateway nas 参考配置
摘要：主要记录下运行说明 参考命令 /usr/local/bin/minio gateway nas --help NAME: minio gateway nas - Network-attached storage (NAS) USAGE: minio gateway nas [FLAGS] PATH 阅读全文

posted @ 2022-10-22 01:08 荣锋亮 阅读(888) 评论(0) 推荐(0) 编辑

smb linux 挂载参考说明
摘要：主要记录下linux 挂载smb 的配置以及包含密码的使用说明 软件包准备 yum install cifs-utils 挂载 包含认证的，使用credentials 配置选项 //server_name/share_name /mnt cifs credentials=/root/smb.cred 阅读全文

posted @ 2022-10-22 01:04 荣锋亮 阅读(179) 评论(0) 推荐(0) 编辑

nfs-ganesha linux 用户态文件nfs服务
摘要：nfs-ganesha 是在用户态的一个nfs 服务服务，支持nfsv3，v4，v41，v4.2协议 参考架构 说明 从官方介绍，以及社区的活跃程度，nfs-ganesha 还是一个不错的选择 参考资料 https://github.com/nfs-ganesha/nfs-ganeshahttps: 阅读全文

posted @ 2022-02-27 00:35 荣锋亮 阅读(517) 评论(0) 推荐(0) 编辑

juicefs csi 集成试用
摘要：主要是一个试用，对于k8s 使用了minikube minikube 安装 这个直接可以参考官方文档 (注意可能需要合理上网) curl -LO https://storage.googleapis.com/minikube/releases/latest/minikube-darwin-amd64 阅读全文

posted @ 2022-01-06 00:00 荣锋亮 阅读(256) 评论(0) 推荐(0) 编辑

juicefs 多s3 bucket 使用
摘要：juicefs 支持一个参数--shards 可以在format 的时候进行多bucket 的配置以下是一个简单的试用 环境准备 minio s3 version: "3" services: s3: image: minio/minio environment: - "MINIO_ACCESS_K 阅读全文

posted @ 2021-12-28 13:27 荣锋亮 阅读(465) 评论(0) 推荐(0) 编辑

juicefs s3 gateway 试用
摘要：前边说明juicefs 支持对象存储进行分布式部署，我们以及minio进行了部署测试，以下是测试s3 gateway 目的 我们以及基于s3进行了存储提供，然后又使用s3 gateway 主要是更好的进行文件访问，因为s3 存储的是chunk块文件 基于s3 gateaway 我们可以更好的进行存储 阅读全文

posted @ 2021-12-28 00:09 荣锋亮 阅读(504) 评论(0) 推荐(0) 编辑

使用juicefs 让s3 更好兼容posix协议
摘要：juicefs 是一个很不错的云原生高性能共享文件系统，以下是s3的测试 环境准备 docker-compose version: "3" services: s3: image: minio/minio environment: - "MINIO_ACCESS_KEY=minio" - "MINI 阅读全文

posted @ 2021-12-27 23:52 荣锋亮 阅读(492) 评论(0) 推荐(0) 编辑

dremio 数据格式的一些说明
摘要：内容来自官方文档，主要是关于parquet 的 parquet 限制 - 嵌入级别限制到16 - 数组包含的元素最大到128 - 最大footer 大小限制到16M 推荐配置 说明 官方文档同时也提供了关于delta lake 的说明，也是比较值得看看的 参考资料 https://docs.drem 阅读全文

posted @ 2021-07-03 23:07 荣锋亮 阅读(179) 评论(0) 推荐(0) 编辑

golang 几个面向应用的通用存储层处理包
摘要：以下是整理的一个golang 不错的通用存储层包装，都是不错的选择 说明 gregjones/httpcache也是一个类似的通用cache 应用层包装，我们基于接口可以实现不通的cache支持，同时基于通用的存储处理我们 可以简化应用的开发，数据库驱动也是类似的模式 参考资料 https://gi 阅读全文

posted @ 2020-12-16 23:12 荣锋亮 阅读(167) 评论(0) 推荐(0) 编辑

kubefuse 让Kubernetes 资源成为fuse 文件系统
摘要：kubefuse 是基于fuse 开发的文件系统，我们可以像访问文件系统一样访问Kubernetes 资源,使用python开发 支持以下特性： 可以使用方便的linux tools： ls、 vim 、cat 像文件系统一样查看Kubernetes 资源 像文件系统一样访问Kubernetes 资 阅读全文

posted @ 2019-05-01 17:01 荣锋亮 阅读(841) 评论(0) 推荐(0) 编辑

sshfs 试用
摘要：sshfs 是基于fuse 开发的可以像使用本地系统一样，通过ssh 协议访问远端服务器文件，有好多方便的用途 数据同步 数据加密访问 做为共享数据卷（基于给容器使用） 安装 yum install -y fuse-sshfs 支持的参数 sshfs --help usage: sshfs [use 阅读全文

posted @ 2019-05-01 16:46 荣锋亮 阅读(1071) 评论(0) 推荐(0) 编辑

使用s3fs-fuse 挂载minio s3 对象存储
摘要：minio 是一个aws s3 兼容的对象存储系统，我们可以通过s3fs 进行数据桶的挂载，这样可以做好多方便的事情 环境准备 使用docker-compose 运行 minio docker-compose 文件 version: "3" services: s3: image: minio/mi 阅读全文

posted @ 2019-04-29 14:14 荣锋亮 阅读(10108) 评论(2) 推荐(2) 编辑

How to detect, enable and disable SMBv1, SMBv2, and SMBv3 in Windows and Windows Server
摘要：转自：https://support.microsoft.com/en-us/help/2696547/detect-enable-disable-smbv1-smbv2-smbv3-in-windows-and-windows-server Summary 转自：https://support.m 阅读全文

posted @ 2019-04-18 09:13 荣锋亮 阅读(639) 评论(0) 推荐(0) 编辑

导航

< 2025年3月 >
日 一 二 三 四 五 六
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5
点击右上角即可分享
微信分享提示