摘要:
AWS S3提供了删除单个对象和批量删除对象的接口,如下: DeleteObject 请求消息的格式,如下: DELETE /Key+?versionId=VersionId HTTP/1.1 Host: Bucket.s3.amazonaws.com x-amz-mfa: MFA x-amz-re 阅读全文
摘要:
AWS S3 官方文档 Filtering and retrieving data using Amazon S3 Select SQL reference for Amazon S3 Select SELECT command Data types Operators Reserved keywo 阅读全文
摘要:
今天快速浏览了一遍深入理解分布式系统,没有细究,发现作者文笔不错,解答了近期阅读大规模分布式存储系统的几个困惑点。本书内容紧凑,要点清晰,干货满满,值得反复阅读。 阅读全文
摘要:
求大佬推荐学习分布式系统和分布式存储相关的书? 求大佬推荐学习分布式系统和分布式存储相关的书? 极客时间-左耳听风-程序员攻略-分布式架构经典图书和论文 阅读全文
摘要:
使用场景有: 上传对象后,如何确定对象存储收到的数据和客户端本地的数据是否一致。 下载对象后,如何确定本地收到的数据和对象存储保存的数据是否一致。 AWS S3 Checking object integrity 实现完整性校验时,AWS S3提供的算法包括CRC32、CRC32C、SHA-1、SH 阅读全文
摘要:
朱泙漫学屠龙于支离益,单千金之家,三年技成而无所用其巧。 程序员的技能,比如: Windows平台编程,从入行业时至今,没有做过相关的业务,相关的知识只能当成谈资。 Windows平台下应用的crash问题,如何分析。 Windows平台下应用的内存泄漏问题,如何分析。 常见工具、命令的使用。 Li 阅读全文
摘要:
十年前看美丽心灵,完全没有不知所以,只是觉得博弈论很酷,男主是不世出的天才,但和高斯、伽罗华还不太一样,仅此而已。 近来经历了很多,面对种种不如意,回头再看,突然发现悟了,通过编剧的表达,一方面逐步理解了男主,另一方面也理解了编剧的私货。 在剧中,出现了多个重要的角色: 小孩子,隐藏在自己的内心深处 阅读全文
摘要:
为充分提升基础设施相关预算的投资效率,数据安全性,客户的数据可能分布在多套存储中,按照价格、业务场景等,可以划分为如下形式: 本地高端存储,支撑生产类业务 本地低端存储,支撑归档类业务、分析型业务 云端高端存储,支撑生产类业务、分析型业务 云端低端存储,支撑归档类业务 依据不同的规则从不同的存储设备 阅读全文
摘要:
近日被邀请参与产品中一个组件的访问黑名单管理特性的评审,结合近期个人学习的积累,输出本文,作为总结。 按照命题要求,本需求针对访问频繁失败的账户,触发黑名单管理,将账户放入黑名单中。 从上述诉求中,需求明确如下概念: 明确被访问的组件。 访问行为的来源。 如何定义访问是失败的。 将账户放入黑名单之后 阅读全文
摘要:
实现思路 加密特性的方案,涉及如下设计点: 密钥的用途 加密的位置 加密的算法 加密密钥的使用 加密密钥的管理 密钥的用途 密钥的用途分为管理密钥和数据密钥。 管理密钥用于加密数据密钥,需要定期更换,更换成本低;假如管理密钥丢失,则导致数据密钥无法解密,从而丢失数据。 数据密钥用于加密数据,需要妥善 阅读全文