05 2018 档案

摘要:从3月份到现在2个月过去了,整个数据平台从0到1,算是有了一个基本的样子,跌跌撞撞的勉强支撑起运营的一些基本业务,当然这仅仅是开始,接下来总结下自己这段时间的得失,以及下一阶段的演化目标 关于产品架构的原则可以查看这里,我分了两篇来写: https://www.cnblogs.com/buoge/p 阅读全文
posted @ 2018-05-26 22:54 buoge 阅读(1752) 评论(0) 推荐(0) 编辑
摘要:产品策略 >业务需求 >技术架构 CTO,架构师的职责目标是什么? 产品即架构,架构即产品 通过这段时间在极客时间的学习终于对CTO,架构师的职责有了一定的了解,接下来分几个点来解析: 首先自己是首席技术官,立足技术,要在技术方面有扎实的基本功,广阔的视野,以及快速的学习能结合我自己的情况我一路全栈 阅读全文
posted @ 2018-05-26 21:15 buoge 阅读(1263) 评论(0) 推荐(0) 编辑
摘要:这段时间一直学习极客时间皓哥的分布式架构,关于异步处理有一些感想用sketch做了一个图,展示上直观一些,和大家交流下 阅读全文
posted @ 2018-05-20 11:04 buoge 阅读(560) 评论(0) 推荐(0) 编辑
摘要:前提条件: 数据库容量上亿级别,索引只有id,没有创建时间索引 达到目标: 把阿里云RDS Mysql表数据同步到hive中,按照mysql表数据的创建时间日期格式分区,每天一个分区方便查询 每天运行crontab定时的增量备份数据,还是依据自增的id 遇到的问题: 没法建立创建时间的索引,不能按时 阅读全文
posted @ 2018-05-01 00:14 buoge 阅读(2983) 评论(0) 推荐(0) 编辑