2021年10月4日
spark
摘要： 批处理步骤 1构建spark环境 2数据处理 3存储计算结果 hbase key value数据库 hive 结构化数据库 实现spark一致性语义 需要spark自己管理kafka的offset redis 存offset 再把offset取出来 hmaster 协调者用于通信 hregionse 阅读全文
posted @ 2021-10-04 01:08 悬崖听风098 阅读(127) 评论(0) 推荐(0) 编辑