摘要: 对于两条流的合并,很多情况我们并不是简单地将所有数据放在一起,而是希望根据某个字段的值将它们联结起来,“配对”去做处理。例如用传感器监控火情时,我们需要将大量温度传感器和烟雾传感器采集到的信息,按照传感器ID分组、再将两条流中数据合并起来,如果同时超过设定阈值就要报警。我们发现,这种需求与关系型数据 阅读全文
posted @ 2022-09-06 11:07 晓枫的春天 阅读(1716) 评论(0) 推荐(0) 编辑
摘要: 问题描述 由于业务需要早上修改了一个固定需求加工逻辑的一个子查询,把修改后的 hivesql 封装成 shell 脚本后执行报错了,运行脚本最后一行提示如下: t1.service_type;: bad substitution 问题分析 经过查询了解到 bad substitution的字面意思, 阅读全文
posted @ 2022-09-06 06:34 晓枫的春天 阅读(1995) 评论(0) 推荐(0) 编辑