07 2020 档案
摘要：==背景== 数据库：我们的生产环境中有一个设备运行的数据库使用的是InfluxDB，这里面存储了所有设备上报上来的实时运行数据，数据量增速较快。 功能需求：产品有一个叫趋势分析的功能，用来按照不同的算子（mean、max等），不同的时间段（1分钟、30分钟）等对数据进行聚合。 ==版本== 1.7
阅读全文
摘要：==背景== 物联网场景，在设备端写了一个小的API服务程序，这个程序包括： 1、向平台上报设备数据 2、创建消费者客户端，用来监听平台的下行命令 ==问题== 平台层需要知道设备的状态：在线 or 离线。我能想到的解决办法 1、设备上报心跳数据，平台通过心跳来判断设备是否在线。 2、rocketm
阅读全文
摘要：==问题== 在本地Debug调试Flink消费RocketMQ数据的时候，提示如下错误 2020-07-23 16:11:31 [ rexel ] INFO com.rexel.stream.flink.proc.CheckAlarm - [ ]ruleDetailMap.size=2 2020-
阅读全文
摘要：UnitsMeaning ns nanoseconds (1 billionth of a second) u or µ microseconds (1 millionth of a second) ms milliseconds (1 thousandth of a second) s secon
阅读全文
摘要：==打开保护模式== protected-mode yes ==修改默认6379端口== port 8793 ==禁用或者重命名危险命令== 修改 redis.conf 文件，添加 rename-command FLUSHALL "" rename-command FLUSHDB "" rename
阅读全文
摘要：==背景== 给公司搭建了一个建议的大数据平台，组件包括zookeeper、hadoop、flink、influxdb、redis、mysql、rocketmq 因为zookeeper、hadoop是平台的基础组件，打算配置systemctl守护进程，用来挂掉自动重启，以减少运维负担。 ==规划==
阅读全文
摘要：转自：https://blog.csdn.net/zhanglong_4444/article/details/99471770 name description value hadoop.registry.rm.enabled 是否在YARN资源管理器中启用了注册表？ 如果属实，那么YARN RM
阅读全文
摘要：==背景== 阿里云ECS服务器提示“ZooKeeper未授权访问高危风险” ==相关组件及版本== Linux：Centos 8.0 Zookeeper：3.5.6 Hadoop：2.8.3 Flink：1.10.0 ==Zookeeper ACL介绍== 网上随便找一个网站看看就应该可以了解了，
阅读全文
