摘要：
报错原因是cron文件管理器没有执行权限，在隐私里面设置即可 今天写了个shell脚本想用定时任务每半小时执行一次 */30 * * * * cd /Users/xxxx/Desktop/ && sh test.sh >>crontab.log 结果生成了一个空的crontab.log 文件，原因是 阅读全文
摘要：
今天在用requests请求业务方接口时疯狂报错：This request has been blocked by WAF，但是在使用postman就可以请求；在网上也没有找到对应的说法； 解决办法思路：用Charles抓了一个postman的数据包，然后把请求为python程序试了一下，结果能请求 阅读全文
摘要：
1、打印每个线程id，满足预期，开启了8个线程，每个线程号都不一样； 2、查看kafka状态，也能满足预期，每个分区的消费者id都是不一样的，下面第二个图是开启一个消费者时的状态，每个分区的消费者id都是相同的；对比之下能满足需求； 3、相关代码如下： from kafka import Kafka 阅读全文
摘要：
乱码示例："propsCut":"å“�牌 花纹 产地 销售版本 è½®èƒ�è§„æ ¼ è´Ÿè�·æŒ‡æ•° è½®è¾‹ç› 阅读全文
摘要：
ElasticSearch(es)的query语法之match 1、查询所有数据： body = { "query": { "match_all": {} }}2、模糊匹配字段查询： body = { "query": { "match": {"trace_stack": "吃饭睡觉"} }}该qu 阅读全文
摘要：
服务器搭建Apache、httpd服务时访问服务显示You don't have permission to access /cdh5.14.0/ on this server 先检查httpd服务是否正常，新建HTML⻚⾯，放置到Apache⽹⻚⽬录中： 1、[root@localhost ~]# 阅读全文
摘要：
问题：重启hadoop后死活打不开DataNode。但是NameNode、SecondaryNameNode，zookeeper也是正常的； 原因：参考https://blog.csdn.net/s243471087/article/details/75113972?utm_medium=distr 阅读全文
摘要：
在搭建k8s集群时需要初始化命令"kubeadm init"，报错误，然后根据提示执行："kubeadm config images pull"，还报错，此处一万匹马在大草原奔腾~~~~~~~ 然后凭借自我感觉以及查询资料得出：是因为要下载k8s.gcr.io的docker镜像，但是国内连不上htt 阅读全文
摘要：
需求背景：在执行一个函数时可能该函数会卡住导致整个程序无法执行，这时候就需要函数超时处理了；举一个具体的例子：python在进行kafka消费数据是通常会取一批数据(例如100个)进行多线程或者多进程处理，但是kafka可能会只剩余20个数据了，这时候就会一直在等待kafka的新数据，而这20条数不 阅读全文
摘要：
1、避免使用使用consumer.poll(timeout_ms=2000,max_records=10)。 该方法的作用，在固定时间内获取到固定数量的数据； 缺点：1）偶尔会出现获取不到数据的情况；2）会出现消费到重复数据的情况；3）会导致kafka出现rebalance的情况，进而使得kafka 阅读全文