Python向Kafka发消息
后端研发可以提供一个向kafka发消息的接口,用requests向接口post消息就行:
import requests
import json
import time
now = int(time.time())
n = 10
while n > 0:
tt = now - n * 60
data = {
"queue": "alarm-dog-alarm-dog-test",
"payload": "{\"test\":80,\"notice_time\":%d}" % tt
}
header = {"Content-Type": "application/json"}
res = requests.post(url="http://10.90.100.130:8088/v1/kafka/send", headers=header, data=json.dumps(data))
print(res.status_code)
print(res.content)
n -= 1
如果没有提供接口,可以借助python-kafka库连接kafka,模拟生产者向kafka发消息:
同步发送消息:
from kafka import KafkaProducer
import json
# 创建一个KafkaProducer实例,指定Kafka服务器地址
producer = KafkaProducer(bootstrap_servers='http://10.90.100.130:8088')
# 要发送的消息内容
message = {'test': 80, 'notice_time': 5}
# 将消息转换为JSON字符串格式(也可以是其他格式,如纯文本)
message_json = json.dumps(message)
# 发送消息到指定的Kafka主题,这里主题名称是'my_topic'
producer.send('alarm-dog-alarm-dog-test', value=message_json.encode('utf - 8'))
# 确保所有消息都已发送
producer.flush()
# 关闭生产者连接
producer.close()
异步发送消息
from kafka import KafkaProducer
import json
import time
# 创建一个KafkaProducer实例,设置异步发送和回调函数
producer = KafkaProducer(bootstrap_servers='http://10.90.100.130:8088',
acks='all',
retries=3,
value_deliver_callback=lambda m: print(f"消息已发送到主题{m.topic()},分区{m.partition()}"))
# 要发送的消息内容
message = {'test': 80, 'notice_time': 6}
message_json = json.dumps(message)
# 异步发送消息到'my_topic'主题
future = producer.send('alarm-dog-alarm-dog-test', value=message_json.encode('utf - 8'))
try:
record_metadata = future.get(timeout=10)
print(f"消息已发送到主题{record_metadata.topic()},分区{record_metadata.partition()},偏移量{record_metadata.offset()}")
except Exception as e:
print(f"发送消息时出错: {e}")
# 关闭生产者连接
producer.close()
标签:
Python语言
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】凌霞软件回馈社区,博客园 & 1Panel & Halo 联合会员上线
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】博客园社区专享云产品让利特惠,阿里云新客6.5折上折
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· CSnakes vs Python.NET:高效嵌入与灵活互通的跨语言方案对比
· DeepSeek “源神”启动!「GitHub 热点速览」
· 我与微信审核的“相爱相杀”看个人小程序副业
· Plotly.NET 一个为 .NET 打造的强大开源交互式图表库
· 上周热点回顾(2.17-2.23)
2020-11-03 Python--difflib模块