摘要： 深入理解kafka 摘自： 《kafka权威指南》 集群间成员关系 Kafka 使用Zoo keeper 来维护集群成员的信息。每个broker 都有一个唯一标识符，这个标识符可以在配置文件里指定，也可以自动生成。在broker 启动的时候，它通过创建临时节点把自己的ID 注册到Zookeeper 阅读全文

摘要： kafka-python的API简单介绍 在官方文档详细列出了kafka-python的API接口https://kafka-python.readthedocs.io/en/master/apidoc/KafkaConsumer.html #send方法的详细说明，send用于向主题发送信息sen 阅读全文

摘要： kafka实战教程(python操作kafka)，kafka配置文件详解 应用往Kafka写数据的原因有很多：用户行为分析、日志存储、异步通信等。多样化的使用场景带来了多样化的需求：消息是否能丢失？是否容忍重复？消息的吞吐量？消息的延迟？ kafka介绍 Kafka属于Apache组织，是一个高性能 阅读全文

摘要： # -- coding: UTF-8 import datetime import json import time from kafka import KafkaProducer producer=KafkaProducer(bootstrap_servers='192.168.10.10:909 阅读全文

摘要： python操作kafka 一、什么是kafka kafka特性： (1) 通过磁盘数据结构提供消息的持久化，这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能. (2) 高吞吐量 ：即使是非常普通的硬件Kafka也可以支持每秒数百万的消息. (3) 支持通过Kafka服务器和消费机集群来 阅读全文

摘要： 一、smtplib模块： 主要通过SMTP类与邮件系统进行交互。使用方法如下： 1.实例化一个SMTP对象： s = smtplib.SMTP(邮件服务地址，端口号) s = smtplib.SMTP_SSL(邮件服务地址，端口号) 2.登陆邮件，权限验证： s.login(用户名，密码) 3.发送 阅读全文

摘要： harbor搭建及使用 1 系统及软件版本 1.1 系统版本 # uname -a Linux localhost.localdomain 3.10.0-862.el7.x86_64 #1 SMP Fri Apr 20 16:44:24 UTC 2018 x86_64 x86_64 x86_64 G 阅读全文

摘要： 一、E 二、L 启动 三、K 四、filebeat 五、配置文件使用 1、logstash-sample.conf # Sample Logstash configuration for creating a simple # Beats -> Logstash -> Elasticsearch p 阅读全文

摘要： ELK技术栈之-Logstash详解 前言 在第九章节中，我们已经安装好Logstash组件了，并且启动实例测试它的数据输入和输出，但是用的是最简单的控制台标准输入和标准输出，那这节我们就来深入的学习Logstash的详细使用。 常用启动参数 我们在上一节中演示了启动Logstash的实例，其中我们 阅读全文

摘要： Logstash配置 一般logstash更常用于ELK日志监控系统，作为数据管道 Logstash：接收，处理，转发日志 Elasticsearch：文档型数据库，实时的分布式搜索和分析引擎 Kibana：查询、生成报表的web GUI Logstash 有两个必要元素：input 和 outpu 阅读全文