摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 python3.6 一、字符串:字符串实际上就是字符的数组1、切片是指对操作的对象截取其中一部分的操作。字符串、列表、元组都支持切片操作。(1)python中从左侧开始, 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 python3.6 一、条件分支if <条件判断1>: <执行1>elif <条件判断2>: <执行2>elif <条件判断3>: <执行3>else: <执行4> 示例 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 python3.6 一、Python的注释及乱码1、单行注释:以#开头,#右边的所有东西当做说明,而不是真正要执行的程序,起辅助说明作用2、多行注释:’’’多行注释’’’ 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 python2.X python3.X 所谓安装Python,安装的是python代码解释器,负责运行Python程序的。 一、windows下安装PythonPytho 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 jdk1.8 storm-0.9 apache-flume-1.6.0 一、storm三种事务1、普通事务(常用)2、Partitioned Transaction - 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 jdk1.8 storm-0.9 apache-flume-1.6.0 一、Flume+Kafka+Storm架构设计 采集层:实现日志收集,使用负载均衡策略消息队列:作 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 jdk1.8 storm-0.9 一、DRPC DRPC:Distributed remote procedure call,分布式远程过程调用,DRPC是通过一个DRP 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 jdk1.8 scala-2.10.4(依赖jdk1.8) spark-1.6 从kafka消费消息的偏移量存储到ZK 或者 mysql 或者 hbase,进行主动管理。 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 jdk1.8 kafka_2.11-0.11.0.0 zookeeper-3.4.6 生产者: 消费者: 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 jdk1.8 scala-2.10.4(依赖jdk1.8) spark-1.6 一、receiver模式 1、receiver模式理解在SparkStreaming程序运 阅读全文