2019年9月2日
Flume入门教程-简单案例
摘要： 1.下载安装 Java代码 官方网站：http://flume.apache.org/ http://mirror.bit.edu.cn/apache/flume/1.6.0/apache-flume-1.6.0-bin.tar.gz tar -zxvf apache-flume-1.6.0-bin 阅读全文
posted @ 2019-09-02 11:02 ashaff 阅读(237) 评论(0) 推荐(0) 编辑
最简洁的kafka开发实例
摘要： 问题导读 1.如何启动kafka？ 2.如何通过代码实现生产者例子 ？ 3.如何通过代码实现消费者例子 ？ 1.启动kafka。 //启动zookeeper server (用&是为了能退出命令行)： bin/zookeeper-server-start.sh config/zookeeper.pr 阅读全文
posted @ 2019-09-02 11:00 ashaff 阅读(2064) 评论(0) 推荐(0) 编辑
2019年8月30日
Mysql与Redis的同步实践
摘要： 一、测试环境在Ubuntu kylin 14.04 64bit 已经安装Mysql、Redis、php、lib_mysqludf_json.so、Gearman。 点击这里查看测试数据库及表参考 本文也有些基本操作，在之前文章里有介绍。 1、安装 安装gearman-mysql-udf ? 1 2 阅读全文
posted @ 2019-08-30 17:32 ashaff 阅读(319) 评论(0) 推荐(0) 编辑
maven安装及与eclipse集成
摘要： maven作为一个项目构建工具，在开发的过程中很受欢迎，可以帮助管理项目中的bao依赖问题，另外它的很多功能都极大的减少了开发的难度，下面来介绍maven的安装及与eclipse的集成。 maven的官网地址为：http://maven.apache.org/，打开网页之后，看到最新的版本是3.3. 阅读全文
posted @ 2019-08-30 17:07 ashaff 阅读(134) 评论(0) 推荐(0) 编辑
shell脚本操作mysql数据库
摘要： 使用 mysql -e 参数可以执行各种 sql 的各种操作语句。不用在mysql的提示符下运行mysql，即可以在shell中操作mysql的方法。 格式：mysql -hhostname -Pport -uusername -ppassword -e "" #!/bin/bash HOSTNAM 阅读全文
posted @ 2019-08-30 16:59 ashaff 阅读(1622) 评论(0) 推荐(0) 编辑
python读取日志，存入mysql的代码教程
摘要： 1、下载 1万条日志记录，保存为一个文件，读取文件并解析日志，从日志中提取ip, time_local, http_method, url, http_status, body_bytes_sent , http_referer, ua字段，以制表符分割。 1、下载 1万条日志记录，保存为一个文件， 阅读全文
posted @ 2019-08-30 16:55 ashaff 阅读(759) 评论(0) 推荐(0) 编辑
PHP实现QQ第三方登录代码
摘要： 前言： PHP实现QQ快速登录，罗列了三种方法 方法一：面向过程，回调地址和首次触发登录写到了一个方法页面【因为有了if做判断】， 方法二，三：面向对象 1.先调用登录方法，向腾讯发送请求，2.腾讯携带本网站唯一对应参数OPENID,ACCESSTOKEN，返回到对应回调页面，3.回调页面接受到腾讯 阅读全文
posted @ 2019-08-30 16:36 ashaff 阅读(528) 评论(0) 推荐(0) 编辑
ETL方法与过程讲解
摘要： 1 ETL基本概念和术语 1.1 ETL Extract-Transform-Load的缩写，数据抽取（Extract）、转换（Transform）、装载（Load）的过程。 1.2 DW DataWarehousing，根据Bill.Inmon的定义，“数据仓库是面向主题的、集成的、稳定的、随时间 阅读全文
posted @ 2019-08-30 16:22 ashaff 阅读(1060) 评论(0) 推荐(0) 编辑
php页面传参给shell脚本
摘要： 代码如下： 代码如下： 代码如下： <html> <head> <meta http-equiv="Content-Type" content="text/html; charset=UTF-8" /> <title>MAC search</title> </head> <body align="m 阅读全文
posted @ 2019-08-30 16:15 ashaff 阅读(468) 评论(0) 推荐(0) 编辑