gypsysunny - 博客园

2016年1月21日

摘要： http://suanfazu.com/t/caffe/281 阅读全文

posted @ 2016-01-21 10:01 gypsysunny 阅读(119) 评论(0) 推荐(0) 编辑

摘要： 1、通过用户界面提交SQL 驱动接收SQL2、驱动将SQL传送给编译器 3、编译器获得SQL 检查语法、匹配资源、去metastore查询4、metastore返回相应的数据库字段信息优化SQL、产生执行计划5、驱动接收执行计划将执行计划发送执行引擎6、执行引擎解析6.1、 DDL操作：直... 阅读全文

posted @ 2016-01-21 09:47 gypsysunny 阅读(373) 评论(0) 推荐(0) 编辑

使用Pyspark编写wordcount程序

摘要： # Word count on manuscript using PySpark# import regex moduleimport re# import add from operator modulefrom operator import add# read input filefile_i... 阅读全文

posted @ 2016-01-21 09:42 gypsysunny 阅读(1028) 评论(0) 推荐(0) 编辑

2015年12月6日

某去网的mapreduce面试题

摘要：

阅读全文

posted @ 2015-12-06 10:39 gypsysunny 阅读(1198) 评论(0) 推荐(0) 编辑