bronk

2017年8月15日

摘要：跟mysql类似, hive也有 DDL, 和 DML操作数据类型: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL primitive_type为基本类型, 包括: DDL: 基本语法: 1, 使用简单数据类阅读全文

posted @ 2017-08-15 20:32 bronk 阅读(427) 评论(0) 推荐(0) 编辑

sql-DDL, DML 常用语句

摘要： mysql的安装可见: http://www.cnblogs.com/wenbronk/p/6840484.html 很久不用mysql, 今天建表都不会了, , , 慢慢补充 sql语言分为3种: DDL, DML, DCL DDL ddl的操作主要是针对数据库和数据表的 1, 对数据库的操作 1 阅读全文

posted @ 2017-08-15 10:35 bronk 阅读(8944) 评论(0) 推荐(0) 编辑

2017年8月14日

springboot-27-整合mybatis,druid连接池

摘要： sprinboot整合mybatis, 有2种方式, 第一种完全使用注解的方式, 还有一种就是使用xml文件的方式项目使用gradle + idea, 数据源使用druid, 多使用groovy编写环境配置 1, 依赖 2, user-schame.sql 在springboot的配置文件中, 阅读全文

posted @ 2017-08-14 15:15 bronk 阅读(917) 评论(0) 推荐(0) 编辑

2017年8月12日

22-hadoop-hive搭建

摘要： 1, hive简介 hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduc 阅读全文

posted @ 2017-08-12 22:51 bronk 阅读(434) 评论(0) 推荐(0) 编辑

21-hadoop-weibo推送广告

摘要： 1, tf-idf 计算每个人的词条中的重要度需要3个mapreduce 的 job执行, 第一个计算 TF 和 n, 第二个计算 DF, 第三个代入公式计算结果值 1, 第一个job reduce partition mainJob 2, 第二个 reduce mainjob 3, 第三个Job 阅读全文

posted @ 2017-08-12 17:19 bronk 阅读(463) 评论(0) 推荐(0) 编辑

2017年8月11日

jdk8-lambda-stream的使用

摘要： 1, 认识stream(声明式编程) Stream 不是集合元素，它不是数据结构并不保存数据，它是有关算法和计算的，它更像一个高级版本的 Iterator, 原始版本的Iterator，用户只能一个一个的遍历元素并对其执行某些操作；高级版本的Stream，用户只要给出需要对其包含的元素执行什么操作，阅读全文

posted @ 2017-08-11 14:08 bronk 阅读(1136) 评论(0) 推荐(0) 编辑

2017年8月8日

19-hadoop-fof好友推荐

摘要：好友推荐的案例, 需要两个job, 第一个进行好友关系度计算, 第二个job将计算的关系进行推荐 1, fof关系类 2, user类 3, sort 4, group 5, job 初始文档系列来自尚学堂视频阅读全文

posted @ 2017-08-08 20:04 bronk 阅读(427) 评论(0) 推荐(0) 编辑

18-hadoop-weather案例

摘要： weather案例, 简单分析每年的前三个月的最高温即可, 使用自定义的分组和排序设计分析设定多个reduce 每年的数据都很多，如果按照默认情况处理，统计性能是非常慢（因为默认只有一个reduce），所以我们需要重新分配reduceTask，将一年的数据交给一个reduceTask处理，分区阅读全文

posted @ 2017-08-08 20:01 bronk 阅读(437) 评论(0) 推荐(0) 编辑

geo-经纬度计算

摘要：经纬度计算, 本质上是球面三角函数的应用, 将数学公式转换为代码的过程, 站在前人的肩膀上, 自己又补充了一点: 阅读全文

posted @ 2017-08-08 15:30 bronk 阅读(2212) 评论(0) 推荐(0) 编辑

jdk8-lambda表达式的使用

摘要： 1, 遍历list集合 List<Integer> list = new ArrayList<>(); list.add(1); list.add(2); list.add(3); // 直接打印 list.forEach(System.out::println); // 取值分别操作 list.f 阅读全文

posted @ 2017-08-08 14:24 bronk 阅读(35907) 评论(0) 推荐(0) 编辑

公告