摘要: 一、前言 java 中MySQL JDBC 封装了流式查询操作,通过设置几个参数,就可以避免一次返回数据过大导致 OOM。 二、如何使用 2.1 之前查询 2.2 现在流式查询 可知只是prepareStatement时候改变了参数,并且设置了PreparedStatement的fetchsize为 阅读全文
posted @ 2019-08-20 14:58 leon0 阅读(4489) 评论(0) 推荐(2) 编辑
摘要: 需求 (filter): 现在有这么一个需求,统计出现在纽约的行车记录。这里我们需要进行一个过滤的操作,我们需要有个自定义的 UDF ,具体思路是,表里面有经度和维度这两个字段,通过这个可以来开发一个是否在纽约的 UDF。 阅读全文
posted @ 2019-08-20 10:18 leon0 阅读(523) 评论(0) 推荐(0) 编辑
摘要: /** * 获得相等过滤器。相当于SQL的 [字段] = [值] * @param cf 列族名 * @param col 列名 * @param val 值 * @return 过滤器 */ public static Filter eqFilter(String cf, String col, byte[] val) { SingleColumnValueFilter f = new Sing 阅读全文
posted @ 2019-08-20 10:12 leon0 阅读(3086) 评论(0) 推荐(0) 编辑
摘要: 转自: https://www.cnblogs.com/Springmoon-venn/p/10570056.html 先上代码: 直接上报错信息: 报错信息是找不到合适的table factory,查询报错类TableFactoryService.scala 源码214行(报错信息中报错位置) 主 阅读全文
posted @ 2019-08-20 10:04 leon0 阅读(2348) 评论(0) 推荐(0) 编辑