摘要:
realm桥梁 阅读全文
摘要:
header, 一个例子是: 非常简单,typ顾名思义就是type的意思,例如上面这里就指明是JWT的类型。alg顾名思义是algorithm的意思,指代一个加密算法,例如上面指代HS256(HMAC-SHA256),这个算法会在生成第三部分signature的时候用到。 payload,一个例子是 阅读全文
摘要:
boolquerybuillder 看上面的流程图就能很明显的看到,filter与query还是有很大的区别的。 比如,query的时候,会先比较查询条件,然后计算分值,最后返回文档结果; 而filter则是先判断是否满足查询条件,如果不满足,会缓存查询过程(记录该文档不满足结果);满足的话,就直接 阅读全文
摘要:
二分包 controller 三分包 es text会进行分词再进行索引 keyword不会进行分词 image不需要检索 阅读全文
摘要:
hbase预分区 rowkey确定 读消费的数据 用usber h3算法算出六边形区域 把order数据放入hbase 自定义hbase数据源 spark跑批 计算出虚拟车站 阅读全文
摘要:
批处理步骤 1构建spark环境 2数据处理 3存储计算结果 hbase key value数据库 hive 结构化数据库 实现spark一致性语义 需要spark自己管理kafka的offset redis 存offset 再把offset取出来 hmaster 协调者用于通信 hregionse 阅读全文
摘要:
JMS即Java消息服务(Java Message Service)应用程序接口,是一个Java平台中关于面向消息中间件(MOM)的API,用于在两个应用程序之间,或分布式系统中发送消息,进行异步通信。Java消息服务是一个与具体平台无关的API,绝大多数MOM提供商都对JMS提供支持。JMS是一种 阅读全文
摘要:
数据生产--传输到日志平台--数据存储--数据计算--数据应用 flume 日志服务 消息中间件 kafka 流式处理 flink和spark streaming 批处理 spark 储存 hdfs和hadoop scala语法 * `val`定义的是**不可重新赋值**的变量(值不可修改)* `v 阅读全文
摘要:
恢复内容开始 第一阶段:生成mapper动态代理阶段 第二阶段:获得mapperMothod 对象 恢复内容结束 3.根据sql指令跳转执行语句 恢复内容开始 恢复内容开始 第一阶段:生成mapper动态代理阶段 第二阶段:获得mapperMothod 对象 恢复内容结束 3.根据sql指令跳转执行 阅读全文