摘要：
数据虚拟化 数据存储类型: 结构化:库表 半结构化:html页面 非结构化:excel,xml,文本文件,图片,声音 数据存储形式 数据仓库:一个支持管理决策进程的面向主题的,集成的,随时间变化的,永久保存的数据集合; 数据集市:数据仓库的子集,用于提高部分用户的分析性能; 数据中转区:数据暂存区. 阅读全文
摘要：
移除映射类型(mapping type) es在8.X之前的逻辑存储模型是模拟关系型数据库的三层结构:index(库)-type(表)-document(record).这种结构在7.x时不再推荐使用,8.x的时候会把type移除变成最终的两级结构:index(库)-document(record) 阅读全文
摘要：
基础概念 开篇前先简单铺垫一下,以便于内容的理解: broker 指activemq服务器或消息队列 消费者(consumer),生产者(productor) 生产者:发送消息到消息队列 消费者:从消息队列中接收消息 服务结构图: 虚拟目的地(Virtual Destinations) 为了更灵活的 阅读全文
摘要：
elasticsearch聚合,排序,脚本处理文本数据查询异常 今天执行一个聚合查询操作时发生异常,相关信息如下: 执行聚合查询命令如下: GET /megacorp/_search { "aggs" : { "all_interests" : { "terms" : { "field" : "in 阅读全文
摘要：
常用语法 语法规则 rest curl -X<VERB> '<PROTOCOL>://<HOST>:<PORT>/<PATH>?<QUERY_STRING>' -d '<BODY>' 被 < > 标记的部件： VERB 适当的 HTTP 方法 或 谓词 : GET、 POST、 PUT、 HEAD 阅读全文
摘要：
Elasticsearch安装和基础概念 简述 Elasticsearch组件安装中 是一个实时的分布式搜索分析引擎,它被用作全文检索、结构化搜索、分析以及这三个功能的组合.实际使用中它一般都是通过集群方式对外服务,所以生产中使用时要注意它的实际应用场景.这里为了学习的目的,采用了Elasticse 阅读全文
摘要：
最近看完了Sam Newman的<微服务设计>这本书,数据从整体上介绍了微服务设计的各个方面,这里罗列了一些内容概览,不得不承认,国外的技术人员理论知识是真的扎实,知识面也相当全面,有需求的推荐看一下这本书. 微服务价值: 1 技术异构性 2 弹性 3 扩展 gilt 在线商城 4 简化部署 5 开 阅读全文
摘要：
由于现在python的2.x版本不再维护,实际很多依赖都是3.x的,这里简单介绍一下cento环境如何安装pip3命令. 安装: yum install -y python3-pip 配置镜像加速: nano /root/.pip/pip.conf 这里root是你要安装的登录用户主目录 pip.c 阅读全文
摘要：
六边形架构(Hexagonal Architecture):目的是将输入输出放到设计的边缘.应用独立化,业务逻辑不依赖暴露rest或graphql api,数据来源可以是具体的数据库,外部微服务api,甚至一个文件. 主要是为了解决面向对象开发中,由于分层造成业务逻辑在不同层间耦合的问题.这个模式允 阅读全文
摘要：
包和工具 包为了便于函数复用和封装;实际项目中为了快速开发会引入外部工具包; go编译速度快捷的主要原因: 引入包文件头部显示声明;文件解析只要读头部即可知道依赖关系; 禁止循环依赖;可以独立也可以并发编译; 编译后目标文件记录了包导出信息和依赖关系; 导入路径 import ( "fmt" "ma 阅读全文