摘要：
ELK=Elasticsearch+Logstash+Kibana ElasticSearch:实时的分布式搜索和分析引擎,与Solr类似；他可以近乎实时的存储和检索数据；建立在Apache Lucene基础上的搜索引擎，使用java语言编写 Elasticsearch特点： 1.实时分析 2.分布 阅读全文
摘要：
一 表结构1.1 医生主表 1.2 医生服务次数表 二 left join查询1.1 on后面加and条件1.1.1 sql语句 1.1.2 查询结果 1.1.3 执行计划 1.2 把条件放在where后面1.2.1 sql语句 1.2.2 查询结果 1.2.3 执行计划 1.3 子查询1.3.1 阅读全文
摘要：
日期函数 (1)时间戳转换 日期格式转换时间戳 unix_timestamp(date,dateformat)不加参数获取当前的时间戳 select unix_timestamp() as time_stamp,unix_timestamp('2018-09-26 9:13:26','yyyy-MM 阅读全文
摘要：
数据仓库概念 1.概念模型设计 所要完成的工作是: (1)界定系统边界 要做的决策类型有哪些？ 决策者感兴趣的是什么问题？ 这些问题需要什么样的信息？ 要得到这样信息需要包含原有数据库哪些数据？ (2)确定主要的主题及其内容: 主题是基于业务来说的，不是技术本身。如果业务能够按照一定规模分割出独立的 阅读全文
摘要：
解释器： 计算机只能识别机器语音，解释器就是讲其他语言C语言、Python等语言翻译成机器语言的工具 解释器分为编译和解释 编译型语言：比如C语言，在自己的环境内编写代码，统一交给编译器，编译器统一对源代码进行翻译，生成可执行文件，由操作系统操作运行交个CPU处理（统一执行） 如果编译器在windo 阅读全文
摘要：
虚拟机： 本质是软件，通过软件模拟具有完整硬件功能、运行在一个完全隔离环境中的完整的计算机系统 比如我们电脑已经是window系统，操作系统操作硬件，但是需要Linux时，就可以安装虚拟机模拟硬件环境，再安装Linux操作系统操作模拟的硬件环境 Linux内核和发行版 内核：是系统的心脏，是运行程序 阅读全文
摘要：
操作系统作用： 1.和计算机上的硬件打交道：如果想要在裸机上运行程序，就必须用机器语言书写程序（机器语言就是01的组合，通过不同的01组合控制CPU、内存、硬盘的操作）操作系统告诉CPU、内存、硬盘该干活了， 2.另外就是将控制硬件的过程封装成了系统调用（系统调用类似封装成方法，调用方法，通过系统调 阅读全文
摘要：
Hive增量更新方案方案一（总结出来业界可行方案）：1、Hive原始表提前规划好以时间分区，初始化装载源库记录为base_table（最新数据）2、每个相关表都会有一个timestamp列，对每一行操作做了修改，都会重置这列timestamp为当前时间戳；3、新增数据通过sqoop（支持当天抽取）或 阅读全文
摘要：
一、环境说明 Linux：Centos 7.2最小化方式安装 JDK：1.8 Kettle：7.1 VMware：14.0.0 build-666132 二、配置CentOS7.2 若安装CentOS7.2时未开启网络，则需要手动修改 /etc/sysconfig/network-scripts/i 阅读全文
摘要：
导入Excel到pdm脚本 在Excel里整理好的表模型数据，可直接导入PowerDesigner。此功能通过PowerDesigner的脚本功能来实现，使用起来也简单。具体操作方法： 打开PowerDesigner，新建模型，点击Tools|Execute Commands|Edit/Run Sc 阅读全文